Google publicó que en un experimento que ordenó 1PB (1.024 terabytes) de datos en seis horas y dos minutos utilizando 4.000 ordenadores. Para poner esta cifra en perspectiva, es 12 veces los datos web archivados por la biblioteca del congreso estadounidense. Para el almacenamiento se utilizaron 48.000 discos duros y para asegurar la integridad de los datos se escribieron tres copias de cada archivo en tres discos diferentes.

El responsable de todo el sistema es la arquitectura de software MapReduce, un framework desarrollado por Google para soportar computación paralela en la inmensa cantidad de datos que mueven los distintos servicios de la compañía, desde el procesado de las imágenes por satélites o el análisis de páginas.

Fuente.

Noticias relacionadas:

1. Google lanza una herramienta para la búsqueda de datos públicos

2. Nueva característica de Google para comparar datos públicos

3. Google junta más datos geográficos

4. Google agrega datos del Banco Mundial a sus resultados

5. Google ahora tambien indexa audio