Cap.14 BIG DATA Y OPEN DATA: EL UNIVERSO DIGITAL DE DATOS
- 1. BIG DATA Y OPEN DATA: EL UNIVERSO DIGITAL DE DATOS Edwin F. Ruiz
- 2. 2007 La consultora tecnológica IDC Corporation (www.idc.com) publicó su primer informe de la información digital almacenada en el mundo en el año 2007 y sus predicciones de crecimiento para el año 2010. Este informe fue patrocinado por la compañía EMC, líder mundial en fabricación de sistemas de almacenamiento.
- 3. 2007 • Algunos de los datos significativos del resumen ejecutivo del primer informe de 2007 eran los siguientes: • En 2006, la cantidad de información digital creada, capturada y guardada (replicated) era de 161 exabytes (una información 3 millones de veces la información contenida en todos los libros escritos hasta esa fecha.
- 4. 2008 • La era del Petabyte fue el título del Artículo publicado en la prestigiosa revista Wired en 2008 y firmada por Chris Anderson, su editor. Este artículo publica un estudio sobre la cantidad de información digital almacenada en el mundo en esas fechas.
- 5. 2008 • Se destaca en el estudio la proliferación de sensores por todas partes, el almacenamiento infinito, nubes de procesadores y se comenta nuestra capacidad para capturar, almacenar y comprender las cantidades masivas de datos (big data) que están cambiando la ciencia, la medición, los negocios y la tecnología.
- 6. 2008 • El estudio presenta unas cifras y unos datos, ya en aquel entonces sorprendentes, en la fecha de la publicación: • 1 Terabyte (TB) era el espacio equivalente a 250.000 canciones almacenadas en medios digitales. • 20 Terabytes, todo el espacio ocupado por las fotos subidas (uploaded) a Facebook cada mes. • 120 Terabytes, todos los datos e imágenes recogidas por el telescopio espacial Hubble. • 460 Terabytes, todos los datos climáticos de los Estados Unidos recopilados en el National Climatic Data Center. • 530 Terabytes, todos los videos de YouTube. • 600 Terabytes, el espacio ocupado por la base de datos genealógica de los Estados Unidos, que incluía los censos de población desde el año 1790 al año 2000. • 1 Petabyte (PB), los datos procesados por los servidores de Google cada 75 minutos.
- 7. 2009 • En 2009 y por tercer año consecutivo IDC volvió a publicar el informe del Universo Digital. • En esta edición, la cifra almacenada en el año 2008 llegó a los 487 de exabytes y daba como dato anecdótico que esta cantidad era el equivalente a 30.000 millones de iPod Touch o 10.000 millones de discos BluRay totalmente cargados, o 162 billones de fotos digitales. Ya en este informe comenzaban a darse datos del impacto de Twitter y otras redes sociales.
- 8. 2009 • El año 2009, pese a los datos de recesión global, el conjunto del Universo Digital creció en un 62%, casi 800.000 Petabytes. Un dibujo de una fila de discos DVD iría de la Tierra a la Luna y regresaría.
- 9. 2010 • La consultora tecnológica IDC Corporation (www.idc.com) publicó su primer informe de la información digital almacenada en el mundo en el año 2007 y sus predicciones de crecimiento para el año 2010. Este informe fue patrocinado por la compañía EMC, líder mundial en fabricación de sistemas de almacenamiento. Los siguientes informes han seguido realizándose patrocinados por la misma compañía EMC bajo la dirección técnica por la consultora IDC
- 10. 2010 • Los datos más sobresalientes del “Universo Digital de la Década” en mayo 2010 eran: • · El año 2009, pese a los datos de recesión global, el conjunto del Universo Digital creció en un 62%, casi 800.000 Petabytes. Un dibujo de una fila de discos DVD iría de la Tierra a la Luna y regresaría. • · El crecimiento previsible para el año 2010 alcanzaría la cifra de 1,2 millones de Petabytes, o sea 1,2 Zettabytes (una unidad de medida hasta ese momento nunca utilizada). • · Este crecimiento explosivo significaba que en 2020 el Universo Digital sería 44 veces más grande que en 2009 (la fila de DVD, ahora podría llegar a la mitad del camino a Marte).
- 11. 2010
- 12. 2011 • IDC y EMC continúan con sus estudios sobre almacenamiento digital y el último informe, “El Universo Digital” de 2011, se presentó el 28 de junio con un nuevo título “2011 Digital Universe Study: Extracting Value from Chaos”. • Las conclusiones más sobresalientes se refieren al hecho de que el volumen de información continúa creciendo a una velocidad espectacular y este crecimiento y los “big data” están transformando todos los aspectos de los negocios y de la sociedad, y controlando los cambios económicos, científicos, tecnológicos y sociales que se están produciendo. Otros aspectos importantes que destaca el estudio se refiere a que la información del mundo se duplica cada dos años y que en 2011 se crearían 1.8 zettabytes, creciendo de un modo más rápido que la conocida Ley de Moore. Las empresas manejarán 50 veces más datos y la cantidad de archivos será 75 veces mayor en la próxima década. Estos datos impulsan oportunidades para los Big Data y nuevas funciones de TI. El universo digital de datos y los big data están impulsando grandes transformaciones y cambios en los ámbitos social, tecnológico, científico y económico.
- 13. 2011
- 14. 2011 • El informe explica la equivalencia del volumen total de 1.8 zettabytes de datos y lo muestra con ejemplos prácticos. Así 1,8 ZB equivalen a: • Que a cada persona del mundo se le practiquen más de 215 millones de resonancias magnéticas de alta resolución por día. • Más de 200,000 millones de películas en HD (cada una de 2 horas de duración): ver esta cantidad de películas le llevaría a una persona dedicada 24 x 7, 47 millones de años.