Por qué hacemos persistencia de datos
0 recomendaciones1,680 vistas
Este documento trata sobre la persistencia de datos. Explica que la persistencia de datos permite recordar el valor de variables luego de finalizar la ejecución de un programa. Luego describe brevemente la evolución de los medios de almacenamiento de datos y los diferentes enfoques para la persistencia como las bases de datos relacionales y NoSQL. Finalmente, discute la importancia de considerar la calidad de servicio requerida dependiendo del uso que se le dará a los datos.
Por qué hacemos persistencia de datos
- 1. El autor del presente documento lo ha publicado bajo las condiciones que especifica la licencia Creative Commons Attribution-NonCommercial-ShareAlike 3.0 http://creativecommons.org/licenses/by-nc-sa/3.0/ En caso de dudas escriba a: info@atmantree.com
- 2. ¿POR QUÉ HACEMOS PERSISTENCIA DE DATOS?
- 3. ¿POR QUÉ HACEMOS PERSISTENCIA DE DATOS? Ing. Carlos Gustavo Ruiz @atmantree http://atmantree.com Y PARA QUÉ
- 4. Agenda ● Breve presentación ● Qué se entiende como persistencia de datos ● Cómo podemos hacer persistencia de datos ● Gestores de Bases de Datos ● Entre Ácidos y Bases ● Define Calidad de Servicio ● De lo micro a lo macro (embebidos -> BigData)
- 5. Presentación Mi nombre es Carlos Gustavo Ruiz Ingeniero en Sistemas Consultor && Programador && Voluntario
- 6. Presentación Mi nombre es Carlos Gustavo Ruiz Ingeniero en Sistemas Consultor && Programador && Voluntario ActualmenteActualmente: CNTI INDENE - USB GDC - UCV Min Defensa ... ActualmenteActualmente: Python Venezuela TuBaseDeDatosLibre.org OpenVE Geomática Libre Vzla ... ActualmenteActualmente: Python C++ JavaScript PL/pgSQL ...
- 7. Persistencia de Datos Cuando queremos saber o recordar:
- 8. Persistencia de Datos Cuando queremos saber o recordar: Eventos relevantes del siglo XIV La música de moda en los 60 Definición de polainas Cuantos cheques emití el mes pasado Cuanto cabello tenía hace 10 años Quién cantó a Juan Pablo II en Caracas Quién fue Luis XV Cómo sellamaba el papá de Francisco deMiranda Cuales son los m ilagros de José G regorio Hernández Cuáleraelsalario mínimoen1983 La letra del la canción “sopa de caracol” Quésonloswoperó Quién inventó el Record Guiness Qué dice el 3 er m andam iento Quien está saliendo con Diosa Canales Qué es la teoría de la Relatividad Contenido de la ley de infogobierno Como llegar a La Estacada en Apure Qué significaPersistencia enSistemas
- 9. Persistencia de Datos Cuando queremos saber o recordar: ...buscamos recursos y fuentes como libros, periódicos, retratos, fotos, partituras, registros, etc. Eventos relevantes del siglo XIV La música de moda en los 60 Definición de polainas Cuantos cheques emití el mes pasado Cuanto cabello tenía hace 10 años Quién cantó a Juan Pablo II en Caracas Quién fue Luis XV Cómo sellamaba el papá de Francisco deMiranda Cuales son los m ilagros de José G regorio Hernández Cuáleraelsalario mínimoen1983 La letra del la canción “sopa de caracol” Quésonloswoperó Quién inventó el Record Guiness Qué dice el 3 er m andam iento Quien está saliendo con Diosa Canales Qué es la teoría de la Relatividad Contenido de la ley de infogobierno Como llegar a La Estacada en Apure Qué significaPersistencia enSistemas
- 10. Persistencia de Datos Cuando queremos recordar el valor de una variable luego de la finalizar la ejecución de un programa entonces..
- 11. Persistencia de Datos Cuando queremos recordar el valor de una variable luego de la finalizar la ejecución de un programa entonces.. Hacemos persistencia de datos
- 12. Desde el punto de vista del Hardware podemos ver a la persistencia como una “evolución” de medios de almacenamiento El cómo de la Persistencia de Datos
- 13. El cómo de la Persistencia de Datos Tarjetas Perforadas (1725-1880)
- 14. El cómo de la Persistencia de Datos Tubo de Williams (1945) y Memoria de Tambor (1950)
- 15. El cómo de la Persistencia de Datos Cintas Magnéticas (1951) y Discos Duros (1956)
- 16. El cómo de la Persistencia de Datos Etapa de la Miniaturización (1972 - 1987)
- 17. El cómo de la Persistencia de Datos La Etapa del Laser (1990 - 2008)
- 18. El cómo de la Persistencia de Datos La Nueva Etapa del Almacenamiento Fuente: http://mashable.com/2011/10/08/digital-storage-infographic/
- 19. Desde el punto de lógico se ha avanzado en mejorar el almacenamiento de datos a partir de 2 tipos de archivos básicos, textos planos y binarios. Sin embargo la potencia no viene estrictamente de la estructura básica del medio de almacenamiento sino de los mecanismos para hacerlo. El cómo de la Persistencia de Datos
- 20. El cómo de la Persistencia de Datos Ejemplos de archivos de datos en texto plano: ● Texto delimitado – Por columnas, comas, caracteres especiales o tabuladores ● Lenguajes marcados – El más difundido es XML ● Formatos de Intercambio – El favorito del momento es JSON
- 21. El cómo de la Persistencia de Datos Ejemplos de archivos de datos en formato binario: ● Generalmente cualquier dato almacenado en una suite ofimática está en formato binario ● Tradicionalmente se le colocaba la extensión .dat a este tipo de archivos ● Información de niveles digitales como señales o píxeles (en caso de imágenes) ● Archivos de texto plano comprimidos
- 22. Para estructurar los datos entonces se recurren a diversos métodos: ● Organización Jerárquica de acceso al filesystem (siguiendo la estructura de directorios) ● Manejados desde una capa gestora de abstracción de los datos (separando la implementación de la presentación) El cómo de la Persistencia de Datos
- 23. Gestores de Bases de Datos Los Gestores de bases de datos son una capa de abstracción que permite desentendernos de los pormenores de guardar el dato y concentrarnos en lo que para nosotros es importante, la lógica de nuestros procesos y del negocio. Un buen gestor de base de datos debe garantizar la durabilidad de los datos, sin embargo también debe parecerse a nuestro trabajo.
- 24. Gestores de Bases de Datos En tal sentido, no queda duda que CAP es el origen de los problemas al elegir un gestor de base de datos.
- 25. Gestores de Bases de Datos CConsistency AAvailability PPartition Tolerance Fuente: http://es.wikipedia.org/wiki/Teorema_CAP
- 26. Gestores de Bases de Datos CConsistency: que todos los nodos vean la misma información al mismo tiempo
- 27. Gestores de Bases de Datos AAvailability: la garantía de que cada petición a un nodo reciba una confirmación de si ha sido o no resuelta satisfactoriamente
- 28. Gestores de Bases de Datos PPartition Tolerance: que el sistema siga funcionando a pesar de algunas pérdidas arbitrarias de información o fallos parciales del sistema a menos que todos los nodos fallen el sistema puede seguir funcionando
- 29. Gestores de Bases de Datos ¿Qué hay con esto?
- 30. Gestores de Bases de Datos Que solo puedes tomar simultáneamente 2 de los 3 Fuente: http://es.wikipedia.org/wiki/Teorema_CAP
- 31. Gestores de Bases de Datos Si, como cuando eliges entre: tener vida social, buenas calificaciones y dormir
- 32. Ácidos y Bases Si solamente podemos seleccionar 2 de las tres características dentro de un sistema de cómputo distribuido entonces hay que hacer una selección adecuada.
- 36. Ácidos y Bases AAtomicity: propiedad que asegura que la operación se ha realizado o no, y por lo tanto ante un fallo del sistema no puede quedar a medias. (Atomicidad)
- 37. Ácidos y Bases CConsistency: propiedad que asegura que sólo se empieza aquello que se puede acabar. Por lo tanto se ejecutan aquellas operaciones que no van a romper las reglas y directrices de integridad de la base de datos
- 38. Ácidos y Bases IIsolation: propiedad que asegura que una operación no puede afectar a otras. Esto asegura que la realización de dos transacciones sobre la misma información sean independientes y no generen ningún tipo de error. (Aislamiento)
- 39. Ácidos y Bases DDurability: propiedad que asegura que una vez realizada la operación, ésta persistirá y no se podrá deshacer aunque falle el sistema. (Durabilidad)
- 40. Ácidos y Bases En este renglón se encuentran las bases de datos relacionales y SQL como idioma casi universal. Es un estándar para muchos aspectos de la industria.
- 42. Ácidos y Bases BBasically AAvailable SSoft state EEventual consistency
- 43. Ácidos y Bases BASEBASE: utiliza un enfoque optimista permitiendo que la consistencia se entienda como un estado de cambio continuo. Este enfoque es ideal para manejo de gran volumen de datos. Fuente: http://queue.acm.org/detail.cfm?id=1394128
- 44. Ácidos y Bases Este enfoque agrupa a las bases de datos que se conocen como NoSQL. Es un nuevo estándar para las aplicaciones en la internet pues permite escalar horizontalmente de forma transparente.
- 45. Calidad Antes de comenzar a hablar de la calidad, vamos a hacernos de nuevo la siguiente pregunta.
- 46. Calidad Antes de comenzar a hablar de la calidad, vamos a hacernos de nuevo la siguiente pregunta. ¿por qué hacemos persistencia de datos?
- 47. Calidad La primera respuesta pudiese ser que es porque los programas terminan su ejecución y no quisiera tener que reescribir todas mis cartas cada vez que enciendo el PC. La primera respuesta pudiese ser que es porque los programas terminan su ejecución y no quisiera tener que reescribir todas mis cartas cada vez que enciendo el PC.
- 48. Calidad Sin embargo esta es una respuesta ingenua.
- 49. Calidad Persistimos los datos porque tenemos procesos asociados a esos programas que inician y terminan su ejecución. Nóminas, Mensajería, Ofimática, Sistemas de Análisis, Modelado y Simulaciones, Dibujo y Diseño Asistido por Computador, CRM, ERP, Prospección Petrolera, Procesos Industriales, Asistentes de Vuelo, Encuestas, Planificación, Promoción, Planes de Formación.. y un largo etcétera.
- 50. Calidad Sin esos datos almacenados y disponibles luego de finalizar nuestros programas entonces nos encontraremos sin las referencias para recordar que pasó ayer.
- 51. Calidad
- 52. Calidad La calidad dependerá de nuestra siguiente pregunta..
- 53. Calidad La calidad dependerá de nuestra siguiente pregunta.. ¿para qué hacemos persistencia de datos?
- 54. Calidad La primera respuesta pudiese ser que es porque los programas terminan su ejecución y no quisiera tener que reescribir todas mis cartas cada vez que enciendo el PC. Dependiendo del uso que vaya a darse los datos se tendrá que dar prioridad a alguna de las tres características de los sistemas distribuidos.
- 55. Calidad La primera respuesta pudiese ser que es porque los programas terminan su ejecución y no quisiera tener que reescribir todas mis cartas cada vez que enciendo el PC. CConsistency AAvailability PPartition Tolerance
- 56. Calidad La primera respuesta pudiese ser que es porque los programas terminan su ejecución y no quisiera tener que reescribir todas mis cartas cada vez que enciendo el PC. La calidad viene entonces dada por el uso, si su proceso está asociado a una nómina, por ejemplo la consistencia eventual es inaceptable.
- 57. Calidad La primera respuesta pudiese ser que es porque los programas terminan su ejecución y no quisiera tener que reescribir todas mis cartas cada vez que enciendo el PC. En cambio si usted se encarga de indexar la vida social de sus usuarios, el parloteo de millones de personas en la red, o el contenido de las páginas de la internet, entonces el tema de la consistencia eventual se convierte en LA alternativa debido a la dimensión de su problema.
- 58. ..de lo micro a lo macro Veamos un ejemplo cotidiano.. al menos hoy en día.. ¿Alguien tiene un celular como alguno de estos?
- 59. ..de lo micro a lo macro
- 60. ..de lo micro a lo macro Bueno tal vez no esos modelos exactamente, pero hay buen chance que tengan un smartphone. Bueno, su teléfono es un buen ejemplo de las bases de datos y sus enfoques actuales.
- 61. ..de lo micro a lo macro Si su amigo Juan (todos tenemos un amigo llamado Juan) escribe una actualización en Facebook, ¿es realmente importante que la reciba al segundo de publicada?
- 62. ..de lo micro a lo macro Probablemente lo importante es que eventualmente usted reciba el mensaje en su timeline y se entere que Juan es papá. Unos minutos no harán gran diferencia.
- 63. ..de lo micro a lo macro
- 64. ..de lo micro a lo macro Sin embargo, en nuestro celular no es aceptable que eventualmente podamos realizar una llamada. Es por ello que especialmente los sistemas prepago deben asegurar saber al instante cual es su saldo. Sin embargo, en nuestro celular no es aceptable que eventualmente podamos realizar una llamada. Es por ello que especialmente los sistemas prepago deben asegurar saber al instante cual es su saldo. Sin embargo, en nuestro celular no es aceptable que eventualmente podamos realizar una llamada. Es por ello que especialmente los sistemas prepago deben asegurar saber al instante cual es su saldo.
- 65. ..de lo micro a lo macro Sin embargo, en nuestro celular no es aceptable que eventualmente podamos realizar una llamada. Es por ello que especialmente los sistemas prepago deben asegurar saber al instante cual es su saldo. Sin embargo, en nuestro celular no es aceptable que eventualmente podamos realizar una llamada. Es por ello que especialmente los sistemas prepago deben asegurar saber al instante cual es su saldo. Por otro lado dentro de su dispositivo hay pequeñas bases de datos como la que contiene su lista de contactos. Puede que eventualmente concilie la información con un servicio en red, sin embargo debe estar disponible inmediatamente al momento de buscar en la copia local.
- 66. Algo más?
- 68. Algo más? Información de Contacto @atmantree http://atmantree.com http://tubasededatoslibre.org