Mostrar el registro sencillo del ítem
Modelo para el proceso de extracción, transformación y carga en bodegas de datos. Una aplicación con datos ambientales
dc.creator | Duque Méndez, Néstor Darío | |
dc.creator | Hernández Leal, Emilcy Juliana | |
dc.creator | Pérez Zapata, Ángela María | |
dc.creator | Arroyave Tabares, Adrián Felipe | |
dc.creator | Espinosa Gómez, Daniel Andrés | |
dc.date | 2016-08-01 | |
dc.identifier | https://revistas.unimilitar.edu.co/index.php/rcin/article/view/1799 | |
dc.identifier | 10.18359/rcin.1799 | |
dc.description | Data warehouse management requires a procedure to ensure the accuracy, completeness, and centralization of data when there are several sources of information, thus making the use of specialized applications for Extraction, Transformation, and Loading of Data -ETL- necessary. These applications have conflicts with the parameterization, lack the implementation of correction filters adaptable to the data characteristics, and can demand high costs for their implementation. In this article, it is presented a generic model that applies the stages of ETL and allows monitoring the process to keep a historical record of errors filtered and to calculate indicators to identify quality in processing. Model validation was performed on a case study with environmental data. The model showed satisfactory results. Finally, it is planned to conduct validations of the model in other areas, including new types and data structures. | en-US |
dc.description | La administración de bodegas de datos o datawarehouse requiere de un procesamiento para garantizar la veracidad, integridad y centralización de los datos cuando existen diversas fuentes de información, haciendo necesario utilizar aplicativos especializados para la Extracción, Transformación y Carga de datos (ETL). Estos aplicativos presentan conflictos en su parametrización, carecen de la implementación de filtros de corrección adaptables a las características de los datos y pueden demandar altos costos para su implementación. En el presente artículo se plantea un modelo genérico que aplica las etapas de ETL y permite realizar seguimiento del proceso al mantener un registro histórico de errores filtrados y calcular indicadores para identificar la calidad en el procesamiento. La validación del modelo fue realizada sobre un caso de estudio con datos ambientales. El modelo demostró obtener resultados satisfactorios. Se plantea realizar más validaciones del modelo, en otros ámbitos, incluyendo nuevos tipos y estructuras de datos. | es-ES |
dc.format | application/pdf | |
dc.format | text/html | |
dc.language | spa | |
dc.publisher | Universidad Militar Nueva Granada | es-ES |
dc.relation | https://revistas.unimilitar.edu.co/index.php/rcin/article/view/1799/1535 | |
dc.relation | https://revistas.unimilitar.edu.co/index.php/rcin/article/view/1799/2026 | |
dc.relation | /*ref*/Kimball, R., Ross, M., Thornthwaite, W., Mundy, J. and Becker, B. (2008). The Data Warehouse Lifecycle Toolkit. Indianapolis, USA: Wiley Publishing, Inc. | |
dc.relation | /*ref*/Calabria-Sarmiento, C. J. (2011). Construcción y poblamiento de un datawarehouse basado en el paradigma de bases de datos objeto relacional. Prospect, 9(1), pp. 69-77. | |
dc.relation | /*ref*/Talend (2016). Application Integration. The best way to accelerate delivery of real-time application integration. En: http://www.talend.com/products/application-integration (enero de 2016). | |
dc.relation | /*ref*/Pentaho (2016). Data Integration. Pentaho Community. En: http://community.pentaho.com/projects/data-integration/ (enero de 2016). | |
dc.relation | /*ref*/CloverETL (2016). CloverETL Rapid Data Integration. En: https://www.cloverdx.com/product (enero de 2016). | |
dc.relation | /*ref*/Jaramillo Valbuena, S. y Londo-o, J. M. (2015). Sistemas para almacenar grandes volúmenes de datos. Revista Gerencia Tecnológica Informática, 13(37), pp. 17-28. | |
dc.relation | /*ref*/Van den Hoven, J. (1998). Data Warehousing: Bringing it All Together. Information Systems Management, 15(2), pp. 92-96. doi: 10.1201/1078/43184.15.2.19980301/31127.16 | |
dc.relation | /*ref*/ | |
dc.relation | /*ref*/Han, J., Kamber, M. & Pei, J. (2011). Data Mining: Concepts and Techniques. Waltham, MA, USA: Elsevier. Tercera edición. | |
dc.relation | /*ref*/Chaudhuri, S. & Dayal, U. (1997). An Overview of Data Warehousing and OLAP Technology. ACM SIGMOD Record, 26(1), pp. 65-74. doi: 10.1145/248603.248616 | |
dc.relation | /*ref*/Shi, D., Lee, Y., Duan, X. & Wu, Q. H. (2001). Power system data warehouses. IEEE Computer Applications in Power, 14(3), pp. 49-55. doi: 10.1109/mcap.2001.952937 | |
dc.relation | /*ref*/Tamayo, M. & Moreno, F. J. (2006). Análisis del modelo de almacenamiento MOLAP frente al modelo de almacenamiento ROLAP. Ingeniería e Investigación, 26(3), pp. 135-142. | |
dc.relation | /*ref*/Trujillo, J. & Luján-Mora, S. (2003). A UML Based Approach for Modeling ETL Processes in Data Warehouses. En I.-Y. Song, S. W. Liddle, T.-W. Ling y P. Scheuermann, Conceptual Modeling - ER (2003), Berlin Heidelberg: Eds. Springer, pp. 307-320. doi: 10.1007/978-3-540-39648-2_25 | |
dc.relation | /*ref*/Vassiliadis, P., Simitsis, A. & Skiadopoulos, S. (2002). Conceptual Modeling for ETL Processes. En: Proceedings of the 5th ACM International Workshop on Data Warehousing and OLAP, New York, NY, USA, pp. 14-21. doi: 10.1145/583890.583893 | |
dc.relation | /*ref*/Duque-Méndez, N. D., Orozco-Alzate, M. & Vélez, J. J. (2014). Hydro-meteorological data analysis using OLAP techniques. Revista DYNA, 81(185), pp. 160-167. doi: 10.15446/dyna.v81n185.37700 | |
dc.relation | /*ref*/El-Sappagh, S. H. A., Hendawi, A. M. A. & El Bastawissy, A. H. (2011). A proposed model for data warehouse ETL processes. Journal of King Saud University - Computer and Information Sciences, 23(2), pp. 91-104. doi: 10.1016/j.jksuci.2011.05.005 | |
dc.relation | /*ref*/Guo, S. S., Yuan, Z. M., Sun, A. B. & Yue, Q. (2015). A New ETL Approach Based on Data Virtualization. Journal of Computer Science and Technology, 30(2), pp. 311-323. doi:10.1007/s11390-015-1524-3 | |
dc.relation | /*ref*/Betancur-Calderón, D. & Moreno-Cadavid, J. (2012). Una aproximación multi-agente para el soporte al proceso de extracción-transformación-carga en bodegas de datos. Revista Tecno Lógicas, 28, pp. 89-107. | |
dc.relation | /*ref*/Morales, A. E. (2012). Estadística y probabilidad. Chile. | |
dc.relation | /*ref*/Johnson, R. & Kuby, P. (2012). Estadística elemental. México, D.F.: Cengage Learning. 11° edición, pp. 95-102. | |
dc.rights | Derechos de autor 2016 Ciencia e Ingeniería Neogranadina | es-ES |
dc.source | Ciencia e Ingenieria Neogranadina; Vol. 26 No. 2 (2016); 95-109 | en-US |
dc.source | Ciencia e Ingeniería Neogranadina; Vol. 26 Núm. 2 (2016); 95-109 | es-ES |
dc.source | Ciencia e Ingeniería Neogranadina; v. 26 n. 2 (2016); 95-109 | pt-BR |
dc.source | 1909-7735 | |
dc.source | 0124-8170 | |
dc.subject | Datawarehouses | en-US |
dc.subject | consistency | en-US |
dc.subject | integrity | en-US |
dc.subject | web processing | en-US |
dc.subject | ETL process | en-US |
dc.subject | Bodegas de datos | es-ES |
dc.subject | consistencia | es-ES |
dc.subject | integridad | es-ES |
dc.subject | procesamiento Web | es-ES |
dc.subject | procesos ETL | es-ES |
dc.title | Model for the extraction, transformation and load process in data warehouses. An application with environmental data | en-US |
dc.title | Modelo para el proceso de extracción, transformación y carga en bodegas de datos. Una aplicación con datos ambientales | es-ES |
dc.type | info:eu-repo/semantics/article | |
dc.type | info:eu-repo/semantics/publishedVersion |
Archivos en el ítem
Archivos | Tamaño | Formato | Ver |
---|---|---|---|
No hay archivos asociados a este ítem. |