ETL for the integration of remote sensing data

Autores
Romero Jure, Paula Verónica; Cabral, Juan Bautista; Masuelli, Sergio
Año de publicación
2023
Idioma
inglés
Tipo de recurso
documento de conferencia
Estado
versión publicada
Descripción
Modern in-orbit satellites and other available remote sensing tools have generated a huge availability of public data waiting to be exploited in different formats hosted on different servers. In this context, ETL formalism becomes relevant for the integration and analysis of the combined information from all these sources. Throughout this work, we present the theoretical and practical foundations to build a modular analysis infrastructure that allows the creation of ETLs to download, transform and integrate data coming from different instruments in different formats. Part of this work is already implemented in a Python library which is intended to be integrated into already available workflow management tools based on acyclic-directed graphs which also have different adapters to impact the combined data in different warehouses.
Los satélites modernos que están en órbita y otras herramientas de teledetección disponibles han generado una enorme disponibilidad de datos públicos a la espera de ser explotados, los cuales están alojados en diferentes servidores y en distintos formatos. En este contexto, el formalismo ETL  (Extracción, Transformación y Carga, por sus siglas en inglés) cobra relevancia para la integración y análisis de la información combinada de todas estas fuentes. A lo largo de este trabajo se presentan los fundamentos teóricos y prácticos para construir una infraestructura de análisis modular que permita la creación de ETLs para descargar, transformar e integrar datos procedentes de diferentes instrumentos en distintos formatos. Parte de este trabajo ya está implementado en una librería Python que se pretende integrar en herramientas de gestión de flujos de trabajo ya disponibles basadas en grafos acíclicos-dirigidos que también disponen de diferentes adaptadores para impactar los datos combinados en diferentes warehouses.
Sociedad Argentina de Informática e Investigación Operativa
Materia
Ciencias Informáticas
ETL
Satellite Imagery
Data Processing
Nivel de accesibilidad
acceso abierto
Condiciones de uso
http://creativecommons.org/licenses/by-nc-sa/4.0/
Repositorio
SEDICI (UNLP)
Institución
Universidad Nacional de La Plata
OAI Identificador
oai:sedici.unlp.edu.ar:10915/165724
Acceder
id SEDICI_83cc0b925bb4867893820adb4fdb6929
oai_identifier_str oai:sedici.unlp.edu.ar:10915/165724
network_acronym_str SEDICI
repository_id_str 1329
network_name_str SEDICI (UNLP)
spelling ETL for the integration of remote sensing dataRomero Jure, Paula VerónicaCabral, Juan BautistaMasuelli, SergioCiencias InformáticasETLSatellite ImageryData ProcessingModern in-orbit satellites and other available remote sensing tools have generated a huge availability of public data waiting to be exploited in different formats hosted on different servers. In this context, ETL formalism becomes relevant for the integration and analysis of the combined information from all these sources. Throughout this work, we present the theoretical and practical foundations to build a modular analysis infrastructure that allows the creation of ETLs to download, transform and integrate data coming from different instruments in different formats. Part of this work is already implemented in a Python library which is intended to be integrated into already available workflow management tools based on acyclic-directed graphs which also have different adapters to impact the combined data in different warehouses.Los satélites modernos que están en órbita y otras herramientas de teledetección disponibles han generado una enorme disponibilidad de datos públicos a la espera de ser explotados, los cuales están alojados en diferentes servidores y en distintos formatos. En este contexto, el formalismo ETL  (Extracción, Transformación y Carga, por sus siglas en inglés) cobra relevancia para la integración y análisis de la información combinada de todas estas fuentes. A lo largo de este trabajo se presentan los fundamentos teóricos y prácticos para construir una infraestructura de análisis modular que permita la creación de ETLs para descargar, transformar e integrar datos procedentes de diferentes instrumentos en distintos formatos. Parte de este trabajo ya está implementado en una librería Python que se pretende integrar en herramientas de gestión de flujos de trabajo ya disponibles basadas en grafos acíclicos-dirigidos que también disponen de diferentes adaptadores para impactar los datos combinados en diferentes warehouses.Sociedad Argentina de Informática e Investigación Operativa2023-09info:eu-repo/semantics/conferenceObjectinfo:eu-repo/semantics/publishedVersionObjeto de conferenciahttp://purl.org/coar/resource_type/c_5794info:ar-repo/semantics/documentoDeConferenciaapplication/pdfhttp://sedici.unlp.edu.ar/handle/10915/165724enginfo:eu-repo/semantics/altIdentifier/url/https://publicaciones.sadio.org.ar/index.php/JAIIO/article/view/585info:eu-repo/semantics/altIdentifier/issn/2451-7496info:eu-repo/semantics/openAccesshttp://creativecommons.org/licenses/by-nc-sa/4.0/Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International (CC BY-NC-SA 4.0)reponame:SEDICI (UNLP)instname:Universidad Nacional de La Platainstacron:UNLP2025-09-29T11:43:51Zoai:sedici.unlp.edu.ar:10915/165724Institucionalhttp://sedici.unlp.edu.ar/Universidad públicaNo correspondehttp://sedici.unlp.edu.ar/oai/snrdalira@sedici.unlp.edu.arArgentinaNo correspondeNo correspondeNo correspondeopendoar:13292025-09-29 11:43:51.892SEDICI (UNLP) - Universidad Nacional de La Platafalse
dc.title.none.fl_str_mv ETL for the integration of remote sensing data
title ETL for the integration of remote sensing data
spellingShingle ETL for the integration of remote sensing data
Romero Jure, Paula Verónica
Ciencias Informáticas
ETL
Satellite Imagery
Data Processing
title_short ETL for the integration of remote sensing data
title_full ETL for the integration of remote sensing data
title_fullStr ETL for the integration of remote sensing data
title_full_unstemmed ETL for the integration of remote sensing data
title_sort ETL for the integration of remote sensing data
dc.creator.none.fl_str_mv Romero Jure, Paula Verónica
Cabral, Juan Bautista
Masuelli, Sergio
author Romero Jure, Paula Verónica
author_facet Romero Jure, Paula Verónica
Cabral, Juan Bautista
Masuelli, Sergio
author_role author
author2 Cabral, Juan Bautista
Masuelli, Sergio
author2_role author
author
dc.subject.none.fl_str_mv Ciencias Informáticas
ETL
Satellite Imagery
Data Processing
topic Ciencias Informáticas
ETL
Satellite Imagery
Data Processing
dc.description.none.fl_txt_mv Modern in-orbit satellites and other available remote sensing tools have generated a huge availability of public data waiting to be exploited in different formats hosted on different servers. In this context, ETL formalism becomes relevant for the integration and analysis of the combined information from all these sources. Throughout this work, we present the theoretical and practical foundations to build a modular analysis infrastructure that allows the creation of ETLs to download, transform and integrate data coming from different instruments in different formats. Part of this work is already implemented in a Python library which is intended to be integrated into already available workflow management tools based on acyclic-directed graphs which also have different adapters to impact the combined data in different warehouses.
Los satélites modernos que están en órbita y otras herramientas de teledetección disponibles han generado una enorme disponibilidad de datos públicos a la espera de ser explotados, los cuales están alojados en diferentes servidores y en distintos formatos. En este contexto, el formalismo ETL  (Extracción, Transformación y Carga, por sus siglas en inglés) cobra relevancia para la integración y análisis de la información combinada de todas estas fuentes. A lo largo de este trabajo se presentan los fundamentos teóricos y prácticos para construir una infraestructura de análisis modular que permita la creación de ETLs para descargar, transformar e integrar datos procedentes de diferentes instrumentos en distintos formatos. Parte de este trabajo ya está implementado en una librería Python que se pretende integrar en herramientas de gestión de flujos de trabajo ya disponibles basadas en grafos acíclicos-dirigidos que también disponen de diferentes adaptadores para impactar los datos combinados en diferentes warehouses.
Sociedad Argentina de Informática e Investigación Operativa
description Modern in-orbit satellites and other available remote sensing tools have generated a huge availability of public data waiting to be exploited in different formats hosted on different servers. In this context, ETL formalism becomes relevant for the integration and analysis of the combined information from all these sources. Throughout this work, we present the theoretical and practical foundations to build a modular analysis infrastructure that allows the creation of ETLs to download, transform and integrate data coming from different instruments in different formats. Part of this work is already implemented in a Python library which is intended to be integrated into already available workflow management tools based on acyclic-directed graphs which also have different adapters to impact the combined data in different warehouses.
publishDate 2023
dc.date.none.fl_str_mv 2023-09
dc.type.none.fl_str_mv info:eu-repo/semantics/conferenceObject
info:eu-repo/semantics/publishedVersion
Objeto de conferencia
http://purl.org/coar/resource_type/c_5794
info:ar-repo/semantics/documentoDeConferencia
format conferenceObject
status_str publishedVersion
dc.identifier.none.fl_str_mv http://sedici.unlp.edu.ar/handle/10915/165724
url http://sedici.unlp.edu.ar/handle/10915/165724
dc.language.none.fl_str_mv eng
language eng
dc.relation.none.fl_str_mv info:eu-repo/semantics/altIdentifier/url/https://publicaciones.sadio.org.ar/index.php/JAIIO/article/view/585
info:eu-repo/semantics/altIdentifier/issn/2451-7496
dc.rights.none.fl_str_mv info:eu-repo/semantics/openAccess
http://creativecommons.org/licenses/by-nc-sa/4.0/
Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International (CC BY-NC-SA 4.0)
eu_rights_str_mv openAccess
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc-sa/4.0/
Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International (CC BY-NC-SA 4.0)
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:SEDICI (UNLP)
instname:Universidad Nacional de La Plata
instacron:UNLP
reponame_str SEDICI (UNLP)
collection SEDICI (UNLP)
instname_str Universidad Nacional de La Plata
instacron_str UNLP
institution UNLP
repository.name.fl_str_mv SEDICI (UNLP) - Universidad Nacional de La Plata
repository.mail.fl_str_mv alira@sedici.unlp.edu.ar
_version_ 1844616306483003392
score 13.070432

Publicaciones similares