Cuantificación de la incertidumbre en los pronósticos usando redes neuronales : aplicación en asimilación de datos
- Autores
- Sacco, Maximiliano Antonio
- Año de publicación
- 2023
- Idioma
- español castellano
- Tipo de recurso
- tesis doctoral
- Estado
- versión publicada
- Colaborador/a o director/a de tesis
- Ruiz, Juan José
Pulido, Manuel Arturo - Descripción
- Hasta el momento, la metodología más usada para la estimación de la incertidumbre en los pronósticos meteorológicos es la técnica de ensambles. En esta tesis buscamos estimar la incertidumbre usando redes neuronales artificiales (RNAs) a partir de un único pronóstico determinístico (una única integración del modelo). Para esto se entrenaron RNAs usando una nueva función de costo basada en el error, en inglés extended Mean Squared Error (eMSE), y se estudió la calidad de la incertidumbre estimada comparándola con entrenamientos con funciones de costo tradicionales (función de verosimilitud) y con la técnica de ensambles. En primera medida, se evaluó la estimación de la varianza de los pronósticos. Las redes mostraron un buen desempeño para capturar la incertidumbre (varianzas) en un entorno de prueba basado en el modelo dinámico multi-escala de Lorenz’96 que simula las características de la predictibilidad atmosférica, tanto en un escenario de modelo perfecto (donde se analiza el impacto del error presente en las condiciones iniciales), como en un escenario de modelo imperfecto (cuando el modelo numérico no puede representar todas las escalas del problema e introduce error en el pronóstico). En un desarrollo posterior, se entendió la función de costo eMSE para la estimación de la matriz de covarianza completa. Esta metodología resultó ser mucho más estable numéricamente y más rápida de entrenar comparado con funciones de costo basadas en la verosimilitud que necesitan invertir la matriz de covarianza. Se diseñó un método de asimilación de datos, en inglés Data Assimilation (DA) que combina la técnica del filtro de Kalman con la estimación de matriz de covarianza del error de pronóstico (MCEP) usando RNAs que denominamos UnnKF . Esta metodología nos permitió generar largas secuencias de ciclos de DA (más de 15.000 ciclos consecutivos) usando observaciones parciales del estado del sistema. Se obtuvo una secuencia de análisis cuyo error cuadrático medio (MSE) es comparable al obtenido por la técnica del filtro de Kalman por ensambles, en inglés Ensemble Kalman Filter (EnKF) usando grandes ensambles y logra disminuir considerablemente el MSE de los análisis comparado con un ensamble pequeño.
The ensemble technique is currently the most widely used method for estimating uncertainty in weather forecasts. The drawback of this technique is that it requires multiple numerical integrations of models and thus a lot of computational power. In this thesis we attempt to estimate uncertainty using Artificial Neural Networks (RNA) and a single deterministic prediction (a single model integration). For this purpose, RNA were trained with a new cost function (eMSE) and the quality of the uncertainty estimated in this way was studied by comparing it with training with traditional cost functions (likelihood function) and with the ensemble technique. First, the estimation of the variance of the forecasts was evaluated. The networks showed good performance in capturing uncertainty (variances) in a test environment based on the Lorenz’96 multiscale dynamic model that simulates the characteristics of atmospheric predictability, both in a perfect model scenario (where the impact of the error present in the initial conditions is analysed) and in an imperfect model scenario (when the numerical model cRNAot represent all the scales of the problem and introduces errors in the forecast). We also investigated extending the eMSE cost function to estimate the full covariance matrix. This method proved to be much more numerically stable and faster to train than likelihood-based cost functions, which require the covariance matrix to be inverted. In addition to analysing the structural characteristics of the estimated covariances, a hybrid data assimilation system (UnnKF) based on the Kalman filter was designed to provide an analysis of the system state using the covariances estimated by the RNA, partial observations of the system and a deterministic forecast. The results obtained are very encouraging. The covariances estimated by RNA trained with the eMSE cost function and the hybrid UnnKF methodology robustly estimate long assimilation sequences (more than 15,000 consecutive cycles), obtaining an analysis sequence whose mean squared error (MSE) is comparable to that obtained by the ensemble assimilation technique (EnKF) for large ensembles, and manages to significantly reduce the MSE of the analysis compared to a small ensemble.
Fil: Sacco, Maximiliano Antonio. Universidad de Buenos Aires. Facultad de Ciencias Exactas y Naturales; Argentina. - Materia
-
DINAMICA CAOTICA
MODELOS DE ALTA DIMENSIONALIDAD
RED NEURONAL
CUANTIFICACION DE LA INCERTIDUMBRE
ESTIMACION DE LA COVARIANZA
ASIMILACION DE DATOS
CHAOTIC DYNAMIC
HIGH-DIMENTIONAL MODELS
NEURAL NETWORK
UNCERTAINTY QUANTIFICATION
COVARIANCE ESTIMATION
DATA ASSIMILATION - Nivel de accesibilidad
- acceso abierto
- Condiciones de uso
- https://creativecommons.org/licenses/by-nc-sa/2.5/ar
- Repositorio
- Institución
- Universidad Nacional de Buenos Aires. Facultad de Ciencias Exactas y Naturales
- OAI Identificador
- tesis:tesis_n7459_Sacco
Ver los metadatos del registro completo
id |
BDUBAFCEN_9f532b264cd9f502f460ee796974eb0c |
---|---|
oai_identifier_str |
tesis:tesis_n7459_Sacco |
network_acronym_str |
BDUBAFCEN |
repository_id_str |
1896 |
network_name_str |
Biblioteca Digital (UBA-FCEN) |
spelling |
Cuantificación de la incertidumbre en los pronósticos usando redes neuronales : aplicación en asimilación de datosQuantification of forecast uncertainty using neural networks : application to data assimilationSacco, Maximiliano AntonioDINAMICA CAOTICAMODELOS DE ALTA DIMENSIONALIDADRED NEURONALCUANTIFICACION DE LA INCERTIDUMBREESTIMACION DE LA COVARIANZAASIMILACION DE DATOSCHAOTIC DYNAMICHIGH-DIMENTIONAL MODELSNEURAL NETWORKUNCERTAINTY QUANTIFICATIONCOVARIANCE ESTIMATIONDATA ASSIMILATIONHasta el momento, la metodología más usada para la estimación de la incertidumbre en los pronósticos meteorológicos es la técnica de ensambles. En esta tesis buscamos estimar la incertidumbre usando redes neuronales artificiales (RNAs) a partir de un único pronóstico determinístico (una única integración del modelo). Para esto se entrenaron RNAs usando una nueva función de costo basada en el error, en inglés extended Mean Squared Error (eMSE), y se estudió la calidad de la incertidumbre estimada comparándola con entrenamientos con funciones de costo tradicionales (función de verosimilitud) y con la técnica de ensambles. En primera medida, se evaluó la estimación de la varianza de los pronósticos. Las redes mostraron un buen desempeño para capturar la incertidumbre (varianzas) en un entorno de prueba basado en el modelo dinámico multi-escala de Lorenz’96 que simula las características de la predictibilidad atmosférica, tanto en un escenario de modelo perfecto (donde se analiza el impacto del error presente en las condiciones iniciales), como en un escenario de modelo imperfecto (cuando el modelo numérico no puede representar todas las escalas del problema e introduce error en el pronóstico). En un desarrollo posterior, se entendió la función de costo eMSE para la estimación de la matriz de covarianza completa. Esta metodología resultó ser mucho más estable numéricamente y más rápida de entrenar comparado con funciones de costo basadas en la verosimilitud que necesitan invertir la matriz de covarianza. Se diseñó un método de asimilación de datos, en inglés Data Assimilation (DA) que combina la técnica del filtro de Kalman con la estimación de matriz de covarianza del error de pronóstico (MCEP) usando RNAs que denominamos UnnKF . Esta metodología nos permitió generar largas secuencias de ciclos de DA (más de 15.000 ciclos consecutivos) usando observaciones parciales del estado del sistema. Se obtuvo una secuencia de análisis cuyo error cuadrático medio (MSE) es comparable al obtenido por la técnica del filtro de Kalman por ensambles, en inglés Ensemble Kalman Filter (EnKF) usando grandes ensambles y logra disminuir considerablemente el MSE de los análisis comparado con un ensamble pequeño.The ensemble technique is currently the most widely used method for estimating uncertainty in weather forecasts. The drawback of this technique is that it requires multiple numerical integrations of models and thus a lot of computational power. In this thesis we attempt to estimate uncertainty using Artificial Neural Networks (RNA) and a single deterministic prediction (a single model integration). For this purpose, RNA were trained with a new cost function (eMSE) and the quality of the uncertainty estimated in this way was studied by comparing it with training with traditional cost functions (likelihood function) and with the ensemble technique. First, the estimation of the variance of the forecasts was evaluated. The networks showed good performance in capturing uncertainty (variances) in a test environment based on the Lorenz’96 multiscale dynamic model that simulates the characteristics of atmospheric predictability, both in a perfect model scenario (where the impact of the error present in the initial conditions is analysed) and in an imperfect model scenario (when the numerical model cRNAot represent all the scales of the problem and introduces errors in the forecast). We also investigated extending the eMSE cost function to estimate the full covariance matrix. This method proved to be much more numerically stable and faster to train than likelihood-based cost functions, which require the covariance matrix to be inverted. In addition to analysing the structural characteristics of the estimated covariances, a hybrid data assimilation system (UnnKF) based on the Kalman filter was designed to provide an analysis of the system state using the covariances estimated by the RNA, partial observations of the system and a deterministic forecast. The results obtained are very encouraging. The covariances estimated by RNA trained with the eMSE cost function and the hybrid UnnKF methodology robustly estimate long assimilation sequences (more than 15,000 consecutive cycles), obtaining an analysis sequence whose mean squared error (MSE) is comparable to that obtained by the ensemble assimilation technique (EnKF) for large ensembles, and manages to significantly reduce the MSE of the analysis compared to a small ensemble.Fil: Sacco, Maximiliano Antonio. Universidad de Buenos Aires. Facultad de Ciencias Exactas y Naturales; Argentina.Universidad de Buenos Aires. Facultad de Ciencias Exactas y NaturalesRuiz, Juan JoséPulido, Manuel Arturo2023-12-29info:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/publishedVersionhttp://purl.org/coar/resource_type/c_db06info:ar-repo/semantics/tesisDoctoralapplication/pdfhttps://hdl.handle.net/20.500.12110/tesis_n7459_Saccospainfo:eu-repo/semantics/openAccesshttps://creativecommons.org/licenses/by-nc-sa/2.5/arreponame:Biblioteca Digital (UBA-FCEN)instname:Universidad Nacional de Buenos Aires. Facultad de Ciencias Exactas y Naturalesinstacron:UBA-FCEN2025-09-29T13:42:23Ztesis:tesis_n7459_SaccoInstitucionalhttps://digital.bl.fcen.uba.ar/Universidad públicaNo correspondehttps://digital.bl.fcen.uba.ar/cgi-bin/oaiserver.cgiana@bl.fcen.uba.arArgentinaNo correspondeNo correspondeNo correspondeopendoar:18962025-09-29 13:42:24.146Biblioteca Digital (UBA-FCEN) - Universidad Nacional de Buenos Aires. Facultad de Ciencias Exactas y Naturalesfalse |
dc.title.none.fl_str_mv |
Cuantificación de la incertidumbre en los pronósticos usando redes neuronales : aplicación en asimilación de datos Quantification of forecast uncertainty using neural networks : application to data assimilation |
title |
Cuantificación de la incertidumbre en los pronósticos usando redes neuronales : aplicación en asimilación de datos |
spellingShingle |
Cuantificación de la incertidumbre en los pronósticos usando redes neuronales : aplicación en asimilación de datos Sacco, Maximiliano Antonio DINAMICA CAOTICA MODELOS DE ALTA DIMENSIONALIDAD RED NEURONAL CUANTIFICACION DE LA INCERTIDUMBRE ESTIMACION DE LA COVARIANZA ASIMILACION DE DATOS CHAOTIC DYNAMIC HIGH-DIMENTIONAL MODELS NEURAL NETWORK UNCERTAINTY QUANTIFICATION COVARIANCE ESTIMATION DATA ASSIMILATION |
title_short |
Cuantificación de la incertidumbre en los pronósticos usando redes neuronales : aplicación en asimilación de datos |
title_full |
Cuantificación de la incertidumbre en los pronósticos usando redes neuronales : aplicación en asimilación de datos |
title_fullStr |
Cuantificación de la incertidumbre en los pronósticos usando redes neuronales : aplicación en asimilación de datos |
title_full_unstemmed |
Cuantificación de la incertidumbre en los pronósticos usando redes neuronales : aplicación en asimilación de datos |
title_sort |
Cuantificación de la incertidumbre en los pronósticos usando redes neuronales : aplicación en asimilación de datos |
dc.creator.none.fl_str_mv |
Sacco, Maximiliano Antonio |
author |
Sacco, Maximiliano Antonio |
author_facet |
Sacco, Maximiliano Antonio |
author_role |
author |
dc.contributor.none.fl_str_mv |
Ruiz, Juan José Pulido, Manuel Arturo |
dc.subject.none.fl_str_mv |
DINAMICA CAOTICA MODELOS DE ALTA DIMENSIONALIDAD RED NEURONAL CUANTIFICACION DE LA INCERTIDUMBRE ESTIMACION DE LA COVARIANZA ASIMILACION DE DATOS CHAOTIC DYNAMIC HIGH-DIMENTIONAL MODELS NEURAL NETWORK UNCERTAINTY QUANTIFICATION COVARIANCE ESTIMATION DATA ASSIMILATION |
topic |
DINAMICA CAOTICA MODELOS DE ALTA DIMENSIONALIDAD RED NEURONAL CUANTIFICACION DE LA INCERTIDUMBRE ESTIMACION DE LA COVARIANZA ASIMILACION DE DATOS CHAOTIC DYNAMIC HIGH-DIMENTIONAL MODELS NEURAL NETWORK UNCERTAINTY QUANTIFICATION COVARIANCE ESTIMATION DATA ASSIMILATION |
dc.description.none.fl_txt_mv |
Hasta el momento, la metodología más usada para la estimación de la incertidumbre en los pronósticos meteorológicos es la técnica de ensambles. En esta tesis buscamos estimar la incertidumbre usando redes neuronales artificiales (RNAs) a partir de un único pronóstico determinístico (una única integración del modelo). Para esto se entrenaron RNAs usando una nueva función de costo basada en el error, en inglés extended Mean Squared Error (eMSE), y se estudió la calidad de la incertidumbre estimada comparándola con entrenamientos con funciones de costo tradicionales (función de verosimilitud) y con la técnica de ensambles. En primera medida, se evaluó la estimación de la varianza de los pronósticos. Las redes mostraron un buen desempeño para capturar la incertidumbre (varianzas) en un entorno de prueba basado en el modelo dinámico multi-escala de Lorenz’96 que simula las características de la predictibilidad atmosférica, tanto en un escenario de modelo perfecto (donde se analiza el impacto del error presente en las condiciones iniciales), como en un escenario de modelo imperfecto (cuando el modelo numérico no puede representar todas las escalas del problema e introduce error en el pronóstico). En un desarrollo posterior, se entendió la función de costo eMSE para la estimación de la matriz de covarianza completa. Esta metodología resultó ser mucho más estable numéricamente y más rápida de entrenar comparado con funciones de costo basadas en la verosimilitud que necesitan invertir la matriz de covarianza. Se diseñó un método de asimilación de datos, en inglés Data Assimilation (DA) que combina la técnica del filtro de Kalman con la estimación de matriz de covarianza del error de pronóstico (MCEP) usando RNAs que denominamos UnnKF . Esta metodología nos permitió generar largas secuencias de ciclos de DA (más de 15.000 ciclos consecutivos) usando observaciones parciales del estado del sistema. Se obtuvo una secuencia de análisis cuyo error cuadrático medio (MSE) es comparable al obtenido por la técnica del filtro de Kalman por ensambles, en inglés Ensemble Kalman Filter (EnKF) usando grandes ensambles y logra disminuir considerablemente el MSE de los análisis comparado con un ensamble pequeño. The ensemble technique is currently the most widely used method for estimating uncertainty in weather forecasts. The drawback of this technique is that it requires multiple numerical integrations of models and thus a lot of computational power. In this thesis we attempt to estimate uncertainty using Artificial Neural Networks (RNA) and a single deterministic prediction (a single model integration). For this purpose, RNA were trained with a new cost function (eMSE) and the quality of the uncertainty estimated in this way was studied by comparing it with training with traditional cost functions (likelihood function) and with the ensemble technique. First, the estimation of the variance of the forecasts was evaluated. The networks showed good performance in capturing uncertainty (variances) in a test environment based on the Lorenz’96 multiscale dynamic model that simulates the characteristics of atmospheric predictability, both in a perfect model scenario (where the impact of the error present in the initial conditions is analysed) and in an imperfect model scenario (when the numerical model cRNAot represent all the scales of the problem and introduces errors in the forecast). We also investigated extending the eMSE cost function to estimate the full covariance matrix. This method proved to be much more numerically stable and faster to train than likelihood-based cost functions, which require the covariance matrix to be inverted. In addition to analysing the structural characteristics of the estimated covariances, a hybrid data assimilation system (UnnKF) based on the Kalman filter was designed to provide an analysis of the system state using the covariances estimated by the RNA, partial observations of the system and a deterministic forecast. The results obtained are very encouraging. The covariances estimated by RNA trained with the eMSE cost function and the hybrid UnnKF methodology robustly estimate long assimilation sequences (more than 15,000 consecutive cycles), obtaining an analysis sequence whose mean squared error (MSE) is comparable to that obtained by the ensemble assimilation technique (EnKF) for large ensembles, and manages to significantly reduce the MSE of the analysis compared to a small ensemble. Fil: Sacco, Maximiliano Antonio. Universidad de Buenos Aires. Facultad de Ciencias Exactas y Naturales; Argentina. |
description |
Hasta el momento, la metodología más usada para la estimación de la incertidumbre en los pronósticos meteorológicos es la técnica de ensambles. En esta tesis buscamos estimar la incertidumbre usando redes neuronales artificiales (RNAs) a partir de un único pronóstico determinístico (una única integración del modelo). Para esto se entrenaron RNAs usando una nueva función de costo basada en el error, en inglés extended Mean Squared Error (eMSE), y se estudió la calidad de la incertidumbre estimada comparándola con entrenamientos con funciones de costo tradicionales (función de verosimilitud) y con la técnica de ensambles. En primera medida, se evaluó la estimación de la varianza de los pronósticos. Las redes mostraron un buen desempeño para capturar la incertidumbre (varianzas) en un entorno de prueba basado en el modelo dinámico multi-escala de Lorenz’96 que simula las características de la predictibilidad atmosférica, tanto en un escenario de modelo perfecto (donde se analiza el impacto del error presente en las condiciones iniciales), como en un escenario de modelo imperfecto (cuando el modelo numérico no puede representar todas las escalas del problema e introduce error en el pronóstico). En un desarrollo posterior, se entendió la función de costo eMSE para la estimación de la matriz de covarianza completa. Esta metodología resultó ser mucho más estable numéricamente y más rápida de entrenar comparado con funciones de costo basadas en la verosimilitud que necesitan invertir la matriz de covarianza. Se diseñó un método de asimilación de datos, en inglés Data Assimilation (DA) que combina la técnica del filtro de Kalman con la estimación de matriz de covarianza del error de pronóstico (MCEP) usando RNAs que denominamos UnnKF . Esta metodología nos permitió generar largas secuencias de ciclos de DA (más de 15.000 ciclos consecutivos) usando observaciones parciales del estado del sistema. Se obtuvo una secuencia de análisis cuyo error cuadrático medio (MSE) es comparable al obtenido por la técnica del filtro de Kalman por ensambles, en inglés Ensemble Kalman Filter (EnKF) usando grandes ensambles y logra disminuir considerablemente el MSE de los análisis comparado con un ensamble pequeño. |
publishDate |
2023 |
dc.date.none.fl_str_mv |
2023-12-29 |
dc.type.none.fl_str_mv |
info:eu-repo/semantics/doctoralThesis info:eu-repo/semantics/publishedVersion http://purl.org/coar/resource_type/c_db06 info:ar-repo/semantics/tesisDoctoral |
format |
doctoralThesis |
status_str |
publishedVersion |
dc.identifier.none.fl_str_mv |
https://hdl.handle.net/20.500.12110/tesis_n7459_Sacco |
url |
https://hdl.handle.net/20.500.12110/tesis_n7459_Sacco |
dc.language.none.fl_str_mv |
spa |
language |
spa |
dc.rights.none.fl_str_mv |
info:eu-repo/semantics/openAccess https://creativecommons.org/licenses/by-nc-sa/2.5/ar |
eu_rights_str_mv |
openAccess |
rights_invalid_str_mv |
https://creativecommons.org/licenses/by-nc-sa/2.5/ar |
dc.format.none.fl_str_mv |
application/pdf |
dc.publisher.none.fl_str_mv |
Universidad de Buenos Aires. Facultad de Ciencias Exactas y Naturales |
publisher.none.fl_str_mv |
Universidad de Buenos Aires. Facultad de Ciencias Exactas y Naturales |
dc.source.none.fl_str_mv |
reponame:Biblioteca Digital (UBA-FCEN) instname:Universidad Nacional de Buenos Aires. Facultad de Ciencias Exactas y Naturales instacron:UBA-FCEN |
reponame_str |
Biblioteca Digital (UBA-FCEN) |
collection |
Biblioteca Digital (UBA-FCEN) |
instname_str |
Universidad Nacional de Buenos Aires. Facultad de Ciencias Exactas y Naturales |
instacron_str |
UBA-FCEN |
institution |
UBA-FCEN |
repository.name.fl_str_mv |
Biblioteca Digital (UBA-FCEN) - Universidad Nacional de Buenos Aires. Facultad de Ciencias Exactas y Naturales |
repository.mail.fl_str_mv |
ana@bl.fcen.uba.ar |
_version_ |
1844618724416421888 |
score |
13.070432 |