Inteligencia artificial aplicada a la investigación: el caso de la revisión de la literatura

• Autores: González, Daniela Agostina
• Año de publicación: 2024
• Idioma: español castellano
• Tipo de recurso: documento de conferencia
• Materia: Inteligencia Artificial (IA); LLMs; GPT; Revisión de la literatura; Eje temático: Investigación en disciplinas básicas y aplicadas; TECHNOLOGY
• Institución: Universidad Nacional de Córdoba

Fil: González, Daniela Agostina. Universidad Nacional de Córdoba. Facultad de Ciencias Económicas. Departamento de Economía y Finanzas; Argentina.
Este trabajo explora las capacidades del modelo de Inteligencia Artificial GPT-4o-mini 1.5 como un asistente de investigación. En particular, para el caso de clasificación de artículos para una revisión sistemática de la literatura. Se realiza una iteración de instrucciones mediante la API del modelo y se emplean métricas de evaluación para analizar su performance. Los resultados muestran que el modelo es más efectivo a la hora de identificar correctamente los artículos relevantes (alta exhaustividad), pero demuestra baja precisión entre aquellos que selecciona como pertinentes para la revisión. Además, tiene un rendimiento moderado en identificar correctamente los artículos no relevantes (especificidad). En general, existe potencial como herramienta preliminar para las etapas iniciales en una revisión bibliográfica.
ABSTRACT This article explores the capabilities of the Artificial Intelligence GPT-4o-mini 1.5 model as a research assistant, specifically for classifying articles in a systematic literature review. Prompts are iteratively provided via the model's API, and evaluation metrics are used to analyze its performance. The results show that the model is more effective in correctly identifying relevant articles (high recall) but demonstrates low precision among those it selects as pertinent for the review. Additionally, it shows moderate performance in correctly identifying non-relevant articles (specificity). Overall, there is potential for it as a preliminary tool for the initial stages of a bibliographic review.
Fil: González, Daniela Agostina. Universidad Nacional de Córdoba. Facultad de Ciencias Económicas. Departamento de Economía y Finanzas; Argentina.