Tablero Institucional basado en Agentes RAG para Auditoría Interna
Automatización inteligente, trazable y verificable del seguimiento al Indicador E2-02-A2 en la Universidad Nacional de Colombia.
🎓 Profesores Investigadores (2 Plazas)
Dirección Científica🔬 Estudiantes Investigadores (4 Plazas)
Desarrollo & Validación¿Por qué transformar el seguimiento del Indicador E2-02-A2?
La Vicerrectoría General requiere pasar de reportes estáticos fragmentados a un sistema de decisión activo y citable.
Revisión Lenta con Riesgo de Omisión
Rúbricas, evaluaciones e informes de control dispersos en decenas de dependencias y formatos heterogéneos (PDF, Excel, actas).
- 3 a 4 semanas requeridas para consolidar el estado de auditoría.
- Cero trazabilidad interactiva: Imposible contrastar un hallazgo contra su fuente documental en tiempo real.
- Sobrecarga cognitiva: Los tableros convencionales muestran gráficos pero no interpretan la evidencia.
Auditoría Inteligente, Inmediata y Verificable
Un agente conversacional que responde preguntas gerenciales complejas sobre el tablero y cita textualmente la evidencia documental.
- Respuestas en < 3 segundos en lenguaje natural con anclaje de fuentes.
- 100% Citas auditables: Cada afirmación incluye enlace al documento, página y párrafo original.
- Detección temprana: Alertas proactivas de desvíos en el indicador E2-02-A2 antes del cierre de vigencia.
Tres Cuellos de Botella que Resuelve el Proyecto
La literatura de analítica y RAG delimita tres carencias tecnológicas concatenadas que impiden la toma de decisiones ágil.
Dispersión y Pérdida de Trazabilidad
Los insumos de auditoría (evaluaciones de control, rúbricas y planes de mejoramiento) residen en silos documentales sin un flujo ETL y RAG estructurado.
Rigidez en Tableros para Decisores
Los tableros tradicionales de Business Intelligence son estáticos y exigen conocimientos analíticos previos para cruzar indicadores y justificaciones.
Alucinaciones y Falta de Calibración
Los modelos LLM convencionales inventan aserciones sin sustento y carecen de cuantificación de incertidumbre o mecanismos de abstención selectiva.
Pregunta de Investigación e Hipótesis Validable
Investigación aplicada diseñada para generar evidencia empírica en el entorno de la Universidad Nacional.
"¿Cómo diseñar un prototipo de tablero institucional basado en agentes de recuperación aumentada por generación que consolide de forma trazable y confiable la evidencia dispersa de auditoría interna (indicador E2-02-A2), garantizando respuestas verificables para decisiones gerenciales oportunas en la Vicerrectoría General?"
"La integración de un pipeline RAG multi-granular con agentes conversacionales sobre modelos de datos y una capa de cuantificación de incertidumbre con grafos de conocimiento supera significativamente a las líneas base generativas en exactitud de recuperación y fidelidad de citas, eliminando alucinaciones críticas."
Cómo Interactúa el Decisor con el Tablero
Interfaz conversacional inteligente capaz de responder preguntas en lenguaje natural y corroborar la evidencia documental.
"¿Cuáles fueron los principales hallazgos de control interno respecto al indicador E2-02-A2 en la Sede Manizales durante el último trimestre?"
En el informe de auditoría del III trimestre 2025 para la Sede Manizales se registraron 2 observaciones prioritarias en el indicador E2-02-A2:
1. Desfase del 12% en el cronograma de ejecución del plan de mejoramiento del componente administrativo.
2. Falta de soporte documental en 4 actas de cierre de proyectos integrados.
1. Text-to-SQL + Búsqueda Vectorial
El decisor no necesita saber SQL ni consultar carpetas compartidas: la consulta orquesta automáticamente la base de datos relacional y los documentos PDF.
2. Citación Estricta y Verificable
Cada respuesta incluye chips interactivos que abren el documento fuente exactamente en la página y párrafo correspondiente para auditoría instantánea.
3. Política de Abstención por Confianza
Si la evidencia es contradictoria o no existe registro documental, el agente no inventa respuestas: se abstiene y solicita verificación humana.
Arquitectura de Datos y Agentes en Tiempo Real
Flujo dinámico desde la ingesta de documentos oficiales hasta la interacción del decisor con garantías de fidelidad.
Plan de Trabajo en 4 Fases Consecutivas
Alineación 1:1 entre subproblemas, objetivos específicos y entregables verificables.
Levantamiento de rúbricas reales del indicador E2-02-A2 junto al equipo decisor de la Vicerrectoría General.
Implementación del flujo ETL, segmentación multi-granular y recuperación con citación documental exacta.
Desarrollo de la interfaz de analítica conversacional en lenguaje natural con Text-to-SQL y visualizaciones.
Modelado de grafo institucional de control, cuantificación de incertidumbre (UQ) y abstención calibrada.
Pruebas en entorno operacional real (TRL 6) con usuarios directivos, medición de carga cognitiva y transferencia.
Garantías de Auditoría y Verificación de Citas
Protocolos cuantitativos para asegurar que ninguna respuesta invente información o desvíe la evidencia.
Fidelidad vs. Corrección
En auditoría pública, una respuesta correcta en términos generales no es suficiente: debe ser estrictamente fiel a los informes radicados. Nuestro sistema audita la atribución de cada token generado.
Métricas Automatizadas (RAGAS)
Evaluación continua del sistema frente a líneas base generativas mediante indicadores cuantitativos estándar en la literatura:
- Context Precision: > 92% de pertinencia en recuperación.
- Faithfulness: > 98% de apego estricto al corpus.
- Answer Relevance: > 95% de adecuación a la consulta.
Abstención por Baja Confianza
Cuando la métrica de incertidumbre semántica supera el umbral de riesgo, el agente activa una política de abstención justificada, señalando qué documento hace falta consultar.
Cronograma de Ejecución e Hitos Verificables
Entregables tangibles estructurados con seguimiento bimestral ante la Vicerrectoría General.
Inversión Focalizada en Desarrollo y Cómputo
El 70% de los recursos se asigna directamente al talento técnico especializado y la infraestructura tecnológica.
Solución propietaria para la UNAL que elimina la contratación recurrente de consultorías externas y genera capacidad institucional transferible.
Productos Tangibles y Beneficios para la Universidad
Entregables concretos que fortalecen el ecosistema de investigación y la gobernanza de datos.
🏛️ Impacto en la Vicerrectoría General:
Dota a la administración universitaria de un cuadro de mando inteligente y permanente para el indicador E2-02-A2, sentando un precedente tecnológico replicable para los demás indicadores del Plan Global de Desarrollo.
Una Alianza Estratégica para la Excelencia Universitaria
LabIA • Grupo GCPDS • Vicerrectoría General
Solución a Demanda Real
Resuelve la congestión de análisis documental del indicador E2-02-A2 con valor institucional tangible.
Liderazgo en IA Confiable
Pioneros en la aplicación de RAG con citación verificable y abstención por incertidumbre en Colombia.
Capacidad Instalada
Transferencia total del código, los modelos y la documentación a los servidores propios de la UNAL.
¿Preguntas y Retroalimentación del Comité?
Estamos a disposición para profundizar en los aspectos metodológicos, presupuestales y técnicos del proyecto.