Reino UnidoSector público2025 – en cursoGobierno de Escocia (Scottish Government)
Análisis de respuestas a consultas públicas con Consult AI
Funcionarios escoceses utilizaron IA para agrupar más de 2.000 respuestas a una consulta con resultados próximos a los de los revisores humanos
Problema
Los gobiernos del Reino Unido realizaban alrededor de 500 consultas públicas al año. Los funcionarios leían y clasificaban manualmente las respuestas escritas antes de redactar políticas, lo que consumía mucho tiempo del personal.
Enfoque
El Gobierno de Escocia probó Consult con respuestas sobre la regulación de procedimientos estéticos no quirúrgicos, como los rellenos labiales. La Incubadora de IA del Gobierno británico (Incubator for AI, i.AI) creó la herramienta de IA generativa como parte de su conjunto de herramientas Humphrey. Consult propuso temas a partir de más de 2.000 respuestas a seis preguntas abiertas y asignó las respuestas a esos temas, mientras expertos del Gobierno los comprobaban y afinaban. En este primer uso real, los funcionarios también revisaron manualmente cada respuesta para comparar los resultados.
Cifras clave
Conclusión
Durante la prueba, los funcionarios comprobaron manualmente cada respuesta y midieron la concordancia de la herramienta con los revisores humanos, que obtuvo una puntuación F1 de 0,76. El ahorro anual de 75.000 días y unos 20 millones de libras eran proyecciones para su uso en el conjunto del Gobierno, y se había previsto una evaluación adicional antes de ampliarlo.
Categorías
- Tamaño
- Gran empresa
- Sector
- Sector público
- Función empresarial
- Trabajo interno y gestión del conocimientoEstrategia y organización
- Tipo de innovación
- Innovación de procesos
- Tecnología de IA
- IA generativa
- Adopción
- Desarrollo conjunto con socios
- Respaldo
- Declaración de la propia empresa
Fuentes
Resúmenes de fuentes
El Departamento de Ciencia, Innovación y Tecnología del Reino Unido (Department for Science, Innovation and Technology) informó de que la primera prueba real de Consult abarcó más de 2.000 respuestas a seis preguntas en Escocia. Su puntuación F1 fue de 0,76, y las diferencias respecto a los revisores humanos apenas alteraron el orden de los temas. El departamento proyectó un ahorro anual de 75.000 días y unos 20 millones de libras en 500 consultas. La herramienta seguía en fase de prueba, pendiente de una evaluación adicional.
Holyrood informó de que la ministra escocesa de Salud Pública valoró favorablemente la prueba de Consult y de que los funcionarios participantes afirmaron que les había ahorrado mucho tiempo. Las personas siguieron revisando los resultados. Las cifras de ahorro del Gobierno eran proyecciones.
La evaluación de i.AI obtuvo una puntuación F1 multietiqueta de 0,76 y detectó pocos cambios en el orden de los temas frente a los revisores humanos. La mediana del tiempo de revisión fue de 23 segundos por respuesta. Los evaluadores identificaron la aprobación de temas y la detección de temas omitidos como aspectos que debían mejorarse.
La información completa figura en las fuentes originales.