苏格兰政府(Scottish Government)
使用Consult AI分析公众咨询意见
苏格兰官员使用AI对逾2,000份公众咨询回复分组,结果接近人工审核
问题
英国各级政府每年开展约500次公众咨询。公务员在起草政策前,需要人工阅读并分类书面回复,耗费大量工作时间。
方法
苏格兰政府使用Consult,测试分析有关监管唇部填充等非手术美容项目的咨询回复。该生成式AI工具由英国政府AI孵化器(Incubator for AI,i.AI)开发,属于Humphrey工具套件。Consult从六个开放式问题的逾2,000份回复中提出主题,并将回复归入相应主题,由政府专家检查和完善主题。在这次首次实际使用中,官员还人工审核了每份回复,以比较结果。
主要数据
0.76工具主题归类结果相较人工审核的F1分数(1.0为完全一致)
2,000+实际试验中分析的六个开放式问题的回复数
23 sec使用工具后每份回复的审核时间中位数
75,000 days如在整个政府推广,预计每年节省的分析天数(估算)
启示
试验期间,官员逐份人工检查回复,测得工具与人工审核结果一致程度的F1分数为0.76。每年节省7.5万天和约2,000万英镑,是推广至整个政府后的预测值;扩大应用前仍计划进一步评估。
分类
来源
来源摘要
[1]Department for Science, Innovation and Technology (DSIT)2025年5月14日
英国科学、创新与技术部(Department for Science, Innovation and Technology)报告称,Consult首次实际试验覆盖苏格兰六个问题的逾2,000份回复。其F1分数为0.76,与人工审核的差异几乎未改变主题排序。该部门预测,在500次咨询中应用后,每年可节省7.5万天和约2,000万英镑。该工具仍处于试验阶段,等待进一步评估。
[2]Holyrood2025年5月14日
Holyrood报道,苏格兰公共卫生部长对Consult试验表示欢迎,参与官员称该工具节省了大量时间。人工仍继续审核结果。政府公布的节省数据为预测值。
[3]Digital Government Hub2025年
i.AI评估测得多标签F1分数为0.76,与人工审核相比,主题排序变化很小。每份回复的审核时间中位数为23秒。评估人员认为,主题确认和遗漏主题识别仍需改进。
详细内容请参阅原始来源。
收录日期 2026年10月25日 · 更新日期 2026年10月25日