영국공공2024 – 진행 중영국 내무부
난민 면담 기록 요약·정책 검색 AI 도구
내무부 시범 운영에서 요약 도구는 건당 23분, 정책 검색은 37분을 절감했다고 보고했으며 요약의 9%는 부정확하거나 누락이 있었다
문제
난민 심사관은 긴 면담 기록을 읽고 출신국 정책 문서를 직접 찾아야 했다. 2024년 말 최초 결정을 기다리는 사건이 약 9만 건에 달했다.
접근 방식
내무부는 2024년 5~12월 두 도구를 시범 운영했다. 하나는 면담 기록을 요약하고(정부 AI 허브에 따르면 오픈AI GPT-4 기반), 다른 하나는 출신국 정책 정보를 검색·요약한다. 심사관을 시험군과 비교군으로 나눠 서로 다른 부서에서 일하게 했고, 평가는 2025년 4월 공개했다.
주요 수치
시사점
시민단체는 요약의 9%가 부정확하거나 불완전하다는 결과를 두고 난민 판단에 쓰기에는 오류율이 너무 높다고 비판했다. 시간 절감 수치는 대표성이 없는 부서의 소규모 시범 운영에서 직원들이 직접 보고한 결과였다.
분류
- 규모
- 대기업
- 산업
- 공공
- 경영 기능
- 사내 업무·지식관리
- 혁신 유형
- 프로세스 혁신
- AI 기술
- 생성형 AI
- 도입 방식
- 플랫폼·범용 도구 활용
- 근거
- 회사 발표
출처
출처 요약
내무부는 두 도구의 시범 운영 결과를 평가했다. 요약 도구는 2024년 8주씩 두 단계로 시험해 건당 23분(32%)을, 정책 검색은 37분을 줄였다. 요약의 9%는 부정확해 제외됐고, 사용자 23%는 완전히 확신하지 못했으며, 계속 쓰겠다는 응답은 각각 65%와 54%였다. 품질 검토에서 결정에 미친 영향은 없었고, 시범이 소규모이며 자가 보고라는 한계를 밝혔다.
디지털 권리 단체가 이 도구는 난민 판단에 쓸 단계가 아니라고 주장한다. 내무부 자체 평가에서 요약의 9%가 부정확하거나 누락이 있었고 시험 사용자의 4분의 1 가까이가 완전한 확신이 없었다는 점을 들어, 도입 전에 오류율과 편향에 대한 답을 요구한다.
자세한 내용은 원문에 있습니다.