잉글랜드 국민보건서비스(NHS England)
NHS.UK 이용 후기 자동 심사 도구
NHS 잉글랜드는 환자 후기 심사를 자동화한 뒤 도구 사용을 중단했다
문제
NHS.UK에 올라오는 의료 서비스 이용 후기는 게시 전에 직원이 불만 사항과 자해 언급, 실명 포함 여부를 확인해야 했다.
접근 방식
NHS 잉글랜드는 자연어 처리로 게시 전 후기를 심사했다. 수작업에서 자동 심사로 전환하면서 2024년 2월 개인정보 영향평가를 갱신했고, 탐지 모델 네 개의 오류율을 공개했다. 이후 도구 사용을 중단했다고 밝혔으나 사유와 시점은 공개하지 않았다.
주요 수치
0.99 recall, 0.85 precision후기 속 자살·자해 언급 탐지의 재현율과 정밀도
0.85 recall, 0.87 precision후기 속 불만 사항 탐지의 재현율과 정밀도
시사점
NHS 잉글랜드는 모델 네 개의 탐지 성능을 공개했던 도구의 사용을 중단했다. 중단 사유를 밝히지 않아 성능 수치만으로는 그 결정을 설명할 수 없다.
분류
출처
출처 요약
[1]GOV.UK (NHS England)2024년 7월 23일
NHS 잉글랜드는 환자 후기 심사에 쓴 모델 네 개의 오탐률과 미탐률, 재현율, 정밀도를 공개했다. 자해 탐지 모델의 재현율은 0.99, 정밀도는 0.85였고 불만 사항 탐지 모델은 각각 0.85와 0.87이었다. NHS 잉글랜드는 사유를 밝히지 않은 채 도구 사용을 중단했다고 밝혔다.
자세한 내용은 원문에 있습니다.
등록일 2026년 10월 25일 · 수정일 2026년 10월 25일