← 사례
영국헬스케어·바이오2024 – 진행 중

잉글랜드 국민보건서비스(NHS England)

NHS.UK 이용 후기 자동 심사 도구

NHS 잉글랜드는 환자 후기 심사를 자동화한 뒤 도구 사용을 중단했다

실패·중단회사 발표

문제

NHS.UK에 올라오는 의료 서비스 이용 후기는 게시 전에 직원이 불만 사항과 자해 언급, 실명 포함 여부를 확인해야 했다.

접근 방식

NHS 잉글랜드는 자연어 처리로 게시 전 후기를 심사했다. 수작업에서 자동 심사로 전환하면서 2024년 2월 개인정보 영향평가를 갱신했고, 탐지 모델 네 개의 오류율을 공개했다. 이후 도구 사용을 중단했다고 밝혔으나 사유와 시점은 공개하지 않았다.

주요 수치

0.99 recall, 0.85 precision후기 속 자살·자해 언급 탐지의 재현율과 정밀도회사 발표[1]
0.85 recall, 0.87 precision후기 속 불만 사항 탐지의 재현율과 정밀도회사 발표[1]

시사점

NHS 잉글랜드는 모델 네 개의 탐지 성능을 공개했던 도구의 사용을 중단했다. 중단 사유를 밝히지 않아 성능 수치만으로는 그 결정을 설명할 수 없다.

분류

규모
대기업
경영 기능
생산·품질
혁신 유형
프로세스 혁신
도입 방식
자체 개발
근거
회사 발표

출처

출처 요약

[1]GOV.UK (NHS England)2024년 7월 23일

NHS 잉글랜드는 환자 후기 심사에 쓴 모델 네 개의 오탐률과 미탐률, 재현율, 정밀도를 공개했다. 자해 탐지 모델의 재현율은 0.99, 정밀도는 0.85였고 불만 사항 탐지 모델은 각각 0.85와 0.87이었다. NHS 잉글랜드는 사유를 밝히지 않은 채 도구 사용을 중단했다고 밝혔다.

자세한 내용은 원문에 있습니다.

등록일 2026년 10월 25일 · 수정일 2026년 10월 25일
사례 페이지 열기 ↗