Vương quốc AnhY tế và khoa học sự sống2024 – đang tiếp diễnCơ quan Dịch vụ Y tế Quốc gia Anh (NHS England)
Công cụ kiểm duyệt tự động đánh giá trên NHS.UK
NHS England tự động hóa kiểm duyệt đánh giá của bệnh nhân rồi ngừng sử dụng công cụ
Vấn đề
Các đánh giá của bệnh nhân về dịch vụ NHS đăng trên NHS.UK phải được nhân viên kiểm tra trước khi xuất bản, trong đó có nội dung khiếu nại, đề cập tự hại và tên cá nhân.
Cách tiếp cận
NHS England sử dụng xử lý ngôn ngữ tự nhiên để kiểm tra đánh giá trước khi xuất bản. Cơ quan cập nhật đánh giá bảo vệ dữ liệu vào tháng 2/2024 khi chuyển từ kiểm duyệt thủ công sang tự động và công bố tỷ lệ lỗi của bốn mô hình phát hiện. Sau đó, cơ quan ghi nhận công cụ đã ngừng hoạt động nhưng không nêu lý do hay thời điểm.
Số liệu chính
Bài học
NHS England ngừng sử dụng công cụ từng được công bố kết quả phát hiện của bốn mô hình. Cơ quan không nêu lý do, nên các kết quả này không giải thích được quyết định ngừng sử dụng.
Phân loại
- Quy mô
- Doanh nghiệp lớn
- Chức năng kinh doanh
- Sản xuất và chất lượng
- Loại hình đổi mới
- Đổi mới quy trình
- Công nghệ AI
- Phân tích dự báo và học máy
- Hình thức triển khai
- Tự phát triển
- Căn cứ
- Công bố của doanh nghiệp
Nguồn
Tóm tắt nguồn
NHS England công bố tỷ lệ dương tính giả, âm tính giả, độ bao phủ và độ chính xác của bốn mô hình dùng để kiểm duyệt đánh giá của bệnh nhân. Mô hình phát hiện tự hại có độ bao phủ 0,99 và độ chính xác 0,85; mô hình phát hiện khiếu nại có các chỉ số tương ứng là 0,85 và 0,87. NHS England ghi nhận công cụ đã ngừng hoạt động nhưng không giải thích lý do.
Thông tin đầy đủ có trong tài liệu gốc.
