City of Amsterdam
Mô hình rủi ro Smart Check cho hồ sơ xin trợ cấp xã hội
Amsterdam dừng mô hình rủi ro gian lận trợ cấp năm 2023 sau thử nghiệm khoảng 1.600 hồ sơ cho thấy mô hình gắn cờ nhiều người hơn và xuất hiện thiên lệch mới
Vấn đề
Cán bộ phụ trách trợ cấp kiểm tra hồ sơ để tìm sai sót và gian lận, và theo số liệu của thành phố, hơn 1/2 số cuộc điều tra không phát hiện sai phạm. Thành phố muốn có cách chọn hồ sơ công bằng và chính xác hơn.
Cách tiếp cận
Công việc bắt đầu từ năm 2019. Mô hình được huấn luyện trên 3.400 cuộc điều tra trước đây, dùng 15 đặc điểm và loại trừ giới tính, quốc tịch và tuổi. Việc điều chỉnh trọng số dữ liệu huấn luyện giúp cân bằng tỷ lệ sai sót giữa người nộp đơn là người Hà Lan và người nộp đơn không phải người Hà Lan trong thử nghiệm. Đợt thử nghiệm thực tế bắt đầu năm 2023, và thành phố dừng dự án vào tháng 11/2023 vì không thể loại trừ nguy cơ phân biệt đối xử ngoài ý muốn.
Số liệu chính
Bài học
MIT Technology Review đưa tin thiên lệch tái xuất hiện trong đợt thử nghiệm thực tế. Thành phố cho biết mô hình có ít kết quả dương tính giả hơn phương pháp cũ nhưng đánh giá phân tích thiên lệch là chưa có kết luận; việc phát triển chấm dứt vào tháng 11/2023.
Phân loại
- Quy mô
- Doanh nghiệp lớn
- Ngành
- Khu vực công
- Chức năng kinh doanh
- Tài chính, rủi ro và pháp chếSản xuất và chất lượng
- Loại hình đổi mới
- Đổi mới quy trình
- Công nghệ AI
- Phân tích dự báo và học máy
- Hình thức triển khai
- Tự phát triển
- Căn cứ
- Báo chí đưa tin
Nguồn
Tóm tắt nguồn
MIT Technology Review, Lighthouse Reports và Trouw điều tra mô hình này dựa trên hồ sơ của thành phố và các thử nghiệm thiên lệch của chính họ. Họ phát hiện thiên lệch trong thử nghiệm năm 2022 và thiên lệch tái xuất hiện sau khi giảm thiểu trong đợt chạy thử khoảng 1.600 hồ sơ, trong đó mô hình gắn cờ nhiều người nộp đơn hơn. Thành phố ước tính chi phí nội bộ khoảng 500.000 €, cộng hợp đồng 35.000 € với Deloitte, và đã kỳ vọng tiết kiệm 2,4 triệu € mỗi năm.
Thành phố cho biết đợt chạy thử diễn ra từ tháng 4 đến tháng 8/2023 sau khoảng 3 năm phát triển. Đánh giá cuối cùng cho thấy ít kết quả dương tính giả hơn phương pháp cũ, nhưng phân tích thiên lệch chưa có kết luận. Hội đồng Tham gia khuyến nghị dừng từ năm 2022, và ủy viên phụ trách quyết định dừng vào tháng 11/2023 với sự đồng thuận của hội đồng.
Thông tin đầy đủ có trong tài liệu gốc.