Scatter Lab
Chatbot AI Iruda
Chatbot của một startup được huấn luyện bằng trò chuyện riêng tư của người dùng bị gỡ sau vài tuần, công ty bị cơ quan bảo vệ dữ liệu cá nhân phạt
Vấn đề
Scatter Lab, startup tại Seoul, muốn tạo chatbot có thể trò chuyện tự nhiên, thân thiện bằng tiếng Hàn. Công ty đã nắm giữ lượng lớn hội thoại KakaoTalk do người dùng tải lên các ứng dụng phân tích quan hệ Science of Love và TextAt.
Cách tiếp cận
Công ty huấn luyện mô hình Iruda bằng khoảng 9,4 tỷ câu hội thoại KakaoTalk từ khoảng 600.000 người dùng các ứng dụng khác của mình và phát hành chatbot trên Facebook Messenger vào cuối năm 2020. Trong vòng một tháng, chatbot thu hút hơn 750.000 người dùng, nhưng đầu tháng 1/2021 bị chỉ trích vì các câu trả lời thù ghét, phân biệt đối xử và làm lộ dữ liệu cá nhân, rồi bị ngừng cung cấp. Tháng 4/2021, Ủy ban Bảo vệ Thông tin Cá nhân (Personal Information Protection Commission) xác định tám hành vi vi phạm Luật Bảo vệ Thông tin Cá nhân, trong đó có sử dụng tên, số điện thoại và địa chỉ mà không xóa hoặc mã hóa, đồng thời áp dụng các khoản phạt tổng cộng 103,3 triệu won.
Số liệu chính
Bài học
Khả năng trò chuyện trôi chảy của chatbot nhanh chóng thu hút người dùng, nhưng cách xử lý dữ liệu huấn luyện gây ra thất bại. Sự đồng ý dành cho một dịch vụ không bao gồm việc tái sử dụng dữ liệu trong sản phẩm khác; cơ quan quản lý coi đây là lần đầu một công ty AI bị xử phạt về xử lý dữ liệu.
Phân loại
- Quy mô
- Doanh nghiệp nhỏ
- Chức năng kinh doanh
- CNTT và R&DDịch vụ khách hàng
- Loại hình đổi mới
- Đổi mới sản phẩm và dịch vụ
- Công nghệ AI
- AI hội thoại và giọng nói
- Hình thức triển khai
- Tự phát triển
- Căn cứ
- Cơ quan quản lý, kiểm toán hoặc tòa án
Nguồn
Tóm tắt nguồn
Byline Network đưa tin về quyết định ngày 28/4/2021 của Ủy ban Bảo vệ Thông tin Cá nhân đối với Scatter Lab, với tổng mức phạt 103,3 triệu won, gồm khoản phạt bổ sung 55,5 triệu won và tiền phạt 47,8 triệu won. Nguồn liệt kê tám hành vi vi phạm, trong đó năm hành vi liên quan đến các ứng dụng Science of Love và TextAt, hai hành vi liên quan đến Iruda và một hành vi liên quan đến mã đăng trên GitHub. Khoảng 9,4 tỷ câu hội thoại KakaoTalk từ khoảng 600.000 người dùng được sử dụng mà chưa loại bỏ tên, số điện thoại hoặc địa chỉ.
Future of Privacy Forum giải thích quyết định của cơ quan quản lý. Tổ chức cho biết Iruda đạt hơn 750.000 người dùng Facebook Messenger trong chưa đầy một tháng trước khi tranh cãi đầu tháng 1/2021 dẫn đến việc gỡ chatbot. Tổ chức trình bày chi tiết các phát hiện, gồm tái sử dụng dữ liệu ngoài mục đích ban đầu, bổ sung 100 triệu tin nhắn vào cơ sở dữ liệu phản hồi, tải lên GitHub nội dung chứa thông tin cá nhân và thu thập dữ liệu của hơn 200.000 trẻ em dưới 14 tuổi mà không có sự đồng ý của cha mẹ.
Thông tin đầy đủ có trong tài liệu gốc.