OpenAI, Google, Microsoft và Anthropic đang cùng ủng hộ một tiêu chuẩn chung cho phép các website từ chối việc thu thập dữ liệu phục vụ huấn luyện trí tuệ nhân tạo. Theo The Verge ngày 31/10 (giờ địa phương), cơ chế này sẽ giúp các trang web chỉ cần thiết lập một lần nhưng có thể áp dụng đồng thời với nhiều công ty AI.
Trước đây, các website thường phải thiết lập hoặc gửi tín hiệu riêng cho từng công ty AI về việc có cho phép sử dụng dữ liệu của mình cho mục đích huấn luyện hay không. Với tiêu chuẩn mới, quy trình này được đơn giản hóa bằng một cơ chế chung áp dụng cho nhiều bên.
Theo The Verge, đề xuất do Kevin Kelly, kỹ sư phụ trách tiêu chuẩn tại Anthropic, đệ trình lên Internet Engineering Task Force (IETF). Đây là một tín hiệu chuẩn hóa để các website thể hiện rõ việc không cho phép dữ liệu của mình bị dùng để huấn luyện AI.
OpenAI, Google, Microsoft và Anthropic cho biết khi phát hiện token này, họ sẽ chặn truy cập của các crawler AI. Về lộ trình triển khai, Anthropic đã áp dụng, Google và Microsoft dự kiến thực hiện từ năm sau, còn OpenAI đặt mục tiêu triển khai trong vài tháng tới.
Andy Stone, người phụ trách truyền thông của Meta, cũng lên tiếng ủng hộ đề xuất này, nhưng chưa cho biết Meta có áp dụng hay không.
Microsoft cho biết sẽ bổ sung thêm các tùy chọn chi tiết hơn, cho phép người dùng tách riêng việc từ chối huấn luyện AI và từ chối “AI grounding” - quy trình buộc mô hình AI tham chiếu các nguồn thông tin đã được kiểm chứng nhằm giảm hiện tượng “ảo giác”.
Các nhà xuất bản thời gian qua đã triển khai nhiều biện pháp để ứng phó với số lượng crawler AI ngày càng tăng. Bên cạnh đó, thị trường cũng đã xuất hiện tiêu chuẩn RSL cho phép thu phí đối với crawler, trong khi Cloudflare mặc định chặn các crawler AI.