Google, Microsoft, OpenAI ve Anthropic, yapay zeka eğitim botlarını engelleyen tek satırlık çözümü destekliyor

Google, Microsoft, Anthropic ve OpenAI, web sitesi işletmecilerinin yapay zeka geliştiricilerinin içeriklerini model eğitiminde kullanmasını engellemesine olanak tanıyacak yeni bir tarama standardını desteklemeyi planladıklarını açıkladı. Mevcut sistemde, eğitimle ilgili kazımayı yasaklamak isteyen bir şirketin robots.txt dosyasını defalarca düzenlemesi gerekiyor; her yapay zeka sağlayıcısı için ayrı bir girdi ve bir sağlayıcının birden fazla tarayıcı çalıştırması durumunda her tarayıcı için ek bir girdi eklemesi gerekiyor. Yeni standart, işletmecilerin üretken yapay zeka modelleri için eğitim verisi toplayan tüm tarayıcıları tek bir robots.txt girdisiyle engellemesine olanak tanıyacak. Bu ayar, yalnızca üretken olmayan görevler gerçekleştiren modeller için geçerli olmayacak.

Dört şirket, bu standardı robots.txt dosyalarının izlediği format olan Robots Exclusion Protocol'e dahil etmeyi planlıyor. Teklif taslaklarını, protokolü yöneten kâr amacı gütmeyen kuruluş olan Internet Engineering Task Force'a şimdiden sundular.

Microsoft bir blog yazısında, AI Grounding adlı bir ayar da sunacağını belirtti. Bu ayar, bir yapay zeka modelinin eğitim verisi toplamak yerine bir kullanıcının sorusunu yanıtlamak için bir web sayfasını ziyaret ettiği durumları kapsıyor. Web sitesi işletmecileri, Microsoft'un hizmetlerinin bu tür istekler göndermesini engelleyebilecek; bu kontrol, istemleri işlemek için Microsoft teknolojilerini kullanan üçüncü taraf yapay zeka araçlarını da kapsayacak. OpenAI da benzer kontroller sunmayı planlıyor.

OpenAI ve Microsoft önümüzdeki aylarda standardı desteklemeyi planlıyor; Google ise gelecek yıl içinde onları izleyecek. Meta Platforms, teknolojinin ardındaki fikri desteklediğini ancak henüz uygulamaya yönelik bir taahhütte bulunmadığını söyledi.