Yapay zekâ botlarına ortak engel: Siteler içeriğini nasıl koruyacak?
OpenAI, Google, Microsoft ve Anthropic, sitelerin yapay zekâ taramasını tek işaretle engellemesini sağlayacak robots.txt standardını destekleyecek.

OpenAI, Google, Microsoft ve Anthropic, internet sitelerinin içeriklerini yapay zekâ eğitiminde kullanılmaktan tek bir işaretle korumasını sağlayacak yeni bir standarda uyacaklarını açıkladı. Şimdiye kadar her şirket için ayrı ayar yapmak zorunda kalan yayıncılar, bu sayede tercihlerini hepsine birden bildirebilecek.
Yeni standart ne demek?
Ortak “politika işareti” (policy token), Anthropic’in standartlardan sorumlu teknik lideri Kevin Kelley tarafından internet standartlarını belirleyen IETF bünyesinde önerildi. İşaret, sitelerin yıllardır arama motorlarına hangi sayfaların taranabileceğini söylediği robots.txt dosyasına yazılacak. Dört şirket de botlarının bu işareti gördüğü sitelere girmeyeceğini söylüyor.
Bunu da okuyun: Rusya Apple ve Microsoft’u sicile aldı: Bu kayıt ne anlama geliyor?
Microsoft bir adım daha ileri gidip yayıncılara iki ayrı seçenek sunacak: içeriğin model eğitiminde kullanılmasını ya da yapay zekânın cevap üretirken o siteyi doğrulanmış kaynak olarak göstermesini (grounding) ayrı ayrı kapatmak mümkün olacak. Şirket, tercih ne olursa olsun sitelerin Bing arama sonuçlarında görünmeye devam edeceğini de ekledi.
Ne zaman devreye girecek?
Anthropic işareti şimdiden kullanmaya başladı. Google ve Microsoft desteği gelecek yıl ekleyecek, OpenAI ise “önümüzdeki aylarda” geçeceğini söylüyor.
Neden gerekti?
Haber siteleri ve yayıncılar, içeriklerini izinsiz toplayıp yapay zekâ modellerine aktaran botların sayısı arttıkça çözüm arıyor. The Verge’ün aktardığına göre bazı girişimler zaten başlamıştı: RSL adlı standart yayıncılara siteyi tarayan botlardan ücret alma imkânı veriyor, Cloudflare de yapay zekâ botlarını varsayılan olarak engelliyor. Yeni işaret ise sektörün en büyük oyuncularını aynı kurala bağlayan ilk adım olarak öne çıkıyor.
Kaynak: The Verge, Search Engine Roundtable






