HABER · 1 KASIM 2026 · SEO

Google, Microsoft ve OpenAI, yapay zeka eğitimi için ortak robots.txt satırını onurlandırmayı planlıyor

30 Ekim 2026'da Anthropic'ten Kevin Kelley, robots.txt'te __usage_ai-training adlı bir politika belirteciyle tek bir yapay zeka eğitimi tercihi bildirmeyi öneren IETF taslağını sundu. Aynı gün Google, Microsoft ve OpenAI destek planlarını açıkladı. Hiçbiri henüz uygulamıyor, taslak da onaylı bir standart değil.

01 · NE OLDU?

Üç şirket, tek satırlık ortak bir eğitim tercihine destek planladı

Anthropic'ten Kevin Kelley, 30 Ekim 2026 tarihli "Machine-Readable Training Preference Signal" başlıklı Internet-Draft'ı IETF'in yapay zeka tercihleri çalışma grubuna sundu. Taslak, sitelerin her yapay zeka şirketi için ayrı kural yazması yerine, robots.txt içinde tek bir politika belirteciyle eğitim tercihini bildirmesini öneriyor. Aynı gün Google Search Central blogunda, OpenAI'ın kendi sitesinde ve Microsoft'un Bing blogunda bu ortak çizgiyi dikkate alma planları yayımlandı.

Search Engine Journal, verilen takvimlere bakınca üç şirketin de bugün satırı uygulamadığını yazıyor. Anthropic tarafında bilgi ikincil kaynaklara dayanıyor: Search Engine Journal ve The Next Web, Kelley'nin çalışma grubu listesine yazdığı mesajda Anthropic'in destek geliştirmeye başladığını, bunun mevcut tarayıcı kontrollerini tamamlayacağını ve hayata geçirmenin zaman alacağını aktarıyor. Search Engine Journal, 30 Ekim itibarıyla Anthropic'in haber sayfasında konuyla ilgili bir yazı bulunmadığını not ediyor; bu yüzden şirketin rolü, taslağın yazarının kurumu olması ve bu iki haber üzerinden okunuyor.

02 · AYRINTILAR

Belirteç nasıl yazılıyor, her şirketin takvimi ne

Taslağa göre site sahibi, olağan bir robots.txt grubu yazıyor ve User-Agent satırına __usage_ai-training belirtecini koyuyor. Disallow kuralı yapay zeka eğitimine karşı, Allow kuralı lehine bir tercih anlamına geliyor. Taslağın örneği tüm siteyi Disallow: / ile kapatıp Allow: /press-kit/ ile bir klasörü açıyor. Yeni bir direktif veya söz dizimi eklenmiyor. User-Agent: * ile yazılmış genel gruplar belirteçle eşleşmiş sayılmıyor ve dosyada bu belirteci taşıyan bir grup yoksa tercih bildirilmemiş kabul ediliyor. Belirteç bir tarama komutu da değil: bir tarayıcının kendi ürün belirteciyle yazılmış tarama kuralları bundan bağımsız çalışıyor ve taslak, site ile şirket arasındaki özel anlaşmaların bu tercihleri geçersiz kılabileceğini söylüyor.

Google'ın yazısını John Mueller imzalıyor. Google, 2023'ten beri sunduğu Google-Extended kontrolünün üzerine inşa ediyor: bir site belirteçle eğitimi reddeder ve Google-Extended'ı açıkça belirtmezse, Google bunu Google-Extended engellenmiş gibi yorumlamayı planlıyor. Mevcut şirkete özel kontroller ortak sinyalle birlikte çalışmaya devam edecek. Google, desteği diğer yapay zeka sağlayıcılarıyla birlikte 2027'de vermeyi hedefliyor; Search Engine Journal'a göre Google'ın tarayıcı belgeleri bunu erken 2027 olarak yazıyor.

Microsoft adına Bing'den Krishna Madhavan yazdı. Bing, ortak eğitim tercihini 1 Şubat 2027'den itibaren tarama sırasında dikkate alacak ve ayrıca yalnızca sayfa düzeyinde ayarlanan, Allow, DisallowExtended ve Disallow değerli bir AI Grounding tercihi ekliyor. Sayfa düzeyinde ayarlanan eğitim tercihi, o sayfa için robots.txt'i geçersiz kılıyor. Yeni tercihler NoArchive ve NoCache etiketlerinin yerini alıyor: bu etiketler 1 Mart 2027'den sonra eğitim veya grounding tercihi olarak okunmayacak. Bu etiketleri 15 Aralık 2026'da hâlâ kullanan siteler için geçici bir grounding tercihi o gün Bing Webmaster Tools'ta açılıyor; sayfa başına, sayfa yeniden taranana veya en geç 30 Eylül 2027'ye kadar geçerli kalıyor. OpenAI ise ortak sinyali önümüzdeki aylarda uygulamayı hedeflediğini, uygulama ayrıntıları için yeni bir güncelleme paylaşacağını ve mevcut robots.txt kontrollerinin geçerli kalacağını yazdı.

03 · NEDEN ÖNEMLİ?

Tek satır kolaylık getiriyor, ama her yerde aynı şeyi kapatmıyor

Ortak satırın işe yaradığı yer, eğitim tercihini birden fazla sağlayıcıya tek hamlede iletmek. Ama şirketlerin ona bağladığı kontroller aynı değil. Search Engine Journal'a göre Google'da eğitim ve Gemini Apps'teki grounding aynı Google-Extended kontrolüne bağlı; tarayıcı belgelerinde, Gemini eğitimine kapalıyken grounding'e açık kalmanın bir yolu anlatılmıyor. Aynı kaynak, Google belgelerine dayanarak Google-Extended'ın Google Arama'ya dahil edilmeyi etkilemediğini yazıyor ve AI Overviews ile AI Mode için Search Console'da ayrı bir kapatma seçeneği bulunduğunu hatırlatıyor. Microsoft'ta eğitim ve grounding birbirinden bağımsız iki ayar.

Bing yazısı, grounding'i kısıtlamanın yapay zeka üretimli deneyimlerdeki görünürlüğü önemli ölçüde azalttığını, buna karşılık Bing arama sonuçlarındaki uygunluğu değiştirmediğini belirtiyor. Eğitim ya da grounding tercihi dahil edilmeyi, trafiği veya ödemeyi garanti etmiyor. Statü de önemli: taslak bireysel bir Internet-Draft, IETF tarafından onaylanmış değil, IETF standart sürecinde resmî bir statüsü yok ve 3 Mayıs 2027'de sona eriyor. The Next Web'e göre Meta'dan Andy Stone X'te ortak bir sinyali desteklediğini yazdı, ancak Meta'nın bunu onurlandırıp onurlandırmayacağını söylemedi. Search Engine Journal'a göre OpenAI'ın yazısı ve tarayıcı belgesi, ortak satır ile GPTBot kuralının çatışması hâlinde ne olacağını anlatmıyor.

04 · TÜRKİYE

Kaynaklarda Türkiye yok, bu bölüm UNALSOFT yorumu

Okuduğumuz kaynaklarda Türkiye, Türkiye'deki siteler veya Türkçe içerik için ayrı bir uygulama ya da düzenleme geçmiyor. Bu bölüm bu yüzden haberin olgusu değil, UNALSOFT yorumudur.

Yorumumuz şu: robots.txt dosyası dünyanın her yerinde aynı biçimde okunuyor, dolayısıyla Türkiye'deki bir site de aynı belirteci kullanabilir. Ama hiçbir şirket satırı henüz okumadığı için bugün dosyaya eklenecek bir satırın somut bir etkisi yok. Henüz netleşmeyenler şunlar: Google için 2027 başından öteye kesin bir gün, Anthropic için yalnızca geliştirmenin başladığı bilgisi, OpenAI için tarih yerine önümüzdeki aylar ifadesi, Meta'nın katılıp katılmayacağı ve Türkiye'ye özgü bir farkın olup olmadığı. Eğitimi reddetme ile arama görünürlüğünü ayıran bir ayarı 16 Eylül'de Cloudflare tarafında ele almıştık; bu haber ise doğrudan robots.txt dosyasındaki ortak bir tercih satırıyla ilgili.

UNALSOFT açısı

Bu haberi bir takvim ve karar listesi olarak okuyoruz. Satırı eklemek kolay, asıl iş hangi içeriğin eğitime kapalı, hangisinin yapay zeka yanıtlarında görünür kalması gerektiğine karar vermek. Google'da eğitim ve Gemini grounding'i birlikte gittiği, Microsoft'ta ise ayrı ayarlandığı için tek bir satır her şirkette aynı sonucu vermeyebilir. Bing'de NoArchive veya NoCache kullanan siteler için kritik tarih 1 Mart 2027. Bu yüzden web tasarım işlerinde robots.txt, meta etiketleri ve sayfa başlıklarını bir arada, bilinçli bir tercih olarak ele alıyoruz. Taslak onaylı bir standart olmadığından, bugün için yeni bir kural yazmadan önce şirketlerin kendi belgelerini izlemek mantıklı.

Sitenizin yapay zeka tercihleri bilinçli mi, yoksa varsayılan mı?

robots.txt dosyanızı, meta etiketlerinizi ve sayfa başlıklarınızı birlikte gözden geçirmek için kısa bir görüşme yeterli.

WhatsApp'tan Yazın