Google'ın arama kalitesi savunucularından John Mueller, yapay zeka (AI) botlarının web sitelerine erişimi konusunda yeni bir tartışma başlattı. Mueller, Bluesky platformunda yaptığı paylaşımda, SEO uzmanlarının AI agent'ları için ayrı sayfalar oluşturma çabalarını eleştirdi. Ona göre, bu yaklaşım asıl sorunu çözmek yerine geçici bir yama yapmak anlamına geliyor.
Mueller, "Düzgün yapılmış bir web sitesi, AI agent'lar, arama motorları, büyük dil modelleri ve hepsinden önemlisi gerçek insanlar için iyi çalışır. Erişilebilirlik sorunlarını 'agent dostu' ayrı bir sürüm yaparak çözmeye çalışıyorsanız, sadece teknik borç inşa ediyorsunuz. Bunu birkaç kez yeniden yapmak zorunda kalacaksınız. Sorunu doğrudan çözün," ifadelerini kullandı.
Son dönemde SEO topluluğunda yükselen bir trend, LLMs.txt dosyaları ve AI tüketimi için ayrı markdown sayfaları oluşturmak. Cloudflare, Şubat ayında altyapısının otomatik olarak markdown dosyaları oluşturabildiğini duyurmuştu. Ancak OpenAI'nin resmi dokümantasyonu, OAI-SearchBot'un web sitelerini taramak için tasarlandığını ve markdown dosyalarını tavsiye etmediğini açıkça belirtiyor.
Sistem Güvenliği
SEO tarihine baktığımızda, uzmanların popüler taktikleri sorgusuz sualsiz takip etme eğilimi görülür. Örneğin, erken dönemlerde bir dizin sitesi yüksek PageRank bağlantıları satarken, SEO'lar bu bağlantıların gerçekten sıralamaya etki edip etmediğini kontrol etmemişti. Benzer şekilde, şimdi de herkes AI için ayrı sayfalar oluşturuyor, ancak bunun gerekliliği sorgulanmıyor.
Nasıl Önlem Alınmalı?
Stephanie Walter'ın da belirttiği gibi, "Üzücü gerçek şu ki, web'i insanlar için değil, yapay zekalar için erişilebilir hale getiriyoruz. Bazı siteler LLM'ler için metin sürümü sunuyor, ancak ekran okuyucu kullanıcılarının ihtiyaç duyduğu doğru başlık yapısı, dönüm noktaları gibi gerçek erişilebilirlik ihtiyaçlarını hâlâ karşılamıyor." Mueller'in yanıtı bu noktada net: Çözüm, ayrı sürümler değil, herkes için çalışan bir web sitesi inşa etmek.
HTML sayfalarını taramak, arama motorlarının otuz yılı aşkın süredir yaptığı basit bir işlemdir. Kullanıcı davranış sinyalleri, bağlantılar ve marka aramaları gibi faktörler, Google'ın sıralama algoritmasında her zaman önemli rol oynamıştır. Bu nedenle, web sitelerini herkes için erişilebilir kılmak, SEO açısından en mantıklı stratejidir. AI botlarına özel ayrıcalıklar tanımak yerine, temel erişilebilirlik ilkelerine odaklanmak, hem kullanıcı deneyimini hem de arama performansını iyileştirecektir.
Kaynak: searchenginejournal.com