Metodoloji
Ajan hazırlığı metodolojisi
Site Audit'te ayrı bir Ajan hazırlığı bölümü vardır. AI ajanlarının ve AI istemcilerinin kullandığı üç site dosyasını ve denetlenen sayfalardaki formları okur, bir sayfa örneklemini tarayıcıda render eder. Puan vermez ve Site Audit sağlık puanına dahil değildir. Action Center'da yalnız tarayıcıda doğrulanmış bulgular aksiyon üretebilir.
Ne denetlenir
/llms.txt: sitenin dil modelleri için Markdown özeti./.well-known/ard.jsonadresindeki ARD manifesti (Agentic Resource Discovery), eski/.well-known/ai-catalog.jsonve sitenin bu manifest için ilan ettiği adresler.- Kullanıcı istediğinde sayfa çeken dört istemci için
/robots.txtkuralları:ChatGPT-User,Claude-User,Perplexity-UserveMistralAI-User.
Dosyalar denetlenen sitenin kökünden (denetlenen ilk sayfanın host'u) okunur. GPTBot gibi eğitim ve arama tarayıcıları burada değil, Bot Analytics'te ele alınır.
Durum değerleri
| Durum | Anlamı |
|---|---|
| Geçerli | Dosya var ve aşağıdaki kuralları karşılıyor. |
| Sorun var | Dosya var ama bir kuralı bozuyor ya da site yüklenemeyen bir adres ilan ediyor. |
| İlan edilmemiş | İsteğe bağlı bir dosya 4xx dönüyor ve ona işaret eden bir şey yok. Bu bir hata değildir. |
| Ölçülemedi | 5xx, 429, ağ hatası ya da özel bir ağa çözülen adres. |
| Kurum politikası | Kasıtlı olarak işaretlediğiniz bir robots.txt kısıtı. Gösterilir, bulgu sayılmaz. |
Öneriler (ör. llms.txt'de eksik özet satırı) listelenir ama durumu değiştirmez.
llms.txt
Lighthouse 13.6 ile aynı kurallar: dosyada üst düzey bir başlık (# Ad), en az bir Markdown bağlantısı ([ad](url)) ve en az 50 karakter bulunur. Başlığın altında > özet satırının olmaması (llmstxt.org biçimi) yalnız öneridir.
Google, llms.txt dosyasını arama ve yapay zekâ özelliklerinde kullanmadığını söylüyor. Bu dosyanın görünürlüğe etkisi olduğunu iddia etmiyoruz.
ARD manifesti
Keşif sırası: robots.txt Agentmap: satırları, ana sayfadaki <link rel="ard">, rel="ard" içeren HTTP Link başlığı, ardından /.well-known/ard.json; sonra eski ai-catalog adı için aynı işaretler.
Şema hataları, öneriler ve eski biçim ayrı raporlanır:
- Hatalar: geçersiz JSON,
entriesdizisinin olmaması; girdi başına eksik ya da biçimi hatalıidentifier(biçimurn:air:<yayıncı>:[ad alanı:]<ad>),displayNameya datype, veyaurliledataalanlarından tam olarak birinin olmaması.specVersion,hostve@contextgibi diğer kök alanlara ve girdilerdeki ad alanlı ek alanlara ARD v0.91 izin verir; bunlar raporlanmaz. - Öneriler: hiç ya da beşten fazla
representativeQueries, eski ya da standart dışıtype, kullanımdan kalkancollectionsalanı. - Eski biçim: yalnız
ai-catalog.jsonbulundu.
Sitenin ilan ettiği ama yüklenemeyen adres sorundur. Ne ilan edilmiş ne de var olan manifest sorun değildir.
Kullanıcı adına sayfa çeken istemciler için robots.txt
Üç durum birbirinden ayrılır:
- Kurum politikası: kısıtı Site Audit'te kasıtlı olarak işaretlediniz. Bulgu yok.
- Yalnız kural: robots.txt istemciyi kısıtlıyor. Kural tek başına isteklerin engellendiğini kanıtlamaz; OpenAI, kullanıcının başlattığı isteklerde robots.txt kurallarının geçerli olmayabileceğini söylüyor.
- Doğrulanmış teknik engel: yalnız Bot Analytics'teki sunucu günlüklerinizle, istemcinin istekleri gerçekten 401 ya da 403 aldığında. Site Audit bu durumu yalnız robots.txt'ye bakarak raporlamaz.
Formlar
Dört denetim, denetlenen her sayfadaki formları ham HTML'de okur. Bulgular inceleme adayıdır: bir betik etiket ekleyebilir ya da alanı gizleyebilir. Tarayıcı örneklemindeki sayfalarda adayların yerini tarayıcı sonucu alır (bkz. Tarayıcı denetimi).
agent-form-unlabeled: erişilebilir adı olmayan alanlar (label,aria-label,aria-labelledby,titleya daplaceholderyok). Gizli alanlar atlanır.agent-form-honeypot: form içinde gizli (hidden,aria-hidden, satır içi stil ya da tuzak adlı sınıf) ve klavyeyle ulaşılamayan (tabindex="-1"ya daautocomplete="off") metin alanı. Ajan bu alanı gerçek alan sanıp doldurabilir ve bot koruması talebi düşürebilir. Kayıp kesin değildir.agent-form-captcha: doğrulama bileşeni (reCAPTCHA, hCaptcha, Turnstile, Friendly Captcha). Yalnız bilgi; güvenlik mekanizmasıdır, hata değildir.agent-webmcp-declarative:toolnameile WebMCP aracı ilan eden formlar vetooldescriptionalanının dolu olup olmadığı.
Tarayıcı denetimi
Her denetimde en fazla 10 sayfa gerçek bir tarayıcıda (headless Chrome) render edilir ve Chrome erişilebilirlik ağacı okunur. Örneklem önce ana sayfayı, sonra ham HTML'de form adayı olan sayfaları, sonra diğer formlu sayfaları alır. Hiçbir şeye tıklanmaz, hiçbir form gönderilmez. Render edilemeyen sayfa ham HTML adaylarını korur ve denetlenmiş sayılmaz. Aynı adrese çıkan sayfalar bir kez denetlenir; aynı denetim her zaman aynı örneklemi verir. Ajan hazırlığı kartı her denetimin kapsamını gösterir: taranan sayfa, tarayıcıda incelenen sayfa, ölçülen sayfa ve ölçülemeyen sayfa, nedeniyle birlikte (zaman aşımı, tarayıcı servisi kullanılamadı, sayfa render edilemedi, istek reddedildi).
- Denetlenen sayfada
agent-form-unlabeledveagent-form-honeypotrender edilmiş sayfayı kullanır. Betikle eklenen ad adayı kapatır; ham HTML denetiminde olduğu gibi placeholder'lı alan adlı sayılır. Tuzak, yalnız formunda görünür bir alan varsa ve arama kutusu değilse sayılır; katlanmış site araması ya da kapalı giriş penceresi raporlanmaz. agent-button-unnamed: Chrome erişilebilirlik ağacında adı olmayan görünür düğme ve bağlantılar; genellikle yalnız simgeli kontroller.agent-consent-overlay: ilk yüklemede çerez izni katmanı (bilinen izin platformları ya da çerezlerden söz eden sabit bir katman) ve görüntü alanının ne kadarını kapladığı. Yalnız bilgi.client-side-rendering-issues: ana içerik yalnız JavaScript sonrası görünüyor. Ham yanıt neredeyse boş olduğu için sayfa çekici tarayıcıya geçti, ham HTML render edilmiş metnin yüzde 30'undan azını içeriyor (render edilmiş sayfa en az 150 kelime) ya da H1 yalnız render sonrası var.
60 herkese açık sitede test (17 Kasım 2026, elle kontrol): adsız alan için 25 ham HTML adayının 22'si özel bir kontrolün arkasına gizlenmiş yerel seçim kutusu ya da bölge seçiciydi; ölçülen 4 tuzak adayının 1'i arama kutusuydu. Yukarıdaki kurallarla tarayıcıda doğrulanan 6 form bulgusunun tamamı doğruydu. Bilinen boşluk: ilk yüklemede tamamen gizli olan form (ör. çok adımlı iletişim formu) tuzak için denetlenmez.
Gözlenen ajan erişimi
Günlük kaynağı bağlıysa Bot Analytics, kullanıcı adına sayfa çeken dört istemcinin son 30 gündeki isteklerini ve aldıkları yanıtları gösterir. Bu bir kural sonucu değil, gözlenen veridir.
- Oranlara yalnız işletmecinin resmi adres listesiyle doğrulanan, GET yöntemli ve yanıt durumu bilinen istekler girer. Keşif dosyası istekleri ayrı sayılır.
- Yüzde yalnız müşteri sitenin günlüklerinin tek kaynaktan geldiğini teyit ettiğinde ve bir istemcinin en az 30 doğrulanmış isteği olduğunda gösterilir. 30 bir gösterim eşiğidir, istatistiksel güven iddiası değildir. Aksi halde yalnız sayılar gösterilir.
- Boş durumlar ayrıdır: günlük kaynağı bağlı değil, gözlem kapsamı kısmi, uygun istek gözlenmedi ve ölçülemedi (yanıt durumu bilinmiyor). Hiçbiri "trafik yok" ya da "hepsi başarılı" anlamına gelmez.
- 403 yanıtı "HTTP 403 gözlendi" olarak yazılır. Güvenlik duvarı gibi bir neden yalnız kenar kanıtı varsa belirtilir.
- 17 Kasım 2026 durum kodu düzeltmesinden önceki istekler dahil edilmez; o dönemde eksik durum 200 olarak kaydediliyordu.
Kanıt seviyeleri
Her ajan hazırlığı bulgusunun bir kanıt seviyesi vardır:
- İnceleme adayı: yalnız ham HTML'de görüldü.
- Tarayıcıda doğrulandı: render edilmiş sayfada ya da erişilebilirlik ağacında görüldü.
- Uzman doğruladı: elle ya da bir görev testinde yeniden üretildi.
Üç site dosyası kuralı dosyanın kendisini okur; sonuç, dosyanın sunulduğu hâlidir. Ham HTML form bulguları inceleme adayıdır ve aksiyon üretmez. Action Center'a yalnız tarayıcıda doğrulanmış satırlar girer ve doğrulanmış sayfa sayısıyla sayılır; çerez katmanı bilgi amaçlıdır ve hiç girmez. Ajan hazırlığının Action Center'da kendi yeri vardır: diğer Site Audit aksiyonlarından ayrı olarak denetim turu başına en fazla üç aksiyon; böylece çok sayfayı etkileyen teknik bulgular onları geri itmez. Panel her satırın kanıt seviyesini gösterir.
Ağ sınırları
Yalnız denetlenen site ve kayıtlı alan adı çekilir. Her istek ve her yönlendirme adımı DNS çözümlemesinden sonra denetlenir; özel ağlar (RFC 1918), loopback, link-local, IPv6 ULA ve bulut metadata adresleri reddedilir. Sitenin başka bir host üzerinde ilan ettiği adresler çekilmeden raporlanır. En fazla üç yönlendirme izlenir.
Ücretsiz rapor
Ücretsiz AI görünürlük raporunun ilk sürümünde yalnız üç site dosyası denetimi yer alır; form bulguları şimdilik rapora girmez: ücretsiz rapor ana sayfayı ham HTML olarak okur ve tarayıcı adımı yoktur, doğrulanmış form bulgusu için bu adım gerekir. Rapor hangi adreslerin denetlendiğini ve hangi ilan edilmiş adreslerin çekilmediğini yazar. Bot günlükleri, görev sonuçları ve puan rapora girmez.
Sınırlar
- Bu bir görev testi değildir: bir AI ajanının sitenizde bir görevi tamamlayıp tamamlayamadığını göstermez.
- Puan verilmez; Site Audit sağlık puanı bu denetimlerle de onlarsız da aynıdır.
Kural sürümü
Kural seti sürümü 1.2 (Kasım 2026): site dosyaları agent-llms-txt, agent-ard-manifest, agent-robots-live-fetch (1.0), formlar agent-form-unlabeled, agent-form-honeypot, agent-form-captcha, agent-webmcp-declarative (1.1) ve agent-button-unnamed, agent-consent-overlay, client-side-rendering-issues kurallarıyla iki form kuralının tarayıcı doğrulamasını içeren tarayıcı denetimi (1.2). Bir kural değiştiğinde bu sayfa kodla birlikte güncellenir.
