Searchestradocs

Methodik

Methodik der Agenten-Bereitschaft

Site Audit hat einen eigenen Bereich Agenten-Bereitschaft (in der App: Agent readiness). Er liest drei Dateien der Website, die KI-Agenten und KI-Abrufe nutzen, und die Formulare der geprüften Seiten und rendert eine Stichprobe von Seiten im Browser. Er vergibt keine Punktzahl und ist nicht Teil des Health Score von Site Audit. Nur im Browser bestätigte Befunde können Aktionen im Action Center erzeugen.

Was geprüft wird

  • /llms.txt: eine Markdown-Zusammenfassung der Website für Sprachmodelle.
  • Das ARD-Manifest (Agentic Resource Discovery) unter /.well-known/ard.json, die ältere Datei /.well-known/ai-catalog.json und jede Adresse, die die Website dafür angibt.
  • /robots.txt-Regeln für die vier Clients, die eine Seite abrufen, wenn ein Nutzer danach fragt: ChatGPT-User, Claude-User, Perplexity-User und MistralAI-User.

Die Dateien werden vom Stamm der geprüften Website gelesen (Host der ersten geprüften Seite). Trainings- und Such-Crawler wie GPTBot werden in Bot Analytics behandelt, nicht hier.

Statuswerte

StatusBedeutung
GültigDie Datei ist vorhanden und erfüllt die Regeln unten.
Problem gefundenDie Datei ist vorhanden, verletzt aber eine Regel, oder die Website gibt eine Adresse an, die nicht geladen werden kann.
Nicht angegebenEine optionale Datei liefert 4xx und nichts verweist auf sie. Das ist kein Fehler.
Nicht messbar5xx, 429, ein Netzwerkfehler oder eine Adresse, die auf ein privates Netz verweist.
Ihre RichtlinieEine robots.txt-Einschränkung, die Sie als beabsichtigt markiert haben. Sie wird gezeigt, aber nicht als Befund gezählt.

Empfehlungen (zum Beispiel eine fehlende Zusammenfassung in llms.txt) werden aufgeführt, ändern den Status aber nicht.

llms.txt

Dieselben Regeln wie Lighthouse 13.6: die Datei hat eine Überschrift der obersten Ebene (# Name), mindestens einen Markdown-Link ([Name](URL)) und mindestens 50 Zeichen. Eine fehlende Zeile > Zusammenfassung unter der Überschrift (Format von llmstxt.org) ist nur eine Empfehlung.

Google gibt an, llms.txt in der Suche und in seinen KI-Funktionen nicht zu verwenden. Wir behaupten keine Wirkung auf die Sichtbarkeit.

ARD-Manifest

Reihenfolge der Erkennung: Agentmap:-Zeilen in robots.txt, <link rel="ard"> auf der Startseite, ein HTTP-Link-Header mit rel="ard", dann /.well-known/ard.json; danach dieselben Signale für den älteren Namen ai-catalog.

Schemafehler, Empfehlungen und das ältere Format werden getrennt gemeldet:

  • Fehler: ungültiges JSON, kein Array entries sowie pro Eintrag ein fehlendes oder ungültiges Feld identifier (Format urn:air:<Herausgeber>:[Namensraum:]<Name>), displayName oder type, oder nicht genau eines von url und data. Weitere Stammfelder wie specVersion, host und @context sowie Erweiterungsfelder mit Namensraum in Einträgen sind nach ARD v0.91 erlaubt und werden nicht gemeldet.
  • Empfehlungen: keine oder mehr als fünf representativeQueries, ein alter oder nicht standardmäßiger type, das nicht mehr verwendete Feld collections.
  • Älteres Format: nur ai-catalog.json gefunden.

Eine angegebene Adresse, die nicht geladen werden kann, ist ein Problem. Ein Manifest, das weder angegeben noch vorhanden ist, ist keines.

robots.txt für Abrufe im Auftrag von Nutzern

Drei Fälle werden getrennt:

  1. Ihre Richtlinie: Sie haben die Einschränkung in Site Audit als beabsichtigt markiert. Kein Befund.
  2. Nur Regel: robots.txt schränkt den Client ein. Eine Regel allein beweist nicht, dass Anfragen blockiert werden; OpenAI gibt an, dass robots.txt für von Nutzern ausgelöste Abrufe möglicherweise nicht gilt.
  3. Bestätigte technische Sperre: nur mit Ihren Serverlogs in Bot Analytics, wenn Anfragen des Clients tatsächlich 401 oder 403 erhalten. Site Audit meldet diesen Fall nie allein aus robots.txt.

Formulare

Vier Prüfungen lesen die Formulare jeder geprüften Seite im rohen HTML. Ihre Befunde sind Prüfkandidaten: ein Skript kann ein Label ergänzen oder ein Feld verstecken. Auf Seiten der Browser-Stichprobe ersetzt das Browserergebnis die Kandidaten (siehe Browserprüfung).

  • agent-form-unlabeled: Felder ohne zugänglichen Namen (kein label, aria-label, aria-labelledby, title oder placeholder). Versteckte Felder werden übersprungen.
  • agent-form-honeypot: ein Textfeld im Formular, das versteckt ist (hidden, aria-hidden, Inline-Stil oder Klassenname einer Falle) und per Tastatur nicht erreichbar ist (tabindex="-1" oder autocomplete="off"). Ein Agent kann es als echtes Feld ausfüllen, und der Bot-Schutz kann die Anfrage dann verwerfen. Ein Verlust ist nicht sicher.
  • agent-form-captcha: eine Verifizierung (reCAPTCHA, hCaptcha, Turnstile, Friendly Captcha). Nur Information; sie ist ein Sicherheitsmechanismus, kein Fehler.
  • agent-webmcp-declarative: Formulare, die mit toolname ein WebMCP-Werkzeug angeben, und ob tooldescription ausgefüllt ist.

Browserprüfung

In jedem Audit werden bis zu 10 Seiten in einem echten Browser (headless Chrome) gerendert, und der Barrierefreiheitsbaum von Chrome wird gelesen. Die Stichprobe nimmt zuerst die Startseite, dann Seiten mit Formularkandidaten im rohen HTML, dann weitere Seiten mit Formularen. Es wird nichts geklickt und kein Formular gesendet. Eine Seite, die nicht gerendert werden kann, behält ihre Kandidaten aus dem rohen HTML und gilt nicht als geprüft. Seiten, die auf dieselbe Adresse führen, werden einmal geprüft, und dasselbe Audit ergibt immer dieselbe Stichprobe. Die Karte Agenten-Bereitschaft zeigt die Abdeckung jedes Audits: geprüfte Seiten, im Browser untersuchte Seiten, gemessene Seiten und nicht messbare Seiten mit Grund (Zeitüberschreitung, Browserdienst nicht verfügbar, Seite nicht gerendert, Anfrage abgelehnt).

  • agent-form-unlabeled und agent-form-honeypot nutzen auf einer geprüften Seite die gerenderte Seite. Ein per Skript ergänzter Name schließt den Kandidaten; ein Feld mit placeholder gilt wie bei der Prüfung des rohen HTML als benannt. Eine Falle zählt nur, wenn ihr Formular ein sichtbares Feld hat und sie kein Suchfeld ist; eine eingeklappte Websitesuche oder ein geschlossenes Anmeldefenster wird nicht gemeldet.
  • agent-button-unnamed: sichtbare Schaltflächen und Links ohne zugänglichen Namen im Barrierefreiheitsbaum von Chrome, meist reine Symbolschaltflächen.
  • agent-consent-overlay: eine Cookie-Einwilligungsebene beim ersten Laden (bekannte Einwilligungsplattformen oder eine feste Ebene, die Cookies erwähnt) und wie viel des Sichtbereichs sie verdeckt. Nur Information.
  • client-side-rendering-issues: der Hauptinhalt erscheint erst nach JavaScript. Der Seitenabruf musste in einen Browser wechseln, weil die rohe Antwort fast leer war, das rohe HTML enthält weniger als 30 Prozent des gerenderten Textes (gerenderte Seite mindestens 150 Wörter), oder die H1 existiert erst nach dem Rendern.

Test an 60 öffentlichen Websites (17. November 2026, von Hand geprüft): 22 von 25 Kandidaten für Felder ohne Namen aus dem rohen HTML waren native Auswahllisten oder Regionsauswahlen hinter einem eigenen Steuerelement, und 1 von 4 gemessenen Fallenkandidaten war ein Suchfeld. Mit den obigen Regeln waren alle 6 im Browser bestätigten Formularbefunde korrekt. Bekannte Lücke: ein Formular, das beim ersten Laden vollständig versteckt ist, etwa ein mehrstufiges Kontaktformular, wird nicht auf Fallen geprüft.

Beobachteter Agentenzugriff

Ist eine Protokollquelle verbunden, zeigt Bot Analytics die Anfragen der letzten 30 Tage von den vier Abrufen im Auftrag von Nutzern und die erhaltenen Antworten. Das sind beobachtete Daten, kein Regelergebnis.

  • In Quoten zählen nur Anfragen, die anhand der offiziellen Adressliste des Betreibers verifiziert wurden, mit der Methode GET und bekanntem Antwortstatus. Anfragen nach Discovery-Dateien werden getrennt gezählt.
  • Ein Prozentwert erscheint nur, wenn der Kunde bestätigt, dass die Protokolle der Website aus einer einzigen Quelle stammen, und ein Client mindestens 30 verifizierte Anfragen hat. 30 ist eine Anzeigeschwelle, keine statistische Aussage. Sonst werden nur Anzahlen gezeigt.
  • Leere Zustände sind getrennt: keine Protokollquelle verbunden, Beobachtung nur teilweise, keine passenden Anfragen beobachtet und nicht messbar (kein bekannter Antwortstatus). Keiner bedeutet "kein Traffic" oder "alles erfolgreich".
  • Eine 403-Antwort wird als "HTTP 403 beobachtet" angegeben. Eine Ursache wie eine Firewall wird nur mit Edge-Nachweis genannt.
  • Anfragen vor der Statuskorrektur vom 17. November 2026 sind ausgeschlossen, da ein fehlender Status damals als 200 gespeichert wurde.

Evidenzstufen

Jeder Befund der Agenten-Bereitschaft hat eine Evidenzstufe:

  • Prüfkandidat: nur im rohen HTML gesehen.
  • Im Browser bestätigt: in der gerenderten Seite oder ihrem Barrierefreiheitsbaum gesehen.
  • Von Fachleuten bestätigt: von Hand oder in einem Aufgabentest nachgestellt.

Die drei Regeln für Website-Dateien lesen die Datei selbst; das Ergebnis ist die Datei, wie sie ausgeliefert wird. Formularbefunde aus rohem HTML sind Prüfkandidaten und erzeugen keine Aktionen. Nur im Browser bestätigte Zeilen gelangen ins Action Center, gezählt nach bestätigten Seiten; die Cookie-Ebene ist Information und gelangt nie dorthin. Die Agenten-Bereitschaft hat im Action Center einen eigenen Platz: bis zu drei Aktionen pro Audit-Lauf, getrennt von den übrigen Site-Audit-Aktionen, damit technische Befunde auf vielen Seiten sie nicht verdrängen. Das Panel zeigt die Evidenzstufe jeder Zeile.

Netzwerkgrenzen

Abgerufen werden nur die geprüfte Website und ihre registrierbare Domain. Jede Anfrage und jeder Weiterleitungsschritt wird nach der DNS-Auflösung geprüft; private Netze (RFC 1918), Loopback, Link-Local, IPv6-ULA und Metadatenadressen von Cloud-Anbietern werden abgelehnt. Adressen, die die Website auf einem anderen Host angibt, werden ohne Abruf gemeldet. Es werden höchstens drei Weiterleitungen verfolgt.

Kostenloser Bericht

Der kostenlose KI-Sichtbarkeitsbericht enthält in seiner ersten Version nur die drei Prüfungen der Website-Dateien; Formularbefunde bleiben vorerst draußen: der kostenlose Bericht liest die Startseite als rohes HTML ohne Browserschritt, und bestätigte Formularbefunde brauchen ihn. Er nennt die geprüften Adressen und die angegebenen Adressen, die nicht abgerufen wurden. Botlogs, Aufgabenergebnisse und Punktzahlen sind nicht enthalten.

Grenzen

  • Dies ist kein Aufgabentest: er zeigt nicht, ob ein KI-Agent eine Aufgabe auf Ihrer Website erledigen kann.
  • Es gibt keine Punktzahl; der Health Score von Site Audit ist mit und ohne diese Prüfungen gleich.

Regelversion

Regelsatz Version 1.2 (November 2026): Website-Dateien agent-llms-txt, agent-ard-manifest, agent-robots-live-fetch (1.0), Formulare agent-form-unlabeled, agent-form-honeypot, agent-form-captcha, agent-webmcp-declarative (1.1) sowie die Browserprüfung mit agent-button-unnamed, agent-consent-overlay, client-side-rendering-issues und der Bestätigung der beiden Formularregeln im Browser (1.2). Diese Seite wird zusammen mit dem Code aktualisiert, wenn sich eine Regel ändert.