Crawler und Opt-out
MetozBot
MetozBot prüft auf ausdrücklichen Zuruf sowie in den offengelegten, festen Observatoriumsläufen. Er respektiert robots.txt und nutzt den User-Agent MetozBot/1.0 (+https://metoz.de/bot).
Abrufgrenzen
Der reguläre Website-Scan prüft ein Seitenziel pro Domain und Lauf. Beim getrennten Agentic Commerce Check liest Metoz zuerst die robots.txt und ruft danach je höchstens einmal die erlaubten festen Pfade /.well-known/ucp und /.well-known/acp.json ab. Dieselbe Grenze gilt pro Domain im wöchentlichen Commerce-Lauf über die 100 versionierten Onlineshops. Diese Abrufe folgen keiner Weiterleitung und keiner URL aus einem Discovery-Dokument. Das Lesen der robots.txt selbst ist von den Obergrenzen ausgenommen.
Der allgemeine 353-Domain-Korpus wird monatlich gemessen. Die Commerce-Teilmenge läuft wöchentlich; beide Automationen überlappen nicht. Neue Ergebnisse bleiben bis zur fachlichen Prüfung und ausdrücklichen Freigabe öffentlich gesperrt.
Kontakt und Opt-out
Betreiber erreichen das Projekt unter info@metoz.de. Sie können den Crawler-Zugriff jederzeit mit Disallow: / für MetozBot in ihrer robots.txt sperren. Die Anleitung robots.txt für KI-Bots richtig steuern erklärt, wie Regeln nach Zweck getrennt gepflegt werden.
Korrekturen
Metoz dokumentiert öffentlich beobachtbare technische Antworten. Wenn ein Befund durch eine kurzfristige Schutzseite oder einen Fehler entstanden ist, prüfen wir einen sachlichen Hinweis und veranlassen auf Wunsch eine erneute Messung. Nach einer Änderung kann die öffentlich ausgelieferte Fassung erneut geprüft werden.