Observatorium · 111 Domains
KI-Crawler bei deutschen Nachrichtenseiten
Nachrichtenanbieter treffen besonders differenzierte Entscheidungen zu Suche, Agentenabrufen und Training. Das Segment dokumentiert diese veröffentlichten Regeln neutral und vergleicht zusätzlich den Haupttext mit und ohne JavaScript.
Erste Messwerte folgen mit dem Launch
Die 111 Domains sind kuratiert und versioniert. Zahlen erscheinen erst nach dem ersten vollständigen Lauf, damit keine Stichprobe als Segmentergebnis missverstanden wird.
Was verglichen wird
Jede Domain wird mit demselben respektvollen Verfahren geprüft: Browseransicht mit JavaScript, MetozBot-Ansicht ohne JavaScript, robots.txt-Regeln nach Bot-Zweck und sechs feste Fragen zur Beantwortbarkeit. Einzelheiten, Grenzen und Korrekturweg stehen in der vollständigen Methodik.