Crawler-Abdeckung
0%
Anteil der Wörter aus dem gerenderten Haupttext, die auch der Crawler erhält.
kritisch
https://dw.com/
Ein wesentlicher Teil des gerenderten Haupttexts fehlt dem Crawler
Die Crawler-Ansicht enthält deutlich weniger oder anderen Hauptinhalt als die gerenderte Ansicht. JavaScript, Bot-Auslieferung oder das Seiten-Markup können die Ursache sein.
Inhaltsähnlichkeit
0%
Vergleicht beide Texte unabhängig von reiner Wortzahl und erkennt gleich lange, aber andere Inhalte.
Wortdifferenz
−132 Wörter
−100% gegenüber der gerenderten Ansicht. Minus heißt: dem Crawler fehlen Wörter.
Metoz-Score
–/100
Lesbarkeit
0
Zugang
100
Zitierfähigkeit
–
Ein Gesamtscore wird erst angezeigt, wenn alle drei Teilprüfungen einschließlich Zitat-Test vorliegen.
Report mitnehmen
Report per E-Mail erhalten
Wir schicken dir die wichtigsten Befunde und den Link zu diesem vollständigen Report.
Einmaliger Versand über Epostix, kein Newsletter und kein Öffnungs- oder Klicktracking. metoz.de speichert die E-Mail-Adresse nicht in der eigenen Datenbank. Mehr im Datenschutz.
Was jetzt?
Befunde und Empfehlungen
kritisch
Fehlende Inhalte serverseitig ausliefern
Befund: Die Crawler-Ansicht deckt 0% des gerenderten Haupttexts ab.
Folge: Fehlende Leistungen, Preise oder Kontaktdaten können von Such- und Antwortsystemen nicht zuverlässig verwendet werden.
Empfehlung: Die unten markierten Nur-Browser-Passagen in das initiale HTML aufnehmen und anschließend erneut scannen.
gut
KI-Suchzugang ist offen
Befund: Keiner der geprüften Such-Crawler wird für diese URL durch robots.txt blockiert.
Folge: Die robots.txt verhindert damit nicht, dass diese Dienste die Seite als Webquelle abrufen.
Empfehlung: Bot-Regeln bei Änderungen an der robots.txt erneut prüfen.
Block 3
Zitat-Test
Ohne crawler-sichtbaren Haupttext kann der Zitat-Test nicht ausgeführt werden.
Wo sich die Inhalte unterscheiden
Beispielpassagen mit geringer Wortüberschneidung. Sie zeigen Prüfstellen, nicht automatisch einen Fehler.
Nur in der gerenderten Ansicht
- „HomepageSkip next section Top StoryTop StoryIsraeli military to open criminal probes into 2 Gaza attacksConflicts6 hours agoPage 1 of 1Skip next section DevelopingDevelopingConflicts4 hours agoPolitics59 minutes agoSkip next section Video…“
- „next section Latest showLatest show22 hours ago25:54 minSkip next section A closer lookA closer lookRussia's war in UkraineRussia launched a full-scale war on Ukraine on February 24, 2022, an escalation of a conflict that began“
- „with Russia's annexation of Crimea in 2014.ConflictsAugust 18, 2026Rule of LawAugust 17, 2026ConflictsAugust 16, 2026Explore moreSkip next section In the spotlightIn the spotlightFreedom of Speech3 minutes ago03:16 minSociety7 hours agoMig…“
Nur in der Crawler-Ansicht
Keine deutliche Nur-Crawler-Passage gefunden.
Die Doppelansicht
Beide Ansichten werden getrennt abgerufen und anschließend mit derselben Haupttext-Extraktion ausgewertet. Kennzahlen und Grenzen erklärt.
Gerenderte Ansicht
Chromium mit JavaScript · 132 Wörter
HomepageSkip next section Top StoryTop StoryIsraeli military to open criminal probes into 2 Gaza attacksConflicts6 hours agoPage 1 of 1Skip next section DevelopingDevelopingConflicts4 hours agoPolitics59 minutes agoSkip next section Video newsVideo news7 hours ago01:33 minSkip next section Latest showLatest show22 hours ago25:54 minSkip next section A closer lookA closer lookRussia's war in UkraineRussia launched a full-scale war on Ukraine on February 24, 2022, an escalation of a conflict that began with Russia's annexation of Crimea in 2014.ConflictsAugust 18, 2026Rule of LawAugust 17, 2026ConflictsAugust 16, 2026Explore moreSkip next section In the spotlightIn the spotlightFreedom of Speech3 minutes ago03:16 minSociety7 hours agoMigrationAugust 18, 2026ConflictsAugust 18, 202605:27 minPoliticsAugust 18, 2026ClimateAugust 18, 2026Skip next section Most viewedMost viewedShow moreSkip next section LivingLivingSports7 hours agoSportsAugust 18, 2026SocietyAugust 17, 202604:31 minSocietyAugust 17, 202613:08 minClimateAugust 17, 2026HealthAugust 17, 2026
MetozBot-Ansicht
Ohne JavaScript · 0 Wörter
Kein lesbarer Haupttext gefunden.
Türsteher-Check
robots.txt regelt den erlaubten Zugriff. Ein „erlaubt“ beweist noch nicht, dass ein Dienst die Seite indexiert oder zitiert.
Suche und Quellenalle erlaubt
erlaubtOAI-SearchBotOpenAI
Ohne Zugriff kann ChatGPT die Seite nicht als Quelle für die Websuche nennen.
erlaubtClaude-SearchBotAnthropic
Ohne Zugriff kann Claude die Seite nicht über diesen Such-Crawler als Quelle erfassen.
erlaubtGooglebotGoogle
Ohne Zugriff kann die Seite in der Google-Suche fehlen; das ist keine reine KI-Einstellung.
erlaubtPerplexityBotPerplexity
Ohne Zugriff kann Perplexity die Seite nicht für seine Suchantworten indexieren.
erlaubtApplebotApple
Ohne Zugriff kann die Sichtbarkeit in Apple-Suchergebnissen eingeschränkt sein.
erlaubtFacebookBotMeta
Ohne Zugriff können Metas Abrufdienste die Seite nicht in ihren Produkten aufbereiten.
erlaubtYouBotYou.com
Ohne Zugriff kann You.com die Seite nicht über diesen Such-Crawler erfassen.
Nutzergesteuerte Abrufealle erlaubt
erlaubtChatGPT-UserOpenAI
Ohne Zugriff kann ChatGPT keine vom Nutzer ausgelösten Abrufe der Seite durchführen.
erlaubtClaude-UserAnthropic
Ohne Zugriff sind von Claude-Nutzern ausgelöste Abrufe eingeschränkt.
erlaubtPerplexity-UserPerplexity
Ohne Zugriff sind nutzergesteuerte Abrufe durch Perplexity eingeschränkt.
erlaubtMeta-ExternalFetcherMeta
Ohne Zugriff sind externe, von Meta ausgelöste Abrufe eingeschränkt.
Training und Datensätzealle erlaubt
erlaubtGPTBotOpenAI
Ohne Zugriff fließt der Inhalt nicht in das Training von OpenAI-Modellen ein.
erlaubtClaudeBotAnthropic
Ohne Zugriff kann Anthropic den Inhalt nicht mit diesem Crawler erfassen.
erlaubtGoogle-ExtendedGoogle
Ohne Zugriff darf Google den Inhalt nicht zur Verbesserung von Gemini und ähnlichen generativen APIs verwenden.
erlaubtAmazonbotAmazon
Ohne Zugriff kann Amazon den Inhalt nicht mit diesem KI-Crawler erfassen.
erlaubtApplebot-ExtendedApple
Ohne Zugriff kann Apple den Inhalt nicht für Apple-Intelligence-Dienste verwenden.
erlaubtCCBotCommon Crawl
Ohne Zugriff erscheint der Inhalt nicht im Common-Crawl-Datensatz, den viele Modelle nutzen.
erlaubtMeta-ExternalAgentMeta
Ohne Zugriff kann Meta den Inhalt nicht über diesen externen Agenten abrufen.
erlaubtBytespiderByteDance
Ohne Zugriff kann ByteDance den Inhalt nicht mit diesem Crawler erfassen.
erlaubtcohere-aiCohere
Ohne Zugriff kann Cohere den Inhalt nicht mit diesem Crawler erfassen.
erlaubtDiffbotDiffbot
Ohne Zugriff kann Diffbot die Seite nicht für seine Wissensdaten erfassen.
robots.txt: gefunden und ausgewertet
Messmethode und Grenzen
Die gerenderte Ansicht läuft in Chromium mit JavaScript und einem normalen Browser-User-Agent. Die Crawler-Ansicht nutzt einen separaten Abruf mit MetozBot/1.0 und führt kein JavaScript aus. Beide HTML-Fassungen durchlaufen Mozilla Readability.
Gleiche Wortzahlen sind deshalb möglich und meist positiv. Aussagekräftiger sind Crawler-Abdeckung, Inhaltsähnlichkeit und die abweichenden Passagen. A/B-Tests, Consent-Banner und zeitabhängige Inhalte können zwei Abrufe trotzdem beeinflussen.
- Crawler-Abruf
- 19.08.2026, 17:59:53 · Hash e3b0c44298fc
- Browser-Abruf
- 19.08.2026, 17:59:58 · Hash c8645fe23145
- Crawler-Ziel
- https://www.dw.com/
- Browser-Ziel
- https://www.dw.com/