Defekte URLs in der Sitemap
Eine Stichprobe der Adressen aus der Sitemap, abgerufen um zu prüfen, ob sie noch antworten. Eine Sitemap voller toter Links verbraucht das Crawl-Budget für nichts.
Eine Sitemap, die Seiten auflistet, die es nicht mehr gibt, schickt Crawler auf Fehlerseiten. Jede solche Anfrage verbraucht einen Teil des Crawl-Budgets, der echten Seiten hätte zugutekommen können, und die Search Console markiert die Sitemap als fehlerhaft. Zudem ist es ein sicheres Zeichen, dass die Sitemap aus veralteten Daten entsteht: eine statische Datei, die niemand neu erzeugt hat, oder ein Cache, der einen Relaunch überlebt hat.
So prüft SiteScan
Der Scanner wählt bis zu fünf zufällige Adressen aus der Sitemap – über die ganze Datei verteilt, nicht vom Anfang – und ruft jede ab. Eine Antwort ab 400 gilt als Fehler, außer 405 und 501, die nur heißen, dass der Server die verwendete Anfrageart nicht unterstützt. Grün „Alle erreichbar“ heißt, jede Adresse der Stichprobe hat geantwortet; rot nennt die Zahl der Fehler, und die Zeilen darunter listen sie mit Statuscode auf. Als Stichprobe beweist eine grüne Zeile nicht, dass die ganze Datei sauber ist.
So beheben Sie es
- Entfernen Sie gelöschte Seiten aus der Sitemap oder erzeugen Sie sie aus dem CMS statt einer statischen Kopie.
- Für umgezogene Seiten tragen Sie die neue Adresse ein und leiten die alte per 301 weiter.
- Prüfen Sie die ganze Datei im Bericht „Seiten“ der Search Console.
Siehe auch defekte Links und Soft-404-Fehler.
Prüfen Sie diesen Punkt auf Ihrer eigenen Website
Starten Sie einen kostenlosen Scan: Der Bericht zeigt diese Zeile für Ihre Domain zusammen mit den übrigen Prüfungen des Audits.
Mehr unter „Indexierung“
Was SiteScan prüft
TLS-Zertifikat
- Ablauf des SSL/TLS-Zertifikats
- Veraltete TLS-Versionen (1.0 und 1.1)
- TLS-Zertifikatskette
- Aussteller des TLS-Zertifikats
- Signaturalgorithmus des Zertifikats
Domain-Registrierung
- Ablauf der Domainregistrierung
- Registrierter Domainname
- Domain-Registrar
- Registrierungsdatum der Domain
- Letzte Änderung der Domain
- Domain-Statuscodes (EPP)
- Transfersperre der Domain
- Abuse-Kontakt des Registrars
- Datenquelle RDAP und WHOIS
Indexierung
- robots.txt-Datei
- In robots.txt gesperrtes CSS und JS
- XML-Sitemap (sitemap.xml)
- Sitemap-Index-Datei
- Fremde URLs in der Sitemap
- lastmod-Daten in der Sitemap
- Defekte URLs in der Sitemap
- RSS- und Atom-Feed
Adressen und Weiterleitungen
- Weiterleitung von HTTP auf HTTPS
- Weiterleitung zwischen www und ohne www
- Länge der Weiterleitungskette
- 404-Fehlerbehandlung und Soft 404
Security-Header
- HTTP-Security-Header und Note
- Strict-Transport-Security-Header (HSTS)
- Content-Security-Policy-Header (CSP)
- X-Content-Type-Options: nosniff
- X-Frame-Options und Clickjacking-Schutz
- Referrer-Policy-Header
- Permissions-Policy-Header
- HSTS-Preload-Liste
- CORS und Cross-Origin-Zugriff
- HTTP-Methode TRACE
Auslieferung und Reputation
- Cache-Control-Header für HTML
- Revalidierung mit ETag und Last-Modified
- HTTP/3- und QUIC-Unterstützung
- Softwareversionen in Server-Headern
- Prüfung auf DNS-Blocklisten (DNSBL)
Interne Links
Offenliegende Dateien
- Offenliegende Dateien wie .env und .git
- Aktiviertes Verzeichnis-Listing
- Öffentliche JavaScript-Source-Maps
- Offene WordPress-Endpunkte
Konventionsdateien
- Die Datei security.txt
- llms.txt für KI-Assistenten
- Die Datei llms-full.txt
- ads.txt für autorisierte Werbeverkäufer
- Die Datei humans.txt
- Well-known-Adresse change-password
DNS und E-Mail
- MX-Einträge (Mailserver)
- SPF-Eintrag
- DMARC-Eintrag und Policy
- DNSSEC-Signierung
- CAA-Eintrag
- Redundante Nameserver
- IPv6-Unterstützung (AAAA-Eintrag)
- MTA-STS-Policy
- TLS-RPT-Eintrag für Berichte
- BIMI-Eintrag (Logo im Postfach)
- Wildcard-DNS-Eintrag
- Verwaister CNAME und Subdomain-Übernahme
Datenschutz und Einwilligung
- Analyse- und Tracking-Skripte
- Cookie-Consent-Banner
- Datenschutzerklärung
- Nutzungsbedingungen und AGB
- Impressum
- Barrierefreiheitserklärung
Core Web Vitals
- Lighthouse-Performance-Score
- Largest Contentful Paint (LCP)
- Cumulative Layout Shift (CLS)
- Interaction to Next Paint (INP)
- CrUX-Felddaten und Labordaten