Screaming Frog SEO Spider: Vollständige Anleitung 2026

Der Screaming Frog SEO Spider ist das meistgenutzte Tool für technische SEO-Audits weltweit. In wenigen Minuten crawlt er eine komplette Website und liefert detaillierte Daten zu Broken Links, Redirect-Ketten, fehlenden Meta-Tags, Duplicate Content und hundert weiteren Problemen. Diese Anleitung zeigt dir Schritt für Schritt, wie du das Tool optimal einsetzt.

Was ist der Screaming Frog SEO Spider?

Screaming Frog ist eine Desktop-Software (Windows, macOS, Linux), die eine Website wie ein Suchmaschinen-Bot crawlt. Sie ruft jede Seite ab, analysiert HTML-Elemente und speichert strukturierte Daten zu Hunderten von SEO-Faktoren — alles lokal auf deinem Rechner, ohne externe Server oder API-Kosten.

Die kostenlose Version crawlt bis zu 500 URLs pro Domain — ideal für kleine Websites und erste Analysen. Die Vollversion (ca. 200 £/Jahr) hebt diese Beschränkung auf und ermöglicht erweiterte Features wie JavaScript-Rendering, Cloud-Crawling und tiefe API-Integrationen.

Installation und erste Schritte

1. Download und Installation

1. Besuche screamingfrog.co.uk/seo-spider und lade die Version für dein Betriebssystem herunter.
2. Installiere die Software (kein Admin-Konto erforderlich auf Windows).
3. Beim ersten Start: Wähle ob du die kostenlose Version nutzt oder eine Lizenz eingibst (Licence > Enter Licence Key).

2. Ersten Crawl starten

Gib im Suchfeld oben die URL deiner Website ein und klicke Start. Der Spider beginnt sofort zu crawlen — du siehst in Echtzeit, wie URLs entdeckt und analysiert werden.

Crawl-Einstellungen richtig konfigurieren

Bevor du loslegst, lohnt es sich, die Konfiguration anzupassen. Die wichtigsten Einstellungen findest du unter Configuration.

Spider-Einstellungen

• Crawl Speed: Beginne mit 5–10 Anfragen/Sekunde, um den Server nicht zu überlasten. Für eigene Websites kannst du höher gehen.
• Max Threads: Standard 5 — erhöhe auf 10–20 nur bei leistungsstarken Servern.
• Crawl Depth: Begrenze auf 5–10 Ebenen für große Websites, um Zeit zu sparen.
• User Agent: Wähle "Googlebot" um zu sehen, was Google sieht — oder "Screaming Frog" für ehrliche Antworten des Servers.

Was crawlen und was ausschließen

Unter Configuration > Exclusions kannst du Pfade vom Crawl ausschließen:

• /cdn-cgi/, /wp-json/ — technische Pfade ohne SEO-Wert
• Datei-Extensions: .jpg, .png, .pdf — falls nur HTML-Seiten interessieren
• Parameter-URLs: ?page=, ?sort= — bei Facettennavigation

Mehr zur Handhabung von Parameter-URLs in SEO-Audits erklärt unser Artikel zur Facettennavigation SEO.

Die 8 wichtigsten Reports im Überblick

1. Response Codes — Fehler und Weiterleitungen

Der Tab Response Codes zeigt alle HTTP-Statuscodes deiner Seiten. Sortiere nach:

• 4xx (Client-Fehler): Broken Pages — Seiten die nicht existieren (404) oder gesperrt sind (401, 403). Jeder 404 der intern verlinkt ist, schadet dem Crawl-Budget und der Nutzererfahrung.
• 3xx (Weiterleitungen): Redirects. Kurze Ketten (1 Hop) sind okay, lange Ketten (3+ Hops) kosten Linkjuice. Prüfe mit unserem Redirect-Ketten-Tester.
• 5xx (Server-Fehler): Kritisch — Seiten die nicht erreichbar sind. Sofort prüfen.

2. Page Titles — Fehlende und doppelte Titel

Im Tab Page Titles siehst du alle Title-Tags deiner Website. Filter nach:

• Missing: Seiten ohne Title-Tag — technischer Fehler, jede Seite braucht einen Titel.
• Duplicate: Mehrere Seiten mit identischem Titel — Duplicate Content Signal für Google.
• Over 60 Characters / Under 30 Characters: Title zu lang wird abgeschnitten, zu kurz verschenkt Potenzial.

Mehr dazu in unserem Guide zum Title-Tag optimieren — oder prüfe Titel direkt mit dem Title-Tag-Längen-Checker.

3. Meta Description — Vollständigkeit und Länge

Analog zum Title-Tab — hier siehst du fehlende, doppelte und zu lange Meta-Descriptions. Ideale Länge: 120–158 Zeichen. Doppelte Descriptions sind schwerwiegender als zu lange, weil Google sie dann selbst generiert und das Ergebnis meist schlechter ist.

4. H1 — Überschriften-Analyse

Der Tab H1 zeigt Seiten ohne H1, mit mehreren H1-Tags oder mit leerem H1. Jede Seite sollte genau einen H1-Tag haben, der das Haupt-Keyword enthält. Mehr zur Bedeutung der Überschriften-Hierarchie erklärt unser Artikel zur Heading-Struktur für SEO.

5. Images — Alt-Texte und Bildgröße

Unter Images siehst du:

• Missing Alt Text: Bilder ohne Alt-Attribut — schlecht für SEO und Barrierefreiheit
• Over 100kb: Bilder die die Performance bremsen — komprimiere mit WebP/AVIF
• Broken Images: 404-Bilder — erzeugen Fehler in der Browser-Konsole

6. Directives — noindex, nofollow, canonical

Der Tab Directives zeigt alle Seiten mit noindex-Direktiven, canonical-Tags und X-Robots-Tag-Headern. Besonders wichtig:

• Canonicals überprüfen: Zeigen sie auf die richtige URL? Stimmt der canonical auf der kanonischen Seite auf sich selbst?
• Noindex auf wichtigen Seiten: Häufiger Fehler — versehentlich wichtige Seiten aus dem Index ausgeschlossen
• Canonical-Konflikte: Canonical-URL unterscheidet sich von der erreichbaren URL (www vs. non-www, http vs. https)

Prüfe Canonical-Tags auch mit unserem Canonical-Tag-Checker.

7. Sitemaps — Abgleich mit der Sitemap

Über Sitemaps > XML Sitemap kannst du eine sitemap.xml einlesen und mit den gecrawlten URLs abgleichen. So findest du:

• URLs in der Sitemap die nicht gecrawlt wurden (möglicherweise gesperrt)
• URLs die gecrawlt wurden aber nicht in der Sitemap sind (fehlende Seiten)
• Seiten in der Sitemap die nicht-200-Status zurückgeben

Validiere deine Sitemap vorab mit unserem Sitemap-Validator.

8. Structured Data — Schema Markup prüfen

Mit aktivierter Structured-Data-Analyse (Vollversion) erkennt Screaming Frog alle Schema-Markup-Implementierungen und prüft auf häufige Fehler. Alternativ nutze unseren JSON-LD Structured Data Validator für einzelne Seiten.

Integration mit Google Search Console

Eine der wertvollsten Features der Vollversion: Du kannst Screaming Frog direkt mit der Google Search Console verbinden und Crawl-Daten mit echten Google-Daten anreichern.

So aktivierst du die Integration:

1. Gehe zu Configuration > API Access > Google Search Console
2. Verbinde deinen Google-Account
3. Nach dem Crawl: Unter Search Console siehst du Impressions, Klicks, CTR und durchschnittliche Position — direkt neben den gecrawlten URLs

Das ermöglicht kraftvolle Analysen: Welche Seiten haben hohe Impressions aber niedrige CTR? Wo ist die Position gut aber der Traffic trotzdem gering? Diese Kombination aus crawl-Daten und Performance-Daten macht Screaming Frog zum kompletten Audit-Tool.

Fortgeschrittene Funktionen

JavaScript-Rendering

Moderne Websites rendern Inhalte oft erst mit JavaScript. Unter Configuration > Spider > Rendering > JavaScript aktivierst du das Headless-Chrome-Rendering. Screaming Frog rendert dann Seiten wie ein echter Browser und erkennt Inhalte, die für einen normalen HTTP-Request unsichtbar wären.

Custom Extraction

Mit Configuration > Custom Extraction kannst du XPath, CSS-Selektoren oder Regex nutzen, um beliebige HTML-Elemente aus gecrawlten Seiten zu extrahieren. Praktisch für: Schema-Markup prüfen, Preise auf E-Commerce-Seiten, benutzerdefinierte Attribute.

Log File Analysis

Über File > Upload Log File kannst du Server-Logdateien direkt einlesen und Crawl-Verhalten von Googlebots analysieren. Mehr dazu in unserem Leitfaden zur Log-Datei-Analyse für SEO.

Typische SEO-Probleme und wie du sie findest

Screaming Frog als Teil des SEO-Audits

Screaming Frog ist ein mächtiges Tool, aber kein All-in-One-Lösung. Am wirkungsvollsten ist es im Zusammenspiel mit anderen Datenquellen:

• Google Search Console: Zeigt welche Seiten Google tatsächlich indexiert — Screaming Frog zeigt was gecrawlt werden kann.
• PageSpeed Insights: Für Core Web Vitals und Performance — Screaming Frog zeigt nur rohe Ladezeiten, keine Lab-Daten.
• Ahrefs / Semrush: Für Backlink-Analysen — Screaming Frog crawlt nur intern.

Wie du all diese Daten zu einem vollständigen technischen Audit zusammensetzt, erklärt unser technisches SEO-Audit Leitfaden.

Kostenlos vs. Vollversion: Was brauchst du wirklich?

Schnellstart-Checkliste

Fazit

Der Screaming Frog SEO Spider ist eines der effektivsten Tools für technische SEO-Audits — und die kostenlose Version reicht für viele Anwendungsfälle vollständig aus. Wer regelmäßig Websites analysiert oder mit größeren Projekten arbeitet, kommt an der Vollversion jedoch nicht vorbei.

Starte mit dem einfachen Crawl deiner Website, arbeite die Response-Code- und Meta-Tag-Probleme ab und integriere Screaming Frog dann schrittweise in deinen regulären Crawl-Budget-Optimierungsprozess. Wenn du zudem schnell einzelne Seiten ohne Desktop-Software prüfen willst, bietet shift07.ai mehrere kostenlose SEO-Tools direkt im Browser.