Screaming Frog SEO Spider

Kurzfazit

Screaming Frog SEO Spider ist seit über einem Jahrzehnt der Branchenstandard für technische SEO-Audits — und bleibt es zu Recht. Für 245 € pro Jahr bekommst du einen Crawler, der jedes Cloud-Tool im 3000-€-Segment in der Tiefe der technischen Analyse schlägt. Die KI-Integration über Custom-JavaScript-Snippets mit OpenAI- oder Gemini-API ist real, aber sie ist ein Add-on, kein Kernfeature: Du musst eigene API-Keys mitbringen, eigene Skripte schreiben oder anpassen, und die Kosten der LLM-Calls trägst du selbst. Wer ein KI-natives SEO-Tool sucht, ist hier falsch. Wer einen erstklassigen technischen Crawler will, der sich mit LLMs erweitern lässt, ist hier richtig.

Für wen ist Screaming Frog SEO Spider?

Technische SEOs und Inhouse-Teams: Das primäre Werkzeug für alles, was nicht im Browser sichtbar ist — Statuscodes, Indexierungsdirektiven, Hreflang-Konsistenz, kanonische Tags, strukturierte Daten. Wer SEO-Audits regelmäßig durchführt, kommt an Screaming Frog kaum vorbei.

SEO-Agenturen: Eine Lizenz für 245 €/Jahr deckt unbegrenzte Crawls ab. Für Agenturen mit vielen kleinen bis mittleren Kundenprojekten ist das wirtschaftlicher als jedes Cloud-Tool.

Entwickler und Tech-Leads: Wer Migrationen, Relaunches oder strukturelle Änderungen plant, nutzt Screaming Frog für Vorher/Nachher-Crawls. Die Möglichkeit, eigene JavaScript-Snippets in den Crawl einzubauen (auch mit LLM-Calls), macht das Tool für Power-User extrem flexibel.

Content-Teams mit technischem Verständnis: Mit den AI-Bulk-Exports lassen sich alt-Texte für Bilder oder kurze Beschreibungen für viele URLs in einem Rutsch generieren — wenn man bereit ist, OpenAI- oder Gemini-Keys zu hinterlegen.

Weniger geeignet für: Marketingverantwortliche ohne technischen Hintergrund (das Interface ist erklärungsbedürftig), Unternehmen mit Bedarf an kontinuierlichem Monitoring und Slack-Alerts (dafür sind Cloud-Tools wie Ahrefs oder Sitebulb besser geeignet), und alle, die ein wirklich KI-natives Audit-Tool erwarten.

Preise im Detail

Plan	Preis	Was du bekommst
Free	0 €	Crawl-Limit 500 URLs, Kernfunktionen (kaputte Links, Meta-Daten, XML-Sitemaps), keine Custom-JavaScript-Funktionen
Lizenz (1 Nutzer)	245 € / Jahr	Unbegrenzte URLs, Custom Search/Extraction, JavaScript-Rendering, AI-Bulk-Exports, Scheduling, Konfigurationen speichern
5–9 Lizenzen	235 € / Lizenz / Jahr	Wie oben mit Mengenrabatt
10–19 Lizenzen	219 € / Lizenz / Jahr	Wie oben
20+ Lizenzen	209 € / Lizenz / Jahr	Für größere Agenturen

Einordnung: Die Free-Version ist für kleine Websites mit unter 500 Seiten vollständig ausreichend — viele KMU brauchen nie mehr. Für alles darüber ist die Vollversion mit 245 €/Jahr ein Schnäppchen, wenn man die Funktionstiefe vergleicht. Achtung: Die KI-Features kommen über eigene Custom-JavaScript-Snippets mit deinen eigenen OpenAI- oder Gemini-API-Keys — die LLM-Kosten sind nicht enthalten und können bei größeren Crawls zwei- bis dreistellig pro Lauf werden.

Stärken im Detail

Technische Tiefe ohne Konkurrenz. Screaming Frog crawlt alles: Statuscodes, Redirects, Hreflang-Annotationen, Canonical-Tags, strukturierte Daten (Schema.org), Indexierbarkeitsregeln, Robots-Direktiven, AMP-URLs, PWA-Manifeste. Cloud-Tools wie Ahrefs oder Semrush zeigen vieles davon nur oberflächlich oder gar nicht. Wer einen vollständigen technischen Audit braucht, kommt um Screaming Frog kaum herum.

Lokaler Crawl, volle Kontrolle. Der Crawl läuft auf deinem Rechner. Du entscheidest, was wann gecrawlt wird, wie schnell, mit welchen Headern, welchem User-Agent. Cloud-Crawler haben Limits, Drosselungen und manchmal IP-Blockaden — bei lokalen Tools kontrollierst du das selbst. Für DSGVO-sensible Projekte ein nicht zu unterschätzender Vorteil: Crawl-Daten verlassen deine Maschine nur, wenn du sie aktiv exportierst oder LLM-Calls eingebaut hast.

Custom JavaScript als KI-Brücke. Seit Version 20 (2024) lässt sich JavaScript-Code im Crawl ausführen — inklusive Calls an OpenAI, Gemini oder andere LLM-APIs. Das ermöglicht alt-Text-Generierung für tausende Bilder, automatische Content-Qualitätsbewertungen, Kategorisierung von URLs nach Themen oder Embedding-basierte Cluster-Diagramme. Screaming Frog liefert vorgefertigte Snippets im User-Guide, die du anpassen kannst. Das ist mächtig — aber nichts, was du ohne ein bisschen technische Bereitschaft nutzen würdest.

Sehr günstige Lizenz. 245 €/Jahr für unbegrenzte Crawls ist im SEO-Tool-Markt eine Ausnahmeerscheinung. Ahrefs startet bei 99 USD/Monat (1188 USD/Jahr), Semrush bei 139 USD/Monat. Für Agenturen, die hauptsächlich technische Audits brauchen, ist Screaming Frog deshalb oft das wirtschaftlichste Werkzeug überhaupt.

Datenexport für Weiterverarbeitung. Alle Crawl-Ergebnisse lassen sich nach CSV, Excel oder Google Sheets exportieren. Das macht das Tool zur perfekten Datenquelle für eigene Dashboards (Looker Studio, Tableau) oder für die Übergabe an Entwickler.

Schwächen ehrlich betrachtet

KI ist Marketing-Veneer, kein Kernprodukt. Wer aufgrund der „AI”-Erwähnungen in der Marketing-Kommunikation ein KI-natives SEO-Tool erwartet, wird enttäuscht. Die KI-Features sind im Wesentlichen: ein paar Bulk-Exports für Bilder und Text-to-Speech, plus die Möglichkeit, eigene LLM-Calls per JavaScript einzubauen. Du musst die API-Keys selbst beschaffen, die Snippets verstehen und die Kosten tragen. Tools wie Surfer SEO oder neuere KI-Audit-Suiten bieten KI-gestützte Empfehlungen out of the box — Screaming Frog tut das nicht.

Desktop-Anwendung ohne Cloud-Modus. Du musst das Tool auf deinem Rechner installieren, der Crawl belastet deine CPU/RAM, und ohne eigenen Server gibt es keine geplanten Hintergrund-Crawls. Für Teams, die kontinuierliches Monitoring brauchen, ist das ein Bruch im Workflow. Es gibt zwar Scheduling-Funktionen, aber sie setzen einen laufenden Rechner voraus.

Keine deutsche Oberfläche, kein deutscher Support. Das Interface ist komplett auf Englisch, ebenso die Dokumentation und der Support. Für SEO-Profis kein Problem — sie kennen die Begriffe. Für Marketing-Generalisten oder Junior-Mitarbeiter eine echte Hürde.

RAM-Hunger bei großen Sites. Crawls über 500.000 URLs werden ohne explizites Datenbank-Storage und ausreichend RAM (16 GB+) langsam oder brechen ab. Für Enterprise-Sites mit mehreren Millionen URLs sind dedizierte Cloud-Crawler (DeepCrawl, OnCrawl, Botify) die bessere Wahl — wenn Budget vorhanden ist.

Lernkurve ist steiler, als das Marketing suggeriert. Das UI wirkt wie Excel der frühen 2000er — Tabs, Tabellen, Dropdowns. Die Power steckt in den Konfigurations-Profilen, den Custom-Search-Regeln und der JavaScript-Extraction. Wer sich nicht eingearbeitet hat, sieht nur einen Bruchteil der Möglichkeiten.

Alternativen im Vergleich

Wenn du…	…nimm stattdessen
Ein Cloud-SEO-All-in-One mit Backlink-Analyse, Keyword-Tracking und Site-Audit willst	Ahrefs
Eine umfassende Marketing-Suite mit SEO, PPC und Content-Marketing brauchst	Semrush
KI-gestützte Content-Optimierung mit Echtzeit-Empfehlungen suchst	Surfer SEO
Schnelle Quellen-Recherche zu SEO-Themen brauchst	Perplexity
Inhalte für SEO neu schreiben oder optimieren willst	ChatGPT

Screaming Frog ist kein Konkurrent zu Ahrefs oder Semrush — es ist ein Ergänzungswerkzeug. Die meisten professionellen SEO-Setups kombinieren ein Cloud-Tool für Keyword-/Backlink-Daten mit Screaming Frog für tiefe technische Audits. Wer beides ersetzen will durch ein einziges Tool, sucht im falschen Segment. Kommerzielle Cloud-Crawler wie Sitebulb, OnCrawl, JetOctopus oder DeepCrawl sind direkte Wettbewerber im Crawl-Segment, kosten aber das Vier- bis Zehnfache.

So steigst du ein

Schritt 1: Lade die Free-Version unter screamingfrog.co.uk/seo-spider/ herunter (Windows, macOS, Linux). Teste sie an deiner eigenen Website — bis 500 URLs ohne Lizenz. Schau dir die Tabs „Internal”, „Response Codes”, „Page Titles”, „Meta Description” und „H1” an. Das sind die wichtigsten Standardprüfungen.

Schritt 2: Verbinde Google Search Console und Google Analytics über Configuration > API Access. Damit reichert Screaming Frog die Crawl-Daten mit Klicks, Impressionen und Sitzungen an — du siehst sofort, welche URLs Traffic bringen und welche nicht. Teste auch die PageSpeed-Insights-Integration für Core-Web-Vitals.

Schritt 3 (optional, für KI-Power-User): Aktiviere unter Configuration > Custom > Custom JavaScript ein vorgefertigtes Snippet für OpenAI oder Gemini. Trag deinen API-Key ein, lass beim Crawl alt-Texte oder kurze Beschreibungen generieren. Rechne mit Kosten von wenigen Cent bis mehreren Euro pro 1000 URLs — je nach Modell und Prompt-Länge. Teste IMMER zuerst an einem Mini-Crawl von 50 URLs, bevor du auf große Sites loslässt.

Ein konkretes Beispiel

Eine SEO-Agentur in Köln betreut einen Online-Shop mit rund 12.000 Produktseiten. Vor jedem Quartals-Audit lässt sie Screaming Frog mit aktivierter Search-Console-Verknüpfung über die komplette Site laufen — Dauer: rund 90 Minuten. Der Crawl liefert eine Liste mit 340 fehlenden Meta-Beschreibungen, 87 doppelten Title-Tags und 1.200 Bildern ohne alt-Text. Für die alt-Texte aktiviert das Team ein Custom-JavaScript-Snippet, das pro Bild einen Gemini-Call macht und einen kurzen, deutschsprachigen alt-Text vorschlägt. Kosten: rund 18 € an Gemini-API-Gebühren für alle 1.200 Bilder. Das Ergebnis ist ein CSV-Export, den der Shop-Entwickler direkt ins Shopsystem importiert. Was früher zwei Werktage Handarbeit war, ist jetzt ein halbtägiger Prozess.

DSGVO & Datenschutz

• Datenhaltung: Crawl-Daten verbleiben auf deinem lokalen Rechner. Screaming Frog selbst sammelt keine Crawl-Inhalte.
• Lizenz-Aktivierung: Für die Lizenzprüfung kontaktiert die Software Server in Großbritannien (Screaming Frog Ltd., Henley-on-Thames). Für DSGVO-Zwecke gilt UK seit dem Angemessenheitsbeschluss als sicheres Drittland.
• API-Integrationen: Wenn du Google Search Console, Analytics, PageSpeed Insights oder OpenAI/Gemini einbindest, gelten deren Datenschutzbedingungen — Daten verlassen den lokalen Rechner.
• KI-Hooks: Eingebaute Custom-JavaScript-Snippets mit OpenAI/Gemini schicken Crawl-Inhalte (z. B. Bilder, Texte) an US-Server. Vor dem produktiven Einsatz prüfen, ob das mit deinen Datenschutzanforderungen vereinbar ist — insbesondere bei Kunden-Sites mit personenbezogenen Daten.
• AVV / Auftragsverarbeitung: Für die reine Software-Lizenz nicht erforderlich, da kein Verarbeiter im DSGVO-Sinne. Bei Nutzung der KI-Hooks AVV mit OpenAI bzw. Google Cloud erforderlich.
• Empfehlung für Unternehmen: Beim Crawl von Kundenwebsites mit Login-Bereichen oder personenbezogenen Daten Crawls auf öffentliche Bereiche beschränken und den Crawl-Output sicher speichern.

Gut kombiniert mit

• Ahrefs — Ahrefs liefert Keyword- und Backlink-Daten, Screaming Frog die technische Tiefe. Beide zusammen ergeben einen vollständigen SEO-Audit, den keines der beiden Tools allein liefert.
• ChatGPT — Crawl-Output (z. B. fehlende Meta-Beschreibungen) als CSV exportieren und ChatGPT die Texte in passender Tonalität vorschlagen lassen. Anschließend zurück ins CMS importieren.
• Perplexity — Recherche zu spezifischen technischen SEO-Fragen oder Algorithmus-Updates, deren Implikationen sich dann mit Screaming Frog auf der eigenen Site überprüfen lassen.

Unser Testurteil

Screaming Frog SEO Spider verdient 3 von 5 Sternen — als technisches Werkzeug wäre es 5 Sterne wert, aber wir bewerten Tools im KI-Kontext, und hier ist die KI-Integration ein Add-on, kein Kernfeature. Was Sterne kostet: keine native KI ohne eigene API-Keys und Skript-Anpassung, keine deutsche Oberfläche, keine Cloud-Variante, keine kontinuierlichen Alerts. Was Sterne sichert: unschlagbare technische Tiefe, exzellentes Preis-Leistungs-Verhältnis, lokale Datenkontrolle und die Flexibilität, eigene LLM-Hooks via JavaScript einzubauen. Für SEO-Profis bleibt Screaming Frog Pflicht. Wer ein KI-natives Audit-Tool sucht, sollte sich anderswo umsehen.

Was wir bemerkt haben

• Mai 2026 — Korrektur: Die Lizenz kostet 245 € pro Jahr, nicht 259 USD wie in älteren Quellen genannt. Screaming Frog rechnet inzwischen einheitlich in Euro ab, mit Mengenrabatten ab 5 Lizenzen.
• 2024 — Mit Version 20 wurde Custom JavaScript im Crawl eingeführt — der Hebel für die LLM-Integration. Vorgefertigte Snippets für OpenAI und Gemini sind seither im User-Guide dokumentiert. Das ist die wichtigste Änderung der letzten Jahre, wird im Marketing aber unter „AI Features” überverkauft.
• 2024–2025 — Bulk-Exports „AI > Images” und „AI > Text to Speech Audio” hinzugefügt. Praktisch für Massen-alt-Texte, aber funktional eng begrenzt.
• Anhaltend — Screaming Frog bleibt ein Familienunternehmen aus Henley-on-Thames mit überschaubarem Team und konservativer Roadmap. Keine Übernahme, keine Risikokapital-Runde, keine VC-getriebene Pivot-Risiken — eine angenehme Ausnahme im SEO-Tool-Markt.