Screaming Frog SEO Spider

Kurzfazit

Screaming Frog SEO Spider ist seit über einem Jahrzehnt der Branchenstandard für technische SEO-Audits, und bleibt es zu Recht. Für 245 € pro Jahr bekommst du einen Crawler für tiefe technische Analysen, der auf deinem eigenen Rechner läuft. Die KI-Anbindung ist eingebaut: Mit Lizenz richtest du bis zu 100 Prompts gegen die Crawl-Daten ein, mit OpenAI, Gemini, Anthropic oder einem lokalen Modell in Ollama. Sie bleibt ein Zusatz, kein Kernfeature: Du bringst einen eigenen API-Schlüssel mit oder betreibst das Modell selbst, und die Kosten der API-Aufrufe trägst du. Wer ein KI-natives SEO-Tool sucht, ist hier falsch. Wer einen erstklassigen technischen Crawler will, der sich mit LLMs erweitern lässt, ist hier richtig.

Für wen ist Screaming Frog SEO Spider?

Technische SEOs und Inhouse-Teams: Das primäre Werkzeug für alles, was nicht im Browser sichtbar ist, Statuscodes, Indexierungsdirektiven, Hreflang-Konsistenz, kanonische Tags, strukturierte Daten. Wer SEO-Audits regelmäßig durchführt, kommt an Screaming Frog kaum vorbei.

SEO-Agenturen: Eine Lizenz für 245 €/Jahr deckt unbegrenzte Crawls ab. Für Agenturen mit vielen kleinen bis mittleren Kundenprojekten ist das wirtschaftlicher als jedes Cloud-Tool.

Entwickler und Tech-Leads: Wer Migrationen, Relaunches oder strukturelle Änderungen plant, nutzt Screaming Frog für Vorher/Nachher-Crawls. Die Möglichkeit, eigene JavaScript-Snippets in den Crawl einzubauen (auch mit LLM-Calls), macht das Tool für Power-User extrem flexibel.

Content-Teams mit technischem Verständnis: Mit eigenen KI-Prompts im Crawl lassen sich alt-Texte für Bilder oder kurze Beschreibungen für viele URLs in einem Rutsch erzeugen, wenn man einen API-Schlüssel bei OpenAI, Gemini oder Anthropic hinterlegt oder ein lokales Modell in Ollama nutzt.

Weniger geeignet für: Marketingverantwortliche ohne technischen Hintergrund (das Interface ist erklärungsbedürftig), Unternehmen mit Bedarf an kontinuierlichem Monitoring und Slack-Alerts (dafür sind Cloud-Tools wie Ahrefs oder Sitebulb besser geeignet), und alle, die ein wirklich KI-natives Audit-Tool erwarten.

Preise im Detail

Plan	Preis	Was du bekommst
Free	0 €	Crawl-Limit 500 URLs, Kernfunktionen (kaputte Links, Meta-Daten, XML-Sitemaps), keine Custom-JavaScript-Funktionen, keine KI-Anbindung
Lizenz (1 Nutzer)	245 € / Jahr (umgerechnet 20,42 € im Monat)	Unbegrenzte URLs, Custom Search/Extraction, JavaScript-Rendering, KI-Anbindung mit bis zu 100 Prompts, Scheduling, Konfigurationen speichern
5 bis 9 Lizenzen	235 € / Lizenz / Jahr	Wie oben mit Mengenrabatt
10 bis 19 Lizenzen	219 € / Lizenz / Jahr	Wie oben
20+ Lizenzen	209 € / Lizenz / Jahr	Für größere Agenturen

Einordnung: Die Free-Version ist für kleine Websites mit unter 500 Seiten vollständig ausreichend, viele KMU brauchen nie mehr. Für alles darüber ist die Vollversion mit 245 €/Jahr ein Schnäppchen, wenn man die Funktionstiefe vergleicht. Achtung: Für die KI-Anbindung brauchst du einen eigenen API-Schlüssel bei OpenAI, Gemini oder Anthropic oder ein lokales Modell in Ollama. Für OpenAI ist laut Screaming Frog ein aufgeladenes API-Konto nötig, ein ChatGPT-Abo genügt nicht; die API-Kosten sind nicht im Lizenzpreis enthalten.

Stärken im Detail

Technische Tiefe ohne Konkurrenz. Screaming Frog crawlt alles: Statuscodes, Redirects, Hreflang-Annotationen, Canonical-Tags, strukturierte Daten (Schema.org), Indexierbarkeitsregeln, Robots-Direktiven, AMP-URLs, PWA-Manifeste. Cloud-Tools wie Ahrefs oder Semrush zeigen vieles davon nur oberflächlich oder gar nicht. Wer einen vollständigen technischen Audit braucht, kommt um Screaming Frog kaum herum.

Lokaler Crawl, volle Kontrolle. Der Crawl läuft auf deinem Rechner. Du entscheidest, was wann gecrawlt wird, wie schnell, mit welchen Headern, welchem User-Agent. Cloud-Crawler haben Limits, Drosselungen und manchmal IP-Blockaden, bei lokalen Tools kontrollierst du das selbst. Für DSGVO-sensible Projekte ein nicht zu unterschätzender Vorteil: Crawl-Daten verlassen deine Maschine nur, wenn du sie aktiv exportierst oder LLM-Calls eingebaut hast.

KI-Anbindung im Crawl. Unter Configuration > API Access > AI verbindest du OpenAI, Gemini, Anthropic oder ein lokales Modell in Ollama und richtest im Reiter „Prompt Configuration“ bis zu 100 Prompts gegen die Crawl-Daten ein, etwa auf Seitentext, HTML oder eine eigene Extraktion; die Antworten stehen im Tab „AI“ neben den übrigen Crawl-Daten. Embeddings derselben Anbieter (OpenAI, Gemini, Ollama) nutzt das Programm für semantische Ähnlichkeit und Content-Cluster. Daneben lässt sich seit Version 20 (Mai 2024) eigenes JavaScript im Crawl ausführen, das ebenfalls APIs ansprechen kann. Das ist mächtig, aber nichts, was du ohne ein bisschen technische Bereitschaft nutzen würdest.

Sehr günstige Lizenz. 245 €/Jahr für unbegrenzte Crawls ist im SEO-Tool-Markt eine Ausnahmeerscheinung. Ahrefs startet bei 27 €/Monat (Starter), der Lite-Plan kostet 119 €/Monat (129 USD), Semrush im Tarif SEO bei 112,52 € im Monat bei Jahreszahlung und 134,21 € bei monatlicher Zahlung (Stand 23.10.2026). Für Agenturen, die hauptsächlich technische Audits brauchen, ist Screaming Frog deshalb oft das wirtschaftlichste Werkzeug überhaupt.

Datenexport für Weiterverarbeitung. Alle Crawl-Ergebnisse lassen sich nach CSV, Excel oder Google Sheets exportieren. Das macht das Tool zur perfekten Datenquelle für eigene Dashboards (Looker Studio, Tableau) oder für die Übergabe an Entwickler.

Schwächen ehrlich betrachtet

KI ist ein Zusatz, kein Kernprodukt. Wer aufgrund der „AI”-Erwähnungen in der Marketing-Kommunikation ein KI-natives SEO-Tool erwartet, wird enttäuscht. Die KI-Funktionen sind eine Anbindung an fremde Modelle: Du schreibst die Prompts selbst, bringst einen API-Schlüssel mit oder betreibst ein Modell in Ollama und trägst die Kosten. Tools wie Surfer SEO oder neuere KI-Audit-Suiten bieten KI-gestützte Empfehlungen out of the box, Screaming Frog tut das nicht.

Desktop-Anwendung ohne Cloud-Modus. Du musst das Tool auf deinem Rechner installieren, der Crawl belastet deine CPU/RAM, und ohne eigenen Server gibt es keine geplanten Hintergrund-Crawls. Für Teams, die kontinuierliches Monitoring brauchen, ist das ein Bruch im Workflow. Es gibt zwar Scheduling-Funktionen, aber sie setzen einen laufenden Rechner voraus.

Keine deutsche Oberfläche, kein deutscher Support. Das Interface ist komplett auf Englisch, ebenso die Dokumentation und der Support. Für SEO-Profis kein Problem, sie kennen die Begriffe. Für Marketing-Generalisten oder Junior-Mitarbeiter eine echte Hürde.

RAM-Hunger bei großen Sites. Crawls über 500.000 URLs werden ohne explizites Datenbank-Storage und ausreichend RAM (16 GB+) langsam oder brechen ab. Für Enterprise-Sites mit mehreren Millionen URLs sind dedizierte Cloud-Crawler (DeepCrawl, OnCrawl, Botify) die bessere Wahl, wenn Budget vorhanden ist.

Lernkurve ist steiler, als das Marketing suggeriert. Das UI wirkt wie Excel der frühen 2000er, Tabs, Tabellen, Dropdowns. Die Power steckt in den Konfigurations-Profilen, den Custom-Search-Regeln und der JavaScript-Extraction. Wer sich nicht eingearbeitet hat, sieht nur einen Bruchteil der Möglichkeiten.

Alternativen im Vergleich

Wenn du…	…nimm stattdessen
Ein Cloud-SEO-All-in-One mit Backlink-Analyse, Keyword-Tracking und Site-Audit willst	Ahrefs
Eine umfassende Marketing-Suite mit SEO, PPC und Content-Marketing brauchst	Semrush
KI-gestützte Content-Optimierung mit Echtzeit-Empfehlungen suchst	Surfer SEO
Schnelle Quellen-Recherche zu SEO-Themen brauchst	Perplexity
Inhalte für SEO neu schreiben oder optimieren willst	ChatGPT

Screaming Frog ist kein Konkurrent zu Ahrefs oder Semrush, es ist ein Ergänzungswerkzeug. Die meisten professionellen SEO-Setups kombinieren ein Cloud-Tool für Keyword-/Backlink-Daten mit Screaming Frog für tiefe technische Audits. Wer beides ersetzen will durch ein einziges Tool, sucht im falschen Segment. Kommerzielle Cloud-Crawler wie Sitebulb, OnCrawl, JetOctopus oder DeepCrawl sind direkte Wettbewerber im Crawl-Segment, kosten aber das Vier- bis Zehnfache.

So steigst du ein

Schritt 1: Lade die Free-Version unter screamingfrog.co.uk/seo-spider/ herunter (Windows, macOS, Linux). Teste sie an deiner eigenen Website, bis 500 URLs ohne Lizenz. Schau dir die Tabs „Internal”, „Response Codes”, „Page Titles”, „Meta Description” und „H1” an. Das sind die wichtigsten Standardprüfungen.

Schritt 2: Verbinde Google Search Console und Google Analytics über Configuration > API Access. Damit reichert Screaming Frog die Crawl-Daten mit Klicks, Impressionen und Sitzungen an, du siehst sofort, welche URLs Traffic bringen und welche nicht. Teste auch die PageSpeed-Insights-Integration für Core-Web-Vitals.

Schritt 3 (optional, mit Lizenz): Verbinde unter Configuration > API Access > AI OpenAI, Gemini, Anthropic oder ein lokales Ollama-Modell, trag deinen API-Schlüssel ein und richte im Reiter „Prompt Configuration“ deine Prompts ein, bis zu 100. Für Seitentext oder HTML als Eingabe muss unter Config > Spider > Extraction die Option „Store HTML“ aktiv sein. Mit dem Prompt-Tester prüfst du einen Prompt an einer einzelnen URL, bevor du den ganzen Crawl laufen lässt; die API-Kosten rechnet der KI-Anbieter ab.

DSGVO & Datenschutz

• Datenhaltung: Crawl-Daten verbleiben auf deinem lokalen Rechner. Screaming Frog selbst sammelt keine Crawl-Inhalte.
• Lizenz-Aktivierung: Für die Lizenzprüfung kontaktiert die Software Server in Großbritannien (Screaming Frog Ltd., Henley-on-Thames). Für DSGVO-Zwecke gilt UK seit dem Angemessenheitsbeschluss als sicheres Drittland.
• API-Integrationen: Wenn du Google Search Console, Analytics, PageSpeed Insights oder einen KI-Anbieter (OpenAI, Gemini, Anthropic) einbindest, gelten deren Datenschutzbedingungen, Daten verlassen den lokalen Rechner.
• KI-Anbindung: Prompts mit OpenAI, Gemini oder Anthropic schicken die gewählten Crawl-Inhalte (etwa Seitentext oder HTML) an den jeweiligen Anbieter, zu dessen Bedingungen; mit einem lokalen Modell in Ollama bleiben sie auf deinem Rechner. Für eigene JavaScript-Snippets, die Daten an Dritte senden, bist laut Benutzerhandbuch du selbst verantwortlich. Vor dem produktiven Einsatz prüfen, ob das mit deinen Datenschutzanforderungen vereinbar ist, insbesondere bei Kunden-Sites mit personenbezogenen Daten.
• AVV / Auftragsverarbeitung: Für die reine Software-Lizenz nicht erforderlich, da kein Verarbeiter im DSGVO-Sinne. Bei Nutzung der KI-Anbindung mit einem Cloud-Anbieter AVV mit OpenAI, Google oder Anthropic erforderlich, mit Ollama lokal nicht.
• Empfehlung für Unternehmen: Beim Crawl von Kundenwebsites mit Login-Bereichen oder personenbezogenen Daten Crawls auf öffentliche Bereiche beschränken und den Crawl-Output sicher speichern.

Gut kombiniert mit

• Ahrefs, Ahrefs liefert Keyword- und Backlink-Daten, Screaming Frog die technische Tiefe. Beide zusammen ergeben einen vollständigen SEO-Audit, den keines der beiden Tools allein liefert.
• ChatGPT, Crawl-Output (z. B. fehlende Meta-Beschreibungen) als CSV exportieren und ChatGPT die Texte in passender Tonalität vorschlagen lassen. Anschließend zurück ins CMS importieren.
• Perplexity, Recherche zu spezifischen technischen SEO-Fragen oder Algorithmus-Updates, deren Implikationen sich dann mit Screaming Frog auf der eigenen Site überprüfen lassen.

Unser Fazit

Screaming Frog SEO Spider verdient 3 von 5 Sternen, als technisches Werkzeug wäre es 5 Sterne wert, aber wir bewerten Tools im KI-Kontext, und hier ist die KI-Integration ein Add-on, kein Kernfeature. Was Sterne kostet: KI nur mit eigenem API-Schlüssel oder lokalem Modell und selbst geschriebenen Prompts, keine deutsche Oberfläche, keine Cloud-Variante, keine kontinuierlichen Alerts. Was Sterne sichert: unschlagbare technische Tiefe, exzellentes Preis-Leistungs-Verhältnis, lokale Datenkontrolle und die eingebaute Anbindung an OpenAI, Gemini, Anthropic und Ollama. Für SEO-Profis bleibt Screaming Frog Pflicht. Wer ein KI-natives Audit-Tool sucht, sollte sich anderswo umsehen.

Was wir bemerkt haben

• Oktober 2026, Das Benutzerhandbuch führt unter Bulk Export die Punkte „AI > Images“ und „AI > Text to Speech Audio“: Sie exportieren Bilder und Audiodateien, die Modelle von OpenAI und Gemini im Crawl erzeugen (Stand 23.10.2026).
• September 2026, Korrektur: Die Preisseite führt die Euro-Lizenz (245 € pro Jahr, Mengenstaffel 235/219/209 €) als eigenen Listenpreis neben dem Pfundpreis (199 £), sie ist also keine Umrechnung. Wir haben das in der Quellenangabe klargestellt. Außerdem nannten wir den Ahrefs-Einstieg mit 99 USD/Monat, das war überholt: Starter kostet 27 €, Lite 119 € (129 USD) im Monat.
• Mai 2026, Korrektur: Die Lizenz kostet 245 € pro Jahr, nicht 259 USD wie in älteren Quellen genannt. Screaming Frog rechnet inzwischen einheitlich in Euro ab, mit Mengenrabatten ab 5 Lizenzen.
• November 2024, Version 21.0 (12. November 2024) brachte die direkte KI-API-Anbindung an OpenAI, Gemini und Ollama; das Benutzerhandbuch führt inzwischen auch Anthropic (Stand 23.10.2026). Seitdem braucht die KI-Auswertung im Crawl kein eigenes JavaScript mehr.
• Mai 2024, Version 20.0 (7. Mai 2024) führte Custom JavaScript Snippets im Crawl ein, mit denen sich auch KI-APIs ansprechen lassen.
• Anhaltend, Screaming Frog bleibt ein Familienunternehmen aus Henley-on-Thames mit überschaubarem Team und konservativer Roadmap. Keine Übernahme, keine Risikokapital-Runde, keine VC-getriebene Pivot-Risiken, eine angenehme Ausnahme im SEO-Tool-Markt.