OpenSpider

Funktionen für technische SEO

Ein Werkzeug für die Untersuchung deiner Website – von URLs und Inhalten bis zu wiederholbaren Audits.

OpenSpider wird aktiv entwickelt. Diese Übersicht beschreibt den dokumentierten Funktionsumfang; der Umfang eines Beta-Builds ergibt sich aus dessen Release-Hinweisen.

Crawl & Analyse-Tabs

Websites im Spider-Modus oder anhand einer URL-Liste untersuchen. Tabs und Filter gliedern interne und externe URLs, Antwortcodes, Inhalte, Bilder und Links. Technische Analysen umfassen Indexierbarkeit, robots.txt, Sitemaps, Canonicals und hreflang.

Inhalte & technische Signale

Titles, Meta Descriptions und Überschriften prüfen; Duplikate und dünne Inhalte untersuchen. Weiterleitungsketten und widersprüchliche Indexierungssignale lassen sich mit den betroffenen URLs betrachten.

Exporte & offene Daten

Ausgewählte Tabs und Filter als CSV oder XLSX exportieren. Bulk-Exporte und Reports unterstützen die Weiterverarbeitung. Jeder Crawl liegt als versionierte SQLite-Datei mit der Endung .ospider vor.

Vergleich & Change Detection

Zwei gespeicherte Crawls vergleichen: neue und fehlende URLs sowie Veränderungen in Filtern und Issues untersuchen. Change Detection erfasst Änderungen an Seitenelementen wie Title, Statuscode und Canonical.

CLI & geplante Aufgaben

Die Kommandozeile unterstützt headless Crawls, das Laden gespeicherter Crawls und Exporte. Aufgabenplanung ist für wiederkehrende Crawls mit Konfiguration und Exportauswahl vorgesehen.

MCP für KI-Agenten

Gespeicherte Crawls auflisten, Übersichten und Issues abfragen und URL-Details lesen. MCP unterstützt STDIO und authentifiziertes lokales HTTP. Nur lesende Werkzeuge sind standardmäßig freigegeben; Crawl- und Schreibwerkzeuge brauchen eine Freigabe.

Was OpenSpider anders macht

Offen statt Lizenzschlüssel

Open Source (Apache 2.0) und kostenlos – ohne URL-Grenze, ohne Registrierung, ohne Abo. Du kannst den Code lesen, prüfen und selbst bauen. Keine Funktion kann dir wieder weggenommen werden.

Gebaut für KI-Agenten

Ein MCP-Server ist eingebaut, auch ohne Desktop-App nutzbar. Claude, Codex, Cursor & Co. fragen Crawls ab, vergleichen sie und gehen mit nur lesendem SQL in die Tiefe. Standardmäßig nur lesend; Inhalte gecrawlter Seiten gelten als nicht vertrauenswürdig. Skill und Claude-Code-Plugin liegen bei.

Deine Crawls gehören dir

Jeder Crawl ist eine einzelne SQLite-Datei mit dokumentierten, stabilen Abfragesichten. Öffne sie mit Python, DuckDB, Excel Power Query oder deinem BI-Werkzeug – ohne Export und ohne OpenSpider. Interne Details dürfen sich ändern, die Sichten bleiben innerhalb einer Hauptversion gleich.

Nichts verlässt deinen Rechner ohne dich

Keine Telemetrie. Die einzige Verbindung, die die App von sich aus aufbaut, ist die Update-Prüfung – und die kannst du abschalten. Updates sind signiert und werden vor der Installation geprüft. Feedback geht nur raus, wenn du es selbst abschickst.

Für Automatisierung gemacht

Crawlen, exportieren, Reports erzeugen, Läufe planen: alles auch über die Kommandozeile. Desktop-App für macOS und Windows; unter Linux laufen Kommandozeile und MCP-Server – ohne Desktop-App.

Was als Nächstes kommt

Geplant nach Version 1.0:

  • KI-Prüfungen je Seite: Seitentyp, Suchintention, Inhaltsqualität, versteckte Fehlerseiten – mit deinem eigenen Schlüssel oder lokal über Ollama, mit festem Kostenbudget.
  • Vorschläge statt nur Befunde: Titles, Meta Descriptions, Alt-Texte und Weiterleitungs-Zuordnung für Relaunches.
  • Sichtbarkeit in KI-Suchen: KI-Crawler in der robots.txt, llms.txt prüfen und erzeugen.
  • Crawl trifft Suchdaten: Rankings, Backlinks und Zitate in KI-Übersichten je URL – etwa „nicht indexierbar, rankt aber“ oder „in der KI-Übersicht, aber nicht zitiert“.
BETA

Die offene Beta läuft

Teste OpenSpider 1.0 kostenlos auf macOS oder Windows und sag uns, was dir auffällt. Installer, Testaufgaben und Rückmeldeformular findest du auf der Beta-Seite.