Arachnide SEO Spider
GitHub

Herunterladen und installieren

Drei Schritte, kein Konto, kein Installationsassistent. Arachnide ist eine Node.js-Anwendung, die Sie aus einem Ordner starten; das Startskript installiert die Abhängigkeiten und öffnet Ihren Browser.

Aktuelle Version: 3.21.0 · MIT-Lizenz · Node.js >=18.17

ZIP herunterladen (neueste Version) Alle Releases

  1. Node.js installieren

    Laden Sie die LTS-Version von nodejs.org herunter und installieren Sie sie wie jedes andere Programm. Sie benötigen Version 18.17 oder neuer. Zum Prüfen öffnen Sie ein Terminal und geben node -v ein. Für das JavaScript-Rendering brauchen Sie außerdem Google Chrome, Microsoft Edge, Chromium oder Brave: Arachnide findet den Browser automatisch.

  2. Arachnide herunterladen

    Am einfachsten: die ZIP-Schaltfläche oben (oder die grüne Schaltfläche Code auf GitHub, dann Download ZIP) und die Datei entpacken. Mit Git: git clone https://github.com/Jacckisback/arachnide-seo-spider.git

  3. Starten

    Option A, Doppelklick. Das Startskript installiert oder aktualisiert alles und öffnet dann Ihren Browser. Option B, Terminal: cd arachnide-seo-spider, npm install, npm start, dann http://localhost:4000 öffnen. Geben Sie eine Website-Adresse ein und klicken Sie auf Crawlen.

Startskript zum Doppelklicken
SystemDatei zum Doppelklicken
macOSstart-mac.command. Klicken Sie beim ersten Mal mit der rechten Maustaste darauf und wählen Sie Öffnen, da macOS unsignierte Skripte blockiert.
Windowsstart-windows.bat
Linuxstart-linux.sh

Lassen Sie das Terminalfenster geöffnet, solange Sie die App nutzen, und drücken Sie Ctrl + C, um sie zu beenden. Ist Port 4000 belegt, wählt Arachnide den nächsten freien Port und zeigt ihn im Terminal an.

Aktualisieren

Laden Sie das neue ZIP herunter (oder führen Sie git pull im Ordner aus) und führen Sie dann erneut npm install aus. Die Startskripte für den Doppelklick erledigen das bei jedem Start für Sie.

git pull
npm install

Fehlerbehebung

MeldungLösung
cd: no such file or directorySie sind nicht im richtigen Ordner. Geben Sie cd gefolgt vom Pfad des entpackten Ordners ein, z. B. cd ~/Downloads/arachnide-seo-spider.
npm ERR! enoent … package.jsonGleiche Ursache: Führen Sie npm install im Arachnide-Ordner aus.
--disable-warning= is not allowed in NODE_OPTIONSIhre Shell setzt eine Option, die Ihre Node-Version nicht unterstützt. Führen Sie unset NODE_OPTIONS aus (macOS/Linux) oder aktualisieren Sie Node.js auf die neueste LTS-Version.
JavaScript-Rendering ist nicht verfügbarInstallieren Sie Google Chrome. Ist es an einem ungewöhnlichen Ort installiert, starten Sie Arachnide mit CHROME_PATH="/path/to/chrome" npm start.
Einige Seiten zeigen keine H1 oder keinen InhaltDie Website erzeugt ihren Inhalt wahrscheinlich mit JavaScript. Aktivieren Sie JavaScript-Rendering in den Optionen.

Datenschutz

Arachnide hat kein Konto, keine Telemetrie und keine Cloud. Die Oberfläche ist nur auf 127.0.0.1 erreichbar. Crawls werden im Ordner crawls der Anwendung gespeichert; API-Schlüssel der KI-Anbieter und CMS-Zugangsdaten werden auf Ihrer Festplatte verschlüsselt und nur an den jeweiligen Dienst gesendet.

Verantwortungsvolle Nutzung

Crawlen Sie nur Websites, die Ihnen gehören oder die Sie prüfen dürfen. Bleiben Sie bei Kunden-Websites bei 2 bis 5 gleichzeitigen Anfragen und fügen Sie bei Shared Hosting eine Pause ein.

Weiter: Ihr erster Crawl in zwei Minuten