SiteSnitch kennt zwei Betriebsmodi. Welcher richtig ist, hängt davon ab, was du erreichen willst: eine Site vollständig erfassen oder eine bekannte Menge an URLs gezielt prüfen.

Spider-Modus

Der Normalfall. Ausgehend von einer Start-URL folgt SiteSnitch dem Linkgraphen der Website: Es lädt eine Seite, extrahiert alle darin enthaltenen Links und lädt die wiederum – solange sie innerhalb des Scopes liegen. So entsteht ein vollständiges Bild der Site.

Wann einsetzen

Immer dann, wenn du den Ist-Zustand einer Site vollständig erfassen willst: SEO-Audits, Bestandsaufnahmen, der Live-Teil eines Relaunch-Vergleichs.

List-Modus

Eine fertige URL-Liste abarbeiten, ohne Links zu folgen. Die Tiefe ist 0, der Export folgt der Eingabereihenfolge – du bekommst also genau das zurück, was du eingegeben hast, und in derselben Reihenfolge.

Quellen für die Liste

QuelleFormat
Zwischenablageeine URL je Zeile
Textdatei.txt
Tabellen.csv, .xlsx
XML-Sitemap.xml

Wann einsetzen

Der List-Modus ist die Grundlage der Verifikation nach dem Go-Live: Nach einem Relaunch prüfst du damit genau die alten URLs, die weiterleiten sollen – ohne dass der Crawler nebenher neuen Links folgt.

List-Modus ignoriert robots.txt

Da du im List-Modus selbst bestimmst, welche URLs geprüft werden, ist robots.txt hier weniger relevant. Der Spider-Modus beachtet sie dagegen standardmäßig – siehe robots.txt & Indexierung.