Ich möchte alle Seiten und Unterseiten einer Website kratzen (mit kratzen meine ich, alle Online-Inhalte in lokalen HTML-Dateien zu speichern).
Was ist das beste Dienstprogramm zum Crawlen aller Seiten? Im Idealfall möchte ich angeben, wie viele Schichten tief zu kratzen sind.
Antworten:
Sie haben zwei Möglichkeiten:
Sie können das wgetBefehlszeilenprogramm folgendermaßen verwenden:
wget -rl 10Ersetzen Sie die 10durch die Anzahl der Ebenen, in die Sie zurückgreifen möchten.
Oder Sie können SiteSucker verwenden . Eine GUI-Anwendung, die rekursiv Websites herunterlädt. Sie können auch angeben, wie weit unten mit SiteSucker rekursiv gearbeitet werden soll.
