Ich suche eine Webspinne für Ubuntu wie diese Webripper - Calluna Software . Sie können eine ganze Site herunterladen, wie Sie es können
wget -r -m example.com
Ich suche jedoch nach einer Funktion, mit der Sie einen Suchbegriff wie "Linux" eingeben können. Er durchsucht das Web und lädt sie herunter. Gibt es solche Programme unter Ubuntu?
Antworten:
Sie können Google Alerts verwenden, um eine Art Suchseite zu erstellen, die an einen Feed gesendet wird, und diese dann mit einem RSS-Reader oder Thunderbird lesen.
Ich benutze Thunderbird für RSS. Ich weiß nicht, ob es RSS-Reader gibt, die den Feed in einfaches HTML exportieren könnten.
Geben Sie httrack (CLI) oder webhttrack (Webinterface) eine Chance, es ist im Universum Repo. Ich bin mir nicht sicher, welche Suchbegriffsfunktion Sie beschreiben, aber sie bietet eine Reihe leicht konfigurierbarer Optionen.
http://packages.ubuntu.com/de/oneiric/webhttrack
HTTrack Website Copier - Freie Software Offline Browser (GNU GPL)
Sie können http ripper ausprobieren.
Hier sind einige Funktionen, die auf der Website veröffentlicht wurden:
Free Software (GPL 3) Generic (works with almost every website) Runs on GNU/Linux and Windows Nearly undetectable / blockable by servers Built with python and pygtk
Bildschirmfoto
Sehen Sie sich ein Tutorial des Entwicklers von httpripper an:
Download-Link:
Es hat bei mir unter Ubuntu 11.10 x64 funktioniert
Im CPAN von Perl gibt es geeignete Module. Sie brauchen nur ein bisschen Perl-Scripting.
Schauen Sie sich insbesondere das Modul WWW: Mechanisieren im Modul WWW: Mechanisieren an .