Als «wget» getaggte Fragen

wget - Befehlszeilenprogramm zum nicht interaktiven Herunterladen von Inhalten (kann über Skripte, Cron-Jobs, Terminals ohne X-Windows-Unterstützung usw. aufgerufen werden).

2
Gibt es neben SeleniumRC noch gute Tools, mit denen Webseiten einschließlich von JavaScript nachgemaltem Inhalt abgerufen werden können?
Ein großes Manko curlbesteht darin, dass immer mehr Webseiten ihren Hauptinhalt von einer JavaScript-AJAX-Antwort malen lassen, die nach der ersten HTTP-Antwort auftritt. curlgreift diesen nachgemalten Inhalt nie auf. Um diese Arten von Webseiten von der Befehlszeile abzurufen, habe ich mich darauf beschränkt, Skripte in Ruby zu schreiben, die den SeleniumRC …
8 wget  http  html  curl  selenium 
1
Verwendung von wget oder einem anderen Tool zum Herunterladen einer Datei, für die der Link ausgeblendet ist (wird nur beim Klicken aktiviert)
Ich möchte einige Untertiteldateien herunterladen, die in rar-Dateien von http://subs.sab.bz/ gespeichert sind. Die Site bietet RSS-Feeds für ihre neuen Versionen. Leider wird über den angegebenen Link eine Download-Seite geöffnet, die Datei wird jedoch nicht abgerufen. Die Download-Seite hat eine Schaltfläche in der Mitte. Wenn Sie darauf klicken, wird die gewünschte …
8 wget  curl  download 
2
Wie kann wget den Webseiteninhalt in einer Datei speichern?
Ich versuche, mit wget den Text einer Webseite zu speichern. Ich renne: wget "http://www.finance.yahoo.com/q/op?s=GOOG" > goog.txt um zu versuchen, die Webseite in goog.txt zu speichern, aber stattdessen sagt mir wget: Saving to: `op?s=GOOG' Warum verhält sich wget so und wie kann ich das erwartete Verhalten erreichen?
8 wget 
4
Kürzester Weg zum Herunterladen von GitHub
Auf diese Weise lade ich verschiedene Hauptzweige von GitHub herunter und möchte ein schöneres Skript haben (und vielleicht zuverlässiger?). wget -P ~/ https://github.com/user/repository/archive/master.zip unzip ~/master.zip mv ~/*-master ~/dir-name Kann das irgendwie auf eine Zeile gekürzt werden, vielleicht mit Teer und Pfeife? Bitte beheben Sie Probleme beim direkten Herunterladen in das …
7 git  wget 
3
Laden Sie mehrere URLs gleichzeitig herunter
Mir ist wget -ieine Möglichkeit bekannt, eine Liste von URLs herunterzuladen. Das einzige Problem ist, dass ich jedem unterschiedliche POST-Daten übergeben muss, was für einzelne URLs funktioniert, wget --post-data=jedoch nicht für Listen. Ich bin offen für jeden CLI-Downloader oder sogar für etwas in JS oder Python. Ich möchte jedoch entweder …
7 wget  download 
2
wget --spider: Wie erkennt man, woher defekte Links kommen?
Ich verwende den integrierten Spider-Modus von wget manchmal als Annehmlichkeit, um eine lokale Site schnell auf defekte Links zu überprüfen. Heute Morgen habe ich seine Aufmerksamkeit auf eine Produktionsstätte gelenkt, an der wir gerade große Änderungen vorgenommen haben, und die drei defekte Links enthält, aber es scheint unmöglich zu sagen, …
7 wget 
Durch die Nutzung unserer Website bestätigen Sie, dass Sie unsere Cookie-Richtlinie und Datenschutzrichtlinie gelesen und verstanden haben.
Licensed under cc by-sa 3.0 with attribution required.