Ist es möglich, alle Python-Pakete gleichzeitig zu aktualisieren pip?

Hinweis : Auf dem offiziellen Issue-Tracker gibt es hierfür eine Funktionsanforderung .

Es gibt noch keine eingebaute Flagge, aber Sie können verwenden

pip list --outdated --format=freeze | grep -v '^\-e' | cut -d = -f 1  | xargs -n1 pip install -U

Hinweis: Hierfür gibt es unendlich viele mögliche Variationen. Ich versuche, diese Antwort kurz und einfach zu halten, aber bitte schlagen Sie Variationen in den Kommentaren vor!

In älteren Versionen von pipkönnen Sie dies stattdessen verwenden:

pip freeze --local | grep -v '^\-e' | cut -d = -f 1  | xargs -n1 pip install -U

Das grepheißt, bearbeitbare ("-e") Paketdefinitionen zu überspringen, wie von @jawache vorgeschlagen. (Ja, Sie könnten grep+ cutdurch sedoder awkoder perloder ... ersetzen .)

Das -n1Flag für xargsverhindert, dass alles gestoppt wird, wenn die Aktualisierung eines Pakets fehlschlägt (danke @andsens ).

Sie können den folgenden Python-Code verwenden. Im Gegensatz pip freezedazu werden hiermit keine Warnungen und FIXME-Fehler gedruckt. Für pip <10.0.1

import pip
from subprocess import call

packages = [dist.project_name for dist in pip.get_installed_distributions()]
call("pip install --upgrade " + ' '.join(packages), shell=True)

Für pip> = 10.0.1

import pkg_resources
from subprocess import call

packages = [dist.project_name for dist in pkg_resources.working_set]
call("pip install --upgrade " + ' '.join(packages), shell=True)

So aktualisieren Sie alle lokalen Pakete; Sie könnten verwenden pip-review:

$ pip install pip-review
$ pip-review --local --interactive

pip-reviewist eine Gabelung von pip-tools. Siehe pip-toolsAusgabe von erwähnten @knedlsepp . pip-reviewPaket funktioniert, aber pip-toolsPaket funktioniert nicht mehr.

pip-reviewfunktioniert unter Windows seit Version 0.5 .

Funktioniert unter Windows. Sollte auch für andere gut sein. ($ ist das Verzeichnis, in dem Sie sich in der Eingabeaufforderung befinden, z. B. C: / Users / Username>)

tun

$ pip freeze > requirements.txt

Öffnen Sie die Textdatei, ersetzen Sie sie ==durch >=und führen Sie sie aus

$ pip install -r requirements.txt --upgrade

Wenn Sie ein Problem mit einem bestimmten Paket haben, das das Upgrade blockiert (manchmal numpy), gehen Sie einfach in das Verzeichnis ($), kommentieren Sie den Namen aus (fügen Sie ein # davor hinzu) und führen Sie das Upgrade erneut aus. Sie können diesen Abschnitt später wieder auskommentieren. Dies eignet sich auch hervorragend zum Kopieren von globalen Python-Umgebungen.

Ein anderer Weg:

Ich mag auch die Pip-Review-Methode:

py2
$ pip install pip-review

$ pip-review --local --interactive

py3
$ pip3 install pip-review

$ py -3 -m pip_review --local --interactive

Sie können 'a' auswählen, um alle Pakete zu aktualisieren. Wenn ein Upgrade fehlschlägt, führen Sie es erneut aus und es wird beim nächsten fortgesetzt.

Windows - Version nach ausgezeichnete Beratung Dokumentation für FORRob van der Woude

for /F "delims===" %i in ('pip freeze -l') do pip install -U %i

Verwenden pipupgrade !

$ pip install pipupgrade
$ pipupgrade --verbose --latest --yes

Mit pipupgrade können Sie Ihr System, Ihr lokales System oder Ihre Pakete von einer requirements.txtDatei aus aktualisieren ! Außerdem werden Pakete selektiv aktualisiert, bei denen Änderungen nicht unterbrochen werden. pipupgrade stellt außerdem sicher, dass Pakete aktualisiert werden, die in mehreren Python-Umgebungen vorhanden sind. Kompatibel mit Python2.7 +, Python3.4 + und pip9 +, pip10 +, pip18 +, pip19 +.

HINWEIS: Ich bin der Autor des Tools.

Sie können nur die veralteten Pakete drucken

pip freeze | cut -d = -f 1 | xargs -n 1 pip search | grep -B2 'LATEST:'

Diese Option erscheint mir einfacher und lesbarer:

pip install -U `pip list --outdated | awk 'NR>2 {print $1}'`

Die Erklärung ist, dass pip list --outdatedeine Liste aller veralteten Pakete in diesem Format ausgegeben wird:

Package   Version Latest Type 
--------- ------- ------ -----
fonttools 3.31.0  3.32.0 wheel
urllib3   1.24    1.24.1 wheel
requests  2.20.0  2.20.1 wheel

Überspringt im Befehl awk NR>2die ersten beiden Datensätze (Zeilen) und {print $1}wählt das erste Wort jeder Zeile aus (wie von SergioAraujo vorgeschlagen, habe ich entfernt, tail -n +3da awkdas Überspringen von Datensätzen tatsächlich möglich ist).

Der folgende Einzeiler könnte sich als hilfreich erweisen:

(pip> 20,0)

pip list --format freeze --outdated | sed 's/=.*//g' | xargs -n1 pip install -U

Ältere Versionen:

pip list --format freeze --outdated | sed 's/(.*//g' | xargs -n1 pip install -U

xargs -n1 geht weiter, wenn ein Fehler auftritt.

Wenn Sie mehr "feinkörnige" Kontrolle darüber benötigen, was weggelassen wird und was einen Fehler auslöst, sollten Sie das -n1Flag nicht hinzufügen und die zu ignorierenden Fehler explizit definieren, indem Sie die folgende Zeile für jeden einzelnen Fehler "weiterleiten":

| sed 's/^<First characters of the error>.*//'

Hier ist ein Arbeitsbeispiel:

pip list --format freeze --outdated | sed 's/=.*//g' | sed 's/^<First characters of the first error>.*//' | sed 's/^<First characters of the second error>.*//' | xargs pip install -U

Robustere Lösung

Verwenden Sie für pip3 Folgendes:

pip3 freeze --local |sed -rn 's/^([^=# \t\\][^ \t=]*)=.*/echo; echo Processing \1 ...; pip3 install -U \1/p' |sh

Entfernen Sie für Pip einfach die 3s als solche:

pip freeze --local |sed -rn 's/^([^=# \t\\][^ \t=]*)=.*/echo; echo Processing \1 ...; pip install -U \1/p' |sh

OSX-Kuriosität

OSX wird ab Juli 2017 mit einer sehr alten Version von sed (ein Dutzend Jahre alt) ausgeliefert. Verwenden Sie in der obigen Lösung -E anstelle von -r, um erweiterte reguläre Ausdrücke zu erhalten.

Lösen von Problemen mit gängigen Lösungen

Diese Lösung ist gut konzipiert und getestet ¹ , während selbst bei den gängigsten Lösungen Probleme auftreten.

• Portabilitätsprobleme aufgrund geänderter Pip-Befehlszeilenfunktionen
• Absturz von xargs, weil häufig auftretende Pip- oder Pip3-untergeordnete Prozessfehler auftreten
• Überfüllte Protokollierung aus der rohen xargs-Ausgabe
• Verlassen Sie sich auf eine Python-zu-OS-Brücke, während Sie sie möglicherweise aktualisieren ³

Der obige Befehl verwendet die einfachste und portabelste Pip-Syntax in Kombination mit sed und sh, um diese Probleme vollständig zu lösen. Details des Sed-Betriebs können mit der kommentierten Version ² überprüft werden .

Einzelheiten

[1] Getestet und regelmäßig in einem Linux 4.8.16-200.fc24.x86_64-Cluster verwendet und auf fünf anderen Linux / Unix-Varianten getestet. Es läuft auch unter Cygwin64, das unter Windows 10 installiert ist. Tests unter iOS sind erforderlich.

[2] Um die Anatomie des Befehls klarer zu sehen, entspricht dies genau dem obigen Befehl pip3 mit Kommentaren:

# match lines from pip's local package list output
# that meet the following three criteria and pass the
# package name to the replacement string in group 1.
# (a) Do not start with invalid characters
# (b) Follow the rule of no white space in the package names
# (c) Immediately follow the package name with an equal sign
sed="s/^([^=# \t\\][^ \t=]*)=.*"

# separate the output of package upgrades with a blank line
sed="$sed/echo"

# indicate what package is being processed
sed="$sed; echo Processing \1 ..."

# perform the upgrade using just the valid package name
sed="$sed; pip3 install -U \1"

# output the commands
sed="$sed/p"

# stream edit the list as above
# and pass the commands to a shell
pip3 freeze --local |sed -rn "$sed" |sh

[3] Das Aktualisieren einer Python- oder PIP-Komponente, die auch beim Aktualisieren einer Python- oder PIP-Komponente verwendet wird, kann eine mögliche Ursache für einen Deadlock oder eine Beschädigung der Paketdatenbank sein.

Dies scheint prägnanter.

pip list --outdated | cut -d ' ' -f1 | xargs -n1 pip install -U

Erläuterung:

pip list --outdated bekommt Zeilen wie diese

urllib3 (1.7.1) - Latest: 1.15.1 [wheel]
wheel (0.24.0) - Latest: 0.29.0 [wheel]

Im cut -d ' ' -f1 , -d ' 'setzt „Raum“ als Trennzeichen, -f1Mittel , um die erste Spalte zu erhalten.

So werden die obigen Zeilen:

urllib3
wheel

dann gib sie weiter xargs , um den Befehl auszuführen pip install -U, wobei jede Zeile als anhängendes Argument dient

-n1begrenzt die Anzahl der an jeden Befehl übergebenen Argumente pip install -Uauf 1

Ich hatte das gleiche Problem mit dem Upgrade. Ich aktualisiere nie alle Pakete. Ich aktualisiere nur das, was ich brauche, da das Projekt möglicherweise kaputt geht.

Da es keine einfache Möglichkeit gab, Paket für Paket zu aktualisieren und die Datei " require.txt" zu aktualisierenrequirements.txt , habe ich diesen Pip-Upgrader geschrieben, der auch die Versionen in Ihrer Datei für die ausgewählten Pakete (oder alle Pakete) aktualisiert .

Installation

pip install pip-upgrader

Verwendungszweck

Aktivieren Sie Ihre virtuelle Umgebung (wichtig, da dadurch auch die neuen Versionen aktualisierter Pakete in der aktuellen virtuellen Umgebung installiert werden).

cd in Ihr Projektverzeichnis, und führen Sie dann Folgendes aus:

pip-upgrade

Erweiterte Verwendung

Wenn die Anforderungen an einem nicht standardmäßigen Speicherort platziert sind, senden Sie sie als Argumente:

pip-upgrade path/to/requirements.txt

Wenn Sie bereits wissen, welches Paket Sie aktualisieren möchten, senden Sie es einfach als Argumente:

pip-upgrade -p django -p celery -p dateutil

Wenn Sie ein Upgrade auf die Version vor oder nach der Veröffentlichung durchführen müssen, fügen Sie --prereleaseIhrem Befehl ein Argument hinzu.

Vollständige Offenlegung: Ich habe dieses Paket geschrieben.

Von https://github.com/cakebread/yolk :

$ pip install -U `yolk -U | awk '{print $1}' | uniq`

Sie müssen jedoch zuerst Eigelb bekommen:

$ sudo pip install -U yolk

Einzeilige Version von @ Ramanas Antwort .

python -c 'import pip, subprocess; [subprocess.call("pip install -U " + d.project_name, shell=1) for d in pip.get_installed_distributions()]'

`

Wenn Sie eine virtuelle Umgebung verwenden und nur Pakete aktualisieren möchten, die Ihrer virtuellen Umgebung hinzugefügt wurden , möchten Sie möglicherweise Folgendes tun:

pip install `pip freeze -l | cut --fields=1 -d = -` --upgrade

Die einfachste und schnellste Lösung, die ich in der Pip-Issue-Diskussion gefunden habe, ist:

pip install pipdate
pipdate

Quelle: https://github.com/pypa/pip/issues/3819

Windows Powershell-Lösung

pip freeze | %{$_.split('==')[0]} | %{pip install --upgrade $_}

Verwenden Sie awk-Update-Pakete: pip install -U $(pip freeze | awk -F'[=]' '{print $1}')

Windows Powershell Update foreach($p in $(pip freeze)){ pip install -U $p.Split("=")[0]}

Sie können dies versuchen:

for i in ` pip list|awk -F ' ' '{print $1}'`;do pip install --upgrade $i;done

Das ziemlich erstaunliche Eigelb macht dies einfach.

pip install yolk3k # don't install `yolk`, see https://github.com/cakebread/yolk/issues/35
yolk --upgrade

Weitere Informationen zu Eigelb finden Sie unter https://pypi.python.org/pypi/yolk/0.4.3

Es kann viele Dinge tun, die Sie wahrscheinlich nützlich finden.

@ Ramanas Antwort hat für mich am besten funktioniert, aber ich musste ein paar Fänge hinzufügen:

import pip
for dist in pip.get_installed_distributions():
    if 'site-packages' in dist.location:
        try:
            pip.call_subprocess(['pip', 'install', '-U', dist.key])
        except Exception, exc:
            print exc

Das site-packages Prüfung schließt meine Entwicklungspakete aus, da sie sich nicht im Verzeichnis der System-Site-Pakete befinden. Das try-außer überspringt einfach Pakete, die aus PyPI entfernt wurden.

@endolith: Ich hatte auch auf ein einfaches gehofft pip.install(dist.key, upgrade=True), aber es sieht nicht so aus, als ob pip nur für die Befehlszeile verwendet werden sollte (in den Dokumenten wird die interne API nicht erwähnt, und die Pip-Entwickler haben sie nicht verwendet docstrings).

Das pip_upgrade_outdatedmacht den Job. Laut seinen Dokumenten :

usage: pip_upgrade_outdated [-h] [-3 | -2 | --pip_cmd PIP_CMD]
                            [--serial | --parallel] [--dry_run] [--verbose]
                            [--version]

Upgrade outdated python packages with pip.

optional arguments:
  -h, --help         show this help message and exit
  -3                 use pip3
  -2                 use pip2
  --pip_cmd PIP_CMD  use PIP_CMD (default pip)
  --serial, -s       upgrade in serial (default)
  --parallel, -p     upgrade in parallel
  --dry_run, -n      get list, but don't upgrade
  --verbose, -v      may be specified multiple times
  --version          show program's version number and exit

Schritt 1:

pip install pip-upgrade-outdated

Schritt 2:

pip_upgrade_outdated

Gesendet durch eine Pull-Anfrage an die Pip-Leute ; Verwenden Sie in der Zwischenzeit diese Pip-Bibliothekslösung, die ich geschrieben habe:

from pip import get_installed_distributions
from pip.commands import install

install_cmd = install.InstallCommand()

options, args = install_cmd.parse_args([package.project_name
                                        for package in
                                        get_installed_distributions()])

options.upgrade = True
install_cmd.run(options, args)  # Chuck this in a try/except and print as wanted

Das schien für mich zu funktionieren ...

pip install -U $(pip list --outdated|awk '{printf $1" "}')

Ich habe printfdanach ein Leerzeichen verwendet, um die Paketnamen richtig zu trennen.

Dies ist eine PowerShell-Lösung für Python 3:

pip3 list --outdated --format=legacy | ForEach { pip3 install -U $_.split(" ")[0] }

Und für Python 2:

pip2 list --outdated --format=legacy | ForEach { pip2 install -U $_.split(" ")[0] }

Dadurch werden die Pakete einzeln aktualisiert. Also a

pip3 check
pip2 check

Danach sollte sichergestellt werden, dass keine Abhängigkeiten unterbrochen werden.

Wie wäre es mit:

pip install -r <(pip freeze) --upgrade

Das kürzeste und einfachste unter Windows.

pip freeze > requirements.txt && pip install --upgrade -r requirements.txt && rm requirements.txt

Mein Skript:

pip list --outdated --format=legacy | cut -d ' ' -f1 | xargs -n1 pip install --upgrade

Ist das nicht effektiver?

pip3 list -o | grep -v -i warning | cut -f1 -d' ' | tr " " "\n" | awk '{if(NR>=3)print}' | cut -d' ' -f1 | xargs -n1 pip3 install -U 

1. pip list -o listet veraltete Pakete auf;
2. grep -v -i warning invertierte Übereinstimmung auf warning , um Fehler beim Aktualisieren zu vermeiden
3. cut -f1 -d1' ' gibt das erste Wort zurück - den Namen des veralteten Pakets;
4. tr "\n|\r" " "konvertiert das mehrzeilige Ergebnis von cutin eine einzeilige, durch Leerzeichen getrennte Liste;
5. awk '{if(NR>=3)print}' Überspringt Kopfzeilen
6. cut -d' ' -f1 holt die erste Spalte
7. xargs -n1 pip install -U Nimmt 1 Argument aus der Pipe links davon und übergibt es an den Befehl, um die Liste der Pakete zu aktualisieren.

eine Zeile in Powershell 5.1 mit Adm-Rechten, Python 3.6.5 und Pip Version 10.0.1:

pip list -o --format json | ConvertFrom-Json | foreach {pip install $_.name -U --no-warn-script-location}

es funktioniert reibungslos, wenn die Liste keine kaputten Pakete oder Spezialräder enthält ...