Was ist __pycache__?

Soweit ich weiß, ist ein Cache eine verschlüsselte Datei mit ähnlichen Dateien.

Was machen wir mit dem __pycache__Ordner? Geben wir es den Menschen anstelle unseres Quellcodes? Sind es nur meine Eingabedaten? Dieser Ordner wird ständig erstellt. Wozu dient er?

Wenn Sie ein Programm in Python ausführen, kompiliert der Interpreter es zuerst zu Bytecode (dies ist eine übermäßige Vereinfachung) und speichert es im __pycache__Ordner. Wenn Sie dort nachsehen, finden Sie eine Reihe von Dateien, die die Namen der .py-Dateien im Ordner Ihres Projekts gemeinsam haben. Nur deren Erweiterungen sind entweder .pyc oder .pyo. Hierbei handelt es sich um bytecodekompilierte bzw. optimierte bytecodekompilierte Versionen der Dateien Ihres Programms.

Als Programmierer können Sie es weitgehend einfach ignorieren ... Alles, was Sie tun müssen, ist, Ihr Programm etwas schneller zu starten. Wenn sich Ihre Skripte ändern, werden sie neu kompiliert. Wenn Sie die Dateien oder den gesamten Ordner löschen und Ihr Programm erneut ausführen, werden sie erneut angezeigt (es sei denn, Sie unterdrücken dieses Verhalten ausdrücklich).

Wenn Sie cpython verwenden (was am häufigsten vorkommt, da es sich um die Referenzimplementierung handelt) und diesen Ordner nicht möchten, können Sie ihn unterdrücken, indem Sie den Interpreter beispielsweise mit dem Flag -B starten

python -B foo.py

Eine andere Option, wie von tcaswell angegeben, besteht darin, die Umgebungsvariable PYTHONDONTWRITEBYTECODEauf einen beliebigen Wert zu setzen (laut Python-Manpage eine beliebige "nicht leere Zeichenfolge").

__pycache__ist ein Ordner mit Python 3-Bytecode, der kompiliert und zur Ausführung bereit ist .

Ich empfehle nicht, diese Dateien routinemäßig zu löschen oder die Erstellung während der Entwicklung zu unterdrücken, da dies die Leistung beeinträchtigen kann. Halten Sie einfach einen rekursiven Befehl bereit (siehe unten), um ihn bei Bedarf zu bereinigen, da der Bytecode in Randfällen veraltet sein kann (siehe Kommentare).

Python-Programmierer ignorieren normalerweise Bytecode. In der Tat __pycache__und *.pycsind gemeinsame Zeilen in .gitignoreDateien zu sehen . Bytecode ist nicht für die Verteilung gedacht und kann mithilfe des disModuls zerlegt werden .

Wenn Sie OS X verwenden, können Sie alle diese Ordner in Ihrem Projekt einfach ausblenden, indem Sie den folgenden Befehl im Stammordner Ihres Projekts ausführen.

find . -name '__pycache__' -exec chflags hidden {} \;

Ersetzen __pycache__durch *.pycfür Python 2.

Dies setzt ein Flag für alle diese Verzeichnisse (.pyc-Dateien) und weist Finder / Textmate 2 an, sie von den Listen auszuschließen. Wichtig ist, dass der Bytecode vorhanden ist, er ist nur versteckt.

Führen Sie den Befehl erneut aus, wenn Sie neue Module erstellen und neuen Bytecode ausblenden möchten oder wenn Sie die ausgeblendeten Bytecode-Dateien löschen.

Unter Windows lautet der entsprechende Befehl möglicherweise (nicht getestet, Batch-Skript willkommen):

dir * /s/b | findstr __pycache__ | attrib +h +s +r

Dies entspricht dem Ausblenden von Ordnern durch das Projekt mit Rechtsklick> Ausblenden ...

Das Ausführen von Komponententests ist ein Szenario (mehr in Kommentaren), in dem das Löschen der *.pycDateien und __pycache__Ordner in der Tat nützlich ist. Ich verwende die folgenden Zeilen in meinem ~/.bash_profileund renne nur cl, um bei Bedarf aufzuräumen.

alias cpy='find . -name "__pycache__" -delete'
alias cpc='find . -name "*.pyc"       -delete'
...
alias cl='cpy && cpc && ...'

Ein __pycache__Ordner wird erstellt, wenn Sie die Zeile verwenden:

import file_name

oder versuchen Sie, Informationen aus einer anderen von Ihnen erstellten Datei abzurufen. Dies macht es etwas schneller, wenn Sie Ihr Programm zum zweiten Mal ausführen, um die andere Datei zu öffnen.

Aktualisierte Antwort von 3.7+ Dokumenten:

Um das Laden von Modulen zu beschleunigen, speichert Python die kompilierte Version jedes Moduls im __pycache__Verzeichnis unter dem Namen zwischen module.version.pyc, wobei die Version das Format der kompilierten Datei codiert. Es enthält im Allgemeinen die Python-Versionsnummer. In CPython Release 3.3 wird beispielsweise die kompilierte Version von spam.py als zwischengespeichert __pycache__/spam.cpython-33.pyc. Diese Namenskonvention ermöglicht die Koexistenz kompilierter Module aus verschiedenen Releases und verschiedenen Versionen von Python.

Quelle: https://docs.python.org/3/tutorial/modules.html#compiled-python-files

Das heißt, dieses Verzeichnis wird von Python generiert und ist vorhanden, damit Ihre Programme schneller ausgeführt werden. Es sollte nicht der Quellcodeverwaltung verpflichtet sein und in Frieden mit Ihrem lokalen Quellcode koexistieren.

__pycache__ist ein Verzeichnis, das Bytecode-Cache-Dateien enthält, die automatisch von Python generiert werden, nämlich kompilierte Python- oder .pycDateien. Sie fragen sich vielleicht, warum Python, eine "interpretierte" Sprache, überhaupt kompilierte Dateien hat. Diese SO-Frage spricht das an (und es lohnt sich auf jeden Fall, diese Antwort zu lesen ).

In den Python-Dokumenten erfahren Sie mehr darüber, wie es genau funktioniert und warum es existiert:

• Es wurde in Python 3.2 hinzugefügt, da das vorhandene System zum Verwalten von .pycDateien im selben Verzeichnis verschiedene Probleme verursachte, z. B. wenn ein Programm mit Python-Interpreten verschiedener Versionen ausgeführt wurde. Die vollständige Funktionsspezifikation finden Sie in PEP 3174 .

aus dem offiziellen Python-Tutorial Module

Um das Laden von Modulen zu beschleunigen, speichert Python die kompilierte Version jedes Moduls im __pycache__Verzeichnis unter dem Namen zwischen module.version.pyc, wobei die Version das Format der kompilierten Datei codiert. Es enthält im Allgemeinen die Python-Versionsnummer. In CPython Release 3.6 wird beispielsweise die kompilierte Version von spam.py als zwischengespeichert __pycache__/spam.cpython-36.pyc.

aus Python doc Programmier-FAQs

Wenn ein Modul zum ersten Mal importiert wird (oder wenn sich die Quelldatei seit der Erstellung der aktuellen kompilierten Datei geändert hat), sollte eine .pyc-Datei mit dem kompilierten Code in einem __pycache__Unterverzeichnis des Verzeichnisses erstellt werden, das die .pyDatei enthält. Die .pycDatei hat einen Dateinamen, der mit demselben Namen wie die .pyDatei beginnt und .pycmit einer mittleren Komponente endet , die von der jeweiligen Python-Binärdatei abhängt, die sie erstellt hat.

Die Ausführung eines Python-Skripts würde dazu führen, dass der Bytecode im Speicher generiert und beibehalten wird, bis das Programm heruntergefahren wird. Wenn ein Modul importiert wird, erstellt Python zur schnelleren Wiederverwendbarkeit eine Cache-Cache-Datei (PYC ist 'Python' 'Compiled'), in der der Bytecode des zu importierenden Moduls zwischengespeichert wird. Die Idee ist, das Laden von Python-Modulen zu beschleunigen, indem eine erneute Kompilierung (einmal kompilieren, Richtlinie mehrmals ausführen) beim erneuten Import vermieden wird.

Der Name der Datei entspricht dem Modulnamen. Der Teil nach dem ersten Punkt gibt die Python-Implementierung an, die den Cache erstellt hat (möglicherweise CPython), gefolgt von der Versionsnummer.

Der Python-Interpreter kompiliert die Skriptdatei * .py und speichert die Ergebnisse der Kompilierung im __pycache__Verzeichnis.

Wenn das Projekt erneut ausgeführt wird und der Interpreter feststellt, dass das Skript * .py nicht geändert wurde, überspringt er den Kompilierungsschritt und führt die zuvor generierte * .pyc-Datei aus, die im __pycache__Ordner gespeichert ist .

Wenn das Projekt komplex ist, können Sie die Vorbereitungszeit verkürzen, bevor das Projekt ausgeführt wird. Wenn das Programm zu klein ist, können Sie dies python -B abc.pymit der BOption ignorieren .

Python Version 2.x hat .pyc, wenn der Interpreter den Code kompiliert.

Python Version 3.x hat __pycache__, wenn der Interpreter den Code kompiliert.

alok@alok:~$ ls
module.py  module.pyc  __pycache__  test.py
alok@alok:~$

In Version 3.2 und höher speichert Python .pyc-kompilierte Bytecodedateien in einem Unterverzeichnis mit dem Namen __pycache__in dem Verzeichnis, in dem sich Ihre Quelldateien befinden, mit Dateinamen, die die Python-Version identifizieren, mit der sie erstellt wurden (z. B. script.cpython-33.pyc).

Wenn Sie ein Modul importieren ,

import file_name

Python speichert den kompilierten Bytecode im __pycache__Verzeichnis, damit zukünftige Importe ihn direkt verwenden können, anstatt die Quelle erneut analysieren und kompilieren zu müssen.

Dies geschieht nicht nur zum Ausführen eines Skripts, sondern nur beim Importieren einer Datei.

(In früheren Versionen wurde der zwischengespeicherte Bytecode als .pyc-Dateien gespeichert, die sich im selben Verzeichnis wie die .py-Dateien befanden. Ab Python 3 wurden sie jedoch in ein Unterverzeichnis verschoben, um die Übersichtlichkeit zu verbessern.)

PYTHONDONTWRITEBYTECODE ---> Wenn dies auf eine nicht leere Zeichenfolge festgelegt ist, versucht Python beim Import von Quellmodulen nicht, .pyc-Dateien zu schreiben. Dies entspricht der Angabe der Option -B.