Kein Speicherplatz mehr: Wie finde ich heraus, was den Speicherplatz belegt?

Auf einem meiner Server mit 16.04 ist ein Problem aufgetreten: Es ist kein Speicherplatz mehr verfügbar.

Ich habe keine Ahnung, was den Raum einnimmt. Gibt es einen Befehl zum Auflisten der aktuellen Verzeichnisgrößen, damit ich den gesamten Speicherplatz in dem Verzeichnis beanspruchen kann?

Wie immer unter Linux gibt es mehrere Möglichkeiten, um die Arbeit zu erledigen. Wenn Sie dies jedoch von CLI aus tun müssen, ist dies meine bevorzugte Methode:

Ich starte als root oder mit sudo:

du -cha --max-depth=1 / | grep -E "M|G"

Das Problem besteht darin, die zurückgegebenen Zeilen auf diejenigen zu beschränken, die Werte im Megabyte- oder Gigabyte-Bereich zurückgeben. Wenn Ihre Festplatten groß genug sind, können Sie |Tauch Terabyte-Mengen hinzufügen . Möglicherweise werden auf /proc, /sysund / oder einige Fehler angezeigt, /devda es sich nicht um echte Dateien auf der Festplatte handelt. Es sollte jedoch weiterhin eine gültige Ausgabe für die übrigen Verzeichnisse im Stammverzeichnis liefern. Nachdem Sie die größten gefunden haben, können Sie den Befehl in diesem Verzeichnis ausführen, um den Täter einzugrenzen. Wenn also zum Beispiel /vardas größte wäre, könntest du es als nächstes so machen:

du -cha --max-depth=1 /var | grep -E "M|G"

Das sollte Sie zu den Sorgenkindern führen!

Weitere Überlegungen

Der obige Befehl wird sicherlich den Trick machen, aber ich hatte einige konstruktive Kritik in den Kommentaren unten, die auf einige Dinge hinwiesen, die Sie auch einschließen könnten.

1. Der von grepmir angegebene Wert kann dazu führen, dass gelegentlich der Wert "K" zurückgegeben wird, wenn der Name des Verzeichnisses oder der Datei die Groß- oder Kleinschreibung "G" oder "M" hat Ihr Regex-Spiel wird kreativer und komplexer. z.Bgrep -E "^[0-9\.]*[MG]"

2. Wenn Sie wissen, um welches Laufwerk es sich handelt und auf dem Laufwerk andere Laufwerke installiert sind, die Sie nicht in die Suche einbeziehen möchten, können Sie das -xFlag zu Ihrem duBefehl hinzufügen . Manpage Beschreibung dieses Flags:

     -x, --one-file-system
         skip directories on different file systems
   

3. Sie können die Ausgabe des duBefehls so sortieren , dass der höchste Wert unten steht. Hänge dies einfach an das Ende des Befehls an:| sort -h

Sie können dafür verwenden ncdu. Es funktioniert sehr gut.

sudo apt install ncdu

Ich benutze diesen Befehl

sudo du -aBM -d 1 . | sort -nr | head -20

Gelegentlich muss ich es aus dem /Verzeichnis ausführen , da ich etwas an einer ungeraden Stelle platziert habe.

Es gibt bereits viele gute Antworten, wie Sie Verzeichnisse finden können, die den größten Teil des Speicherplatzes beanspruchen. Wenn Sie Grund zur Annahme haben, dass nur wenige große Dateien das Hauptproblem sind, und nicht viele kleine, können Sie so etwas verwenden find / -size +10M.

Ich kenne Ubuntu nicht und kann meine Antwort nicht überprüfen, aber ich poste hier meine Antwort basierend auf meiner Erfahrung als Unix-Administrator vor langer Zeit.

1. Finden Sie heraus, auf welchem ​​Dateisystem nicht genügend Speicherplatz vorhanden ist

   df -h
   

   listet alle Dateisysteme, ihre Größe und ihren freien Speicherplatz auf. Sie verschwenden nur Zeit, wenn Sie nach Dateisystemen suchen, die über genügend Speicherplatz verfügen. Angenommen, das vollständige Dateisystem ist / myfilesystem. Überprüfen Sie die df-Ausgabe, wenn Dateisysteme auf Unterverzeichnissen von / myfilesystems eingebunden sind. In diesem Fall müssen die folgenden Schritte an diese Situation angepasst werden.

2. Finden Sie heraus, wie viel Speicherplatz die Dateien dieses Dateisystems belegen

   du -sh /myfilesystem
   

   Die Option -x kann verwendet werden, um sicherzustellen, dass nur die Dateien berücksichtigt werden, die Mitglied dieses Dateisystems sind. Einige Unix-Varianten (z. B. Solaris) kennen die Option -x für du nicht. Dann müssen Sie einige Problemumgehungen verwenden, um die Du Ihres Dateisystems zu finden.

3. Überprüfen Sie nun, ob das du der sichtbaren Dateien ungefähr der Größe des von df angezeigten Speicherplatzes entspricht. In diesem Fall können Sie die großen Dateien / Verzeichnisse des Dateisystems / myfilesystem suchen, um sie zu bereinigen.

4. um die größten Unterverzeichnisse eines Verzeichnisses zu finden /.../dir verwenden

   du -sk /.../dir/*|sort -n
   

   Die Option -k erzwingt die Ausgabe der Sie in Kilobyte ohne Einheit. Dies kann auf einigen Systemen die Standardeinstellung sein. Dann können Sie diese Option weglassen. Die größten Dateien / Unterverzeichnisse werden am Ende der Ausgabe angezeigt.

5. Wenn Sie eine große Datei / ein großes Verzeichnis gefunden haben, das Sie nicht mehr benötigen, können Sie es auf geeignete Weise entfernen. Kümmern Sie sich nicht um die kleinen Verzeichnisse oben in der Ausgabe. Es wird Ihr Problem nicht lösen, wenn Sie sie löschen. Wenn Sie immer noch nicht genügend Speicherplatz haben, können Sie Schritt 4 in den großen Unterverzeichnissen wiederholen, die am Ende der Liste angezeigt werden.

Aber was ist passiert, wenn die du-Ausgabe nicht ungefähr dem von df angezeigten verfügbaren Speicherplatz entspricht?

Wenn die du-Ausgabe größer ist, haben Sie ein Unterverzeichnis übersehen, in dem ein anderes Dateisystem eingehängt ist. Wenn die du-Ausgabe viel kleiner ist, werden einige Dateien in keinem Verzeichnis angezeigt, das Sie überprüfen. Es kann verschiedene Gründe für sein Phänomen geben.

6. Einige Prozesse verwenden eine bereits gelöschte Datei. Daher wurden diese Dateien aus dem Verzeichnis entfernt und du kannst sie nicht sehen. Aber für das Dateisystem werden ihre Blöcke noch verwendet, bis die Prozesse die Dateien schließen. Sie können versuchen, die relevanten Prozesse herauszufinden (z. B. mit lsof) und sie zum Schließen dieser Dateien zwingen (z. B. durch Stoppen der Anwendung oder Beenden der Prozesse). Oder Sie starten einfach Ihre Maschine neu.

7. Es gibt Dateien in Verzeichnissen, die nicht mehr sichtbar sind, da in einem ihrer übergeordneten Verzeichnisse ein anderes Dateisystem eingehängt ist. Wenn Sie also eine Datei / myfilesysem / subdir / bigfile haben und nun ein anderes Dateisystem auf / myfilesystem / subdir mounten, können Sie diese Datei nicht mehr sehen und

   du -shx /myfilesystem 
   

   meldet einen Wert, der nicht die Größe von / myfilesystem / subdir / bigfile enthält. Der einzige Weg, um herauszufinden, ob solche Dateien existieren, besteht darin, / myfilesystem / subir zu entfernen und mit zu überprüfen

   ls -la /myfilesystem/subdir 
   

   wenn es Dateien enthält.

8. Es kann spezielle Arten von Dateisystemen geben, die Speicherplatz auf einer Festplatte belegen / reservieren, der für den Befehl ls nicht sichtbar ist. Sie benötigen spezielle Werkzeuge, um dies anzuzeigen.

Neben dieser systematischen Verwendung des Befehls du gibt es noch einige andere Möglichkeiten. Sie können den Befehl find verwenden, um nach Dateien zu suchen, die größer als ein von Ihnen angegebener Wert sind. Sie können nach Dateien suchen, die größer als ein von Ihnen angegebener Wert sind oder neu erstellt wurden oder einen speziellen Namen haben (z. B. * .log, core, * .trc). Sie sollten jedoch immer eine df wie in 1 beschrieben ausführen, damit Sie mit dem richtigen Dateisystem arbeiten

Wenn Sie auch keinen Befehl verwenden möchten , finden Sie hier eine App: Filelight

Damit können Sie schnell visualisieren, was in einem Ordner Speicherplatz belegt.

Versuchen Sie sudo apt-get autoremove, die nicht verwendeten Dateien zu entfernen, wenn Sie dies nicht getan haben

Ich benutze diesen oft

du -sh /*/

Wenn ich dann große Ordner finde, wechsle ich zu diesen und mache weitere Nachforschungen

cd big_dir
du -sh */

Bei Bedarf können Sie es auch automatisch mit sortieren lassen

du -s /*/ | sort -n

Keine wirkliche Antwort - aber ein Nachtrag.

Sie haben nicht genügend Speicherplatz und können ncdu nicht von @erman 's Antwort installieren.

Einige Vorschläge

• sudo apt clean allum bereits heruntergeladene Pakete zu löschen. SICHER
• sudo rm -f /var/log/*gzProtokolldateien löschen, die älter als ein oder zwei Wochen sind - löscht keine neueren / aktuellen Protokolle. Am sichersten
• sudo lsof | grep deletedlistet alle offenen Dateien auf, filtert jedoch nach den Dateien, die von der Festplatte gelöscht wurden. ZIEMLICH SICHER
• sudo rm /tmp/*Löschen Sie einige temporäre Dateien - wenn sie von irgendetwas verwendet werden, können Sie einen Prozess stören. NICHT WIRKLICH SICHER

Das `lsof kann man Zeilen wie folgt zurückgeben:

server456 ~ $ lsof | grep deleted
init          1          root    9r      REG              253,0  10406312       3104 /var/lib/sss/mc/initgro                        ups (deleted)
salt-mini  4532          root    0r      REG              253,0        17     393614 /tmp/sh-thd-1492991421                         (deleted)

Kann nicht viel für die Init-Zeile tun, aber die zweite Zeile legt nahe, dass Salt-Minion eine Datei geöffnet hat, die gelöscht wurde. Die Plattenblöcke werden zurückgegeben, sobald alle Datei-Handles durch einen Neustart des Dienstes geschlossen wurden.

Andere häufige Verdächtige sind syslog / rsyslog / syslog-ng, squid, apache oder ein Prozess, den Ihr Server ausführt und der "schwer" ist.

Besonders wertvoll finde ich die Ausgabe von Tools wie Filelight, aber wie in Ihrem Fall ist auf Servern normalerweise keine GUI installiert, aber der duBefehl ist immer verfügbar.

Was ich normalerweise mache ist:

• schreibe die duAusgabe in eine Datei ( du / > du_output.txt);
• Kopieren Sie die Datei auf meinen Computer.
• Verwenden Sie DuFSdiese Option, um die duAusgabe in einem temporären Verzeichnis "einzuhängen" . DuFSverwendet FUSE, um ein virtuelles Dateisystem zu erstellen (= es werden keine Dateien erstellt, es ist alles falsch), entsprechend der duAusgabe;
• Führen Sie Filelight oder ein anderes GUI-Tool in diesem temporären Verzeichnis aus.

Haftungsausschluss: Ich habe geschrieben dufs- gerade weil ich oft herausfinden muss, welcher Speicherplatz auf kopflosen Maschinen knapp wird.

Entspricht @TopHat, filtert jedoch einige Dateien, wenn der Name M, G oder T enthält. Ich glaube nicht, dass es die Größe in der ersten Spalte verfehlen wird, aber es wird nicht mit dem Dateinamen übereinstimmen, wenn Sie Dateien nicht kreativ benennen.

du -chad 1 . | grep -E '[0-9]M[[:blank:]]|[0-9]G[[:blank:]]|[0-9]T[[:blank:]]'

Befehlszeilenoptionen werden hier erklärt , da ich nicht wusste, was das c oder a tat.