Entfernen Sie die ersten n Zeilen einer großen Textdatei

63

Ich muss die ersten 42 Zeilen eines 2-GB-SQL-Dumps entfernen.

Ich weiß, dass ich die ersten Zeilen anzeigen kann mit:

head -n 44 dump.sql

Aber gibt es trotzdem die Möglichkeit, sie zu bearbeiten oder zu entfernen?

command-line

— Kohjah Breese
quelle

91

Wenn Sie nur die Zeilen ab dem 43. anzeigen möchten, können Sie verwenden

tail -n +43 dump.sql

Das +Zeichen ist wichtig - ohne es tailwerden stattdessen die letzten 43 Zeilen gedruckt . Alternativ mit 'sed'

sed 1,42d dump.sql

Wenn Sie die ersten 42 Zeilen der Originaldatei wirklich löschen möchten, können Sie die Änderung mit der -iOption vornehmen

sed -i 1,42d dump.sql

— Stahlfahrer
quelle

Fantastische Antwort, fantastische Verwendung von tail. Ich habe viele Male etwas Neues gefunden, um aus Ihren Antworten zu lernen. Vielen Dank.

— Souravc

1

Oh man tail -n +43 ist ein Game Changer! Ich habe eine umständliche Aufforderung von sed verwendet, um denselben Effekt zu erzielen.

— Pfctdayelise

4

Was ist, wenn auf dem Gerät kein Speicherplatz mehr vorhanden ist? sed -i 1,50000000d 17GigFileErstellt eine temporäre Datei sedXYZ, die viel mehr Gigabyte verbraucht. Gibt es einen Ansatz ohne temporäre Dateien?

— Juanmf

Was ist der Unterschied zwischen tail -n +43und head -n 44wie in der Frage erwähnt?

— Hashim

@juanmf Sie könnten versuchen, dies mit einem GUI-Tool zu tun (ich habe es mit Mousepad gemacht, aber die Datei von Interesse war "nur" ~ 700 MB. Es dauert eine Weile, bis die Datei geladen ist ...

— Digger

18

Dies scheint am einfachsten zu sein:

sed '1,42d' test.sql > test2.sql

Entfernen Sie die Zeilen 1-42 aus test.sql und speichern Sie sie als test2.sql

— Kohjah Breese
quelle

9

Ein kürzeres wäre sed -i '1,42d' test.sql, wenn Sie die Originaldatei nicht behalten müssen.

— Sadi

10

Versuche dies,

tail -n +43 dump.sql > dump_new.sql

— ptantiku
quelle

3

Sie können Vim im Ex-Modus verwenden:

ex -s -c '1d42|x' dump.sql

1 in die erste Zeile gehen
42 Wähle 42 Zeilen aus
d löschen
x speichern und schließen

— Steven Penny
quelle

1

Erstellt es eine temporäre Datei? Ist dies möglich, wenn der auf dem Gerät verbleibende Speicherplatz kleiner als die Dateigröße ist?

— Juanmf

2

@ juanmf Für alle diese Lösungen ist eine temporäre Datei erforderlich. Es ist nur möglich, Daten vom Ende einer Datei zu entfernen, ohne eine temporäre Datei zu verwenden.

— PerlDuck

0

Entschuldigung, ich kann Ihnen momentan keinen aktuellen Code geben. Versuchen Sie jedoch, etwas in der Richtung von zu betrachten

tail -n arcv(`wc -l`) -44

Was dies tun sollte (einmal richtig formatiert), ist die Anzahl der Zeilen in der Datei zu zählen (wc -l), 44 davon zu subtrahieren (-44) und dann alles beginnend mit der 45. Zeile in der Datei auszudrucken.

Hoffe das hilft und viel Glück.

— kb2bcg
quelle

Das ist nicht ganz optimal, Aufruf wc -lauf der Datei, können Sie sie zweimal verarbeiten, während sedoder tailerst einmal verarbeiten.

— Du

0

Versuche dies,

head -n 42 dump.sql > tmp; cat dump.sql | grep -vxf tmp > dump.sql.new; rm tmp

oder,

a=$(cat dump.sql| wc -l); tail -n "$((a-42))" dump.sql > dump.sql.new

— souravc
quelle

0

Nur um dies hinzuzufügen. Wenn Sie einen Mac verwenden, müssen Sie die Backup-Erweiterung hinzufügen. Antwort von diesem Beitrag .

sed -i '.bak' 1,42d dump.sql

— Jerinaw
quelle

0

Aufgrund von sedUnstimmigkeiten zwischen Linux und Mac habe ich beschlossen, das tail -n +43 dump.sql > dump.sqlFormat zu verwenden .

— Akash Agarwal
quelle