Suchen und Ersetzen in einer Textdatei über einen Bash-Befehl

Was ist der einfachste Weg, um beispielsweise eine bestimmte Eingabezeichenfolge zu suchen und zu ersetzen und durch eine abcandere Zeichenfolge zu ersetzen, beispielsweise XYZin einer Datei /tmp/file.txt?

Ich schreibe eine App und verwende IronPython, um Befehle über SSH auszuführen - aber ich kenne Unix nicht so gut und weiß nicht, wonach ich suchen soll.

Ich habe gehört, dass Bash nicht nur eine Befehlszeilenschnittstelle ist, sondern auch eine sehr leistungsfähige Skriptsprache sein kann. Wenn dies zutrifft, können Sie vermutlich solche Aktionen ausführen.

Kann ich es mit Bash machen und was ist das einfachste (einzeilige) Skript, um mein Ziel zu erreichen?

Am einfachsten ist es, sed (oder perl) zu verwenden:

sed -i -e 's/abc/XYZ/g' /tmp/file.txt

Aufgrund der -iOption wird sed aufgerufen, um eine direkte Bearbeitung durchzuführen. Dies kann von bash aufgerufen werden.

Wenn Sie wirklich nur Bash verwenden möchten, kann Folgendes funktionieren:

while read a; do
    echo ${a//abc/XYZ}
done < /tmp/file.txt > /tmp/file.txt.t
mv /tmp/file.txt{.t,}

Dies durchläuft jede Zeile, führt eine Ersetzung durch und schreibt in eine temporäre Datei (Sie möchten die Eingabe nicht blockieren). Die Verschiebung am Ende wird nur vorübergehend zum ursprünglichen Namen verschoben.

Die Dateimanipulation wird normalerweise nicht von Bash durchgeführt, sondern von Programmen, die von Bash aufgerufen werden, z.

perl -pi -e 's/abc/XYZ/g' /tmp/file.txt

Das -iFlag weist ihn an, einen direkten Austausch durchzuführen.

Sehen Sie man perlrunfür weitere Informationen, einschließlich , wie eine Sicherungskopie der Originaldatei zu übernehmen.

Ich war überrascht, als ich darüber stolperte ...

Es gibt einen replaceBefehl, der mit dem "mysql-server"Paket geliefert wird. Wenn Sie ihn installiert haben, probieren Sie ihn aus:

# replace string abc to XYZ in files
replace "abc" "XYZ" -- file.txt file2.txt file3.txt

# or pipe an echo to replace
echo "abcdef" |replace "abc" "XYZ"

Weitere man replaceInformationen hierzu finden Sie hier.

Dies ist ein alter Beitrag, aber für alle, die Variablen verwenden möchten, wie @centurian sagte, bedeuten die einfachen Anführungszeichen, dass nichts erweitert wird.

Eine einfache Möglichkeit, Variablen abzurufen, besteht darin, eine Zeichenfolgenverkettung durchzuführen, da dies durch Nebeneinanderstellung in Bash erfolgt. Folgendes sollte funktionieren:

sed -i -e "s/$var1/$var2/g" /tmp/file.txt

Bash ist wie andere Shells nur ein Werkzeug zum Koordinieren anderer Befehle. Normalerweise würden Sie versuchen, Standard-UNIX-Befehle zu verwenden, aber Sie können natürlich Bash verwenden, um alles aufzurufen, einschließlich Ihrer eigenen kompilierten Programme, anderer Shell-Skripte, Python- und Perl-Skripte usw.

In diesem Fall gibt es verschiedene Möglichkeiten.

Wenn Sie eine Datei lesen und in eine andere Datei schreiben möchten, während Sie suchen / ersetzen, verwenden Sie sed:

sed 's/abc/XYZ/g' <infile >outfile

Wenn Sie die Datei an Ort und Stelle bearbeiten möchten (als ob Sie die Datei in einem Editor öffnen, bearbeiten und dann speichern würden), geben Sie dem Zeileneditor 'ex' Anweisungen.

echo "%s/abc/XYZ/g
w
q
" | ex file

Ex ist wie vi ohne den Vollbildmodus. Sie können ihm dieselben Befehle geben, die Sie an der Eingabeaufforderung ':' von vi ausführen würden.

Ich habe diesen Thread unter anderem gefunden und bin damit einverstanden, dass er die vollständigsten Antworten enthält, also füge ich auch meinen hinzu:

1. sedund edsind so nützlich ... von Hand. Schauen Sie sich diesen Code von @Johnny an:

   sed -i -e 's/abc/XYZ/g' /tmp/file.txt

2. Wenn meine Einschränkung darin besteht, es in einem Shell-Skript zu verwenden, kann keine Variable anstelle von "abc" oder "XYZ" verwendet werden. Die BashFAQ scheint zumindest mit dem übereinzustimmen , was ich verstehe. Also kann ich nicht verwenden:

   x='abc'
   y='XYZ'
   sed -i -e 's/$x/$y/g' /tmp/file.txt
   #or,
   sed -i -e "s/$x/$y/g" /tmp/file.txt

   aber was können wir tun? Wie, sagte @Johnny, benutze ein while read...aber leider ist das nicht das Ende der Geschichte. Folgendes hat bei mir gut funktioniert:

   #edit user's virtual domain
   result=
   #if nullglob is set then, unset it temporarily
   is_nullglob=$( shopt -s | egrep -i '*nullglob' )
   if [[ is_nullglob ]]; then
      shopt -u nullglob
   fi
   while IFS= read -r line; do
      line="${line//'<servername>'/$server}"
      line="${line//'<serveralias>'/$alias}"
      line="${line//'<user>'/$user}"
      line="${line//'<group>'/$group}"
      result="$result""$line"'\n'
   done < $tmp
   echo -e $result > $tmp
   #if nullglob was set then, re-enable it
   if [[ is_nullglob ]]; then
      shopt -s nullglob
   fi
   #move user's virtual domain to Apache 2 domain directory
   ......

3. Wie man sehen kann, wenn nullglobdann gesetzt ist, verhält es sich seltsam, wenn es einen String gibt, der ein *wie in enthält:

   <VirtualHost *:80>
    ServerName www.example.com

   was wird

   <VirtualHost ServerName www.example.com

   Es gibt keine Endwinkelklammer und Apache2 kann nicht einmal geladen werden.

4. Diese Art der Analyse sollte langsamer sein als das Suchen und Ersetzen mit einem Treffer. Wie Sie bereits gesehen haben, gibt es vier Variablen für vier verschiedene Suchmuster, die in einem Analysezyklus ausgeführt werden.

Die am besten geeignete Lösung, die ich mir mit den gegebenen Annahmen des Problems vorstellen kann.

Sie können verwenden sed:

sed -i 's/abc/XYZ/gi' /tmp/file.txt

Verwenden -iSie diese Option für "Groß- / Kleinschreibung ignorieren", wenn Sie nicht sicher sind, ob der zu findende Text abcoder ABCoder AbCusw. ist.

Sie können verwenden findund sedwenn Sie Ihren Dateinamen nicht kennen:

find ./ -type f -exec sed -i 's/abc/XYZ/gi' {} \;

Suchen und ersetzen Sie in allen Python-Dateien:

find ./ -iname "*.py" -type f -exec sed -i 's/abc/XYZ/gi' {} \;

Sie können den edBefehl auch verwenden , um in der Datei zu suchen und zu ersetzen:

# delete all lines matching foobar 
ed -s test.txt <<< $'g/foobar/d\nw' 

Weitere Informationen finden Sie unter " Bearbeiten von Dateien über Skripte mited ".

Wenn die Datei, an der Sie arbeiten, nicht so groß ist und das vorübergehende Speichern in einer Variablen kein Problem darstellt, können Sie die Bash-String-Ersetzung für die gesamte Datei gleichzeitig verwenden. Sie müssen sie nicht Zeile für Zeile durchgehen:

file_contents=$(</tmp/file.txt)
echo "${file_contents//abc/XYZ}" > /tmp/file.txt

Der gesamte Dateiinhalt wird als eine lange Zeichenfolge behandelt, einschließlich Zeilenumbrüchen.

XYZ kann z. B. eine Variable sein $replacement, und ein Vorteil der Nichtverwendung von sed besteht darin, dass Sie nicht befürchten müssen, dass die Such- oder Ersetzungszeichenfolge das Begrenzungszeichen sed-Muster enthält (normalerweise, aber nicht unbedingt, /). Ein Nachteil ist, dass keine regulären Ausdrücke oder komplexere Operationen von sed verwendet werden können.

Seien Sie vorsichtig, wenn Sie URLs durch "/" ersetzen.

Ein Beispiel dafür:

sed -i "s%http://domain.com%http://www.domain.com/folder/%g" "test.txt"

Auszug aus: http://www.sysadmit.com/2015/07/linux-reemplazar-texto-en-archivos-con-sed.html

Versuchen Sie den folgenden Shell-Befehl:

find ./  -type f -name "file*.txt" | xargs sed -i -e 's/abc/xyz/g'

Um Text in der Datei nicht interaktiv zu bearbeiten, benötigen Sie einen direkten Texteditor wie vim.

Hier ist ein einfaches Beispiel für die Verwendung über die Befehlszeile:

vim -esnc '%s/foo/bar/g|:wq' file.txt

Dies entspricht der @ lim-Antwort des Ex- Editors, was im Grunde dasselbe ist.

Hier einige expraktische Beispiele.

Ersetzen von Text foodurch barin der Datei:

ex -s +%s/foo/bar/ge -cwq file.txt

Entfernen von nachgestellten Leerzeichen für mehrere Dateien:

ex +'bufdo!%s/\s\+$//e' -cxa *.txt

Fehlerbehebung (wenn das Terminal feststeckt):

• Fügen Sie -V1param hinzu, um ausführliche Nachrichten anzuzeigen.
• Erzwingen Sie das Beenden durch : -cwq!.

Siehe auch:

• Wie bearbeite ich Dateien nicht interaktiv (z. B. in der Pipeline)? bei Vi SE

Sie können Python auch im Bash-Skript verwenden. Ich hatte mit einigen der besten Antworten hier nicht viel Erfolg und fand, dass dies ohne die Notwendigkeit von Schleifen funktioniert:

#!/bin/bash
python
filetosearch = '/home/ubuntu/ip_table.txt'
texttoreplace = 'tcp443'
texttoinsert = 'udp1194'

s = open(filetosearch).read()
s = s.replace(texttoreplace, texttoinsert)
f = open(filetosearch, 'w')
f.write(s)
f.close()
quit()

Sie können den Befehl rpl verwenden. Zum Beispiel möchten Sie den Domainnamen im gesamten PHP-Projekt ändern.

rpl -ivRpd -x'.php' 'old.domain.name' 'new.domain.name' ./path_to_your_project_folder/  

Dies ist kein klarer Grund, aber es ist sehr schnell und nützlich. :) :)