Wie verwende ich [\ w] + in regulären Ausdrücken in sed?

Ich bin auf Windows, aber ich denke, meine Frage ist hier noch richtig gestellt.

C:\Users\User>grep --version
GNU grep 2.6.3

C:\Users\User>sed --version
GNU sed version 4.2.1

Mir ist aufgefallen, dass folgendes funktioniert (ausgeben here):

echo here | grep -E "\w+"
echo here | grep -E "[her]+"

Dies funktioniert jedoch nicht (es wird nichts ausgegeben):

echo here | grep -E "[\w]+"

Das macht wieder (ausgeben here):

echo here | grep -P "[\w]+"

[\w]Ich nehme also an, dass es sich um etwas Spezielles für reguläre Perl-Ausdrücke handelt. Ist das korrekt?

Also lass uns reden sed. Das funktioniert (Ausgabe gone):

echo here | sed -r "s/\w+/gone/"
echo here | sed -r "s/[her]+/gone/"

Und das tut es auch nicht (Ausgabe here):

echo here | sed -r "s/[\w]+/gone/"

Wie kann ich nun reguläre Perl-Ausdrücke für sed aktivieren?

Verschiedene Tools und Versionen davon unterstützen verschiedene Varianten von regulären Ausdrücken. In der Dokumentation der einzelnen Artikel erfahren Sie, was sie unterstützen.

Es gibt Standards, mit denen man sich auf ein Minimum an Funktionen verlassen kann, die für alle konformen Anwendungen verfügbar sind.

Zum Beispiel alle modernen Implementierungen sedund grepImplementierungen grundlegender regulärer Ausdrücke gemäß POSIX (mindestens die eine oder andere Version des Standards, aber dieser Standard hat sich diesbezüglich in den letzten Jahrzehnten nicht wesentlich weiterentwickelt).

In POSIX BRE und ERE haben Sie die [:alnum:]Zeichenklasse. Das stimmt mit Buchstaben und Ziffern in Ihrem Gebietsschema überein (beachten Sie, dass dies oft viel mehr umfasst, als a-zA-Z0-9wenn das Gebietsschema C ist).

So:

grep -x '[[:alnum:]_]\{1,\}'

stimmt mit einem oder mehreren Alumni oder _ überein.

[\w]wird von POSIX benötigt, um entweder mit einem Backslash oder mit einem Backslash übereinzustimmen w. Sie werden also keine grepoder eine sedImplementierung finden, wo diese verfügbar ist (es sei denn, dies erfolgt über nicht standardmäßige Optionen).

Das Verhalten für \wAlleine wird von POSIX nicht spezifiziert, daher dürfen Implementierungen tun, was sie wollen. GNU grephat das vor langer Zeit hinzugefügt.

grepFrüher hatte GNU eine eigene Regexp-Engine, jetzt verwendet es jedoch die der GNU-Libc (obwohl es eine eigene Kopie einbettet).

Es soll zu Alumni und Unterstrich in Ihrem Gebietsschema passen. Es hat jedoch derzeit den Fehler, dass es nur Einzelbyte-Zeichen entspricht (z. B. nicht in einem UTF-8-Gebietsschema, obwohl dies eindeutig ein Buchstabe ist und obwohl es in allen Gebietsschemas übereinstimmt, in denen es sich um ein einzelnes Zeichen handelt Charakter).

Es gibt auch einen \wRegexp-Operator in Perl-Regexp und in PCRE. PCRE / Perl sind keine regulären POSIX-Ausdrücke, sondern nur eine andere Sache.

Mit der Art und Weise, wie GNU grep -PPCRE verwendet, hat es das gleiche Problem wie ohne -P. Es kann jedoch mithilfe von umgangen werden (*UCP)(obwohl dies auch Nebenwirkungen in Nicht-UTF8-Gebietsschemas hat).

GNU sedverwendet auch die regulären Ausdrücke der GNU libc für ihre eigenen regulären Ausdrücke. Es benutzt es so, dass es nicht den gleichen Fehler wie GNU hat grep.

GNU sedunterstützt keine PCREs. Der Code enthält einige Beweise dafür, dass es schon einmal versucht wurde, aber er scheint nicht mehr auf der Tagesordnung zu stehen.

Wenn Sie reguläre Ausdrücke von Perl möchten, verwenden Sie einfach perl.

Ansonsten würde ich sagen, dass es besser ist, den Standard und die Verwendung beizubehalten, als sich auf eine falsche Nicht-Standard-Funktion Ihrer speziellen Implementierung von sed/ zu verlassen .grep[_[:alnum:]]

Sie haben Recht - \wist Teil von PCRE - Perl - kompatiblen regulären Ausdrücken. Es ist jedoch nicht Teil des 'Standard'-Regex. http://www.regular-expressions.info/posix.html

Einige Versionen von sedunterstützen es möglicherweise, aber ich würde vorschlagen, dass die einfachste Möglichkeit die Verwendung perlim sedModus ist, indem Sie das -pFlag angeben . (Zusammen mit dem -e). (Weitere Einzelheiten in perlrun)

Aber []in diesem Beispiel brauchen Sie das nicht zu umgehen - das ist für Gruppen von gültigen Sachen.

echo here  | perl -pe 's/\w+/gone/'

Oder unter Windows:

C:\>echo here  | perl -pe "s/\w+/gone/"
gone
C:\>echo here  | perl -pe "s/[\w\/]+/gone/"
gone

Siehe perlrefür mehr PCRE Zeug.

Sie können Perl hier herunterladen: http://www.activestate.com/activeperl/downloads

Ich vermute das grepund sedentscheide unterschiedlich, wann die anzuwenden []und wann die zu erweitern sind \w. In Perl \wbedeutet Regex ein beliebiges Wortzeichen und []definiert eine Gruppe, um eines der Zeichen als Übereinstimmung anzuwenden. Wenn Sie das \wvor dem "erweitern" [], wird es eine Zeichenklasse aller Wortzeichen sein. Wenn stattdessen tun Sie []zuerst finden Sie eine Zeichenklasse mit zwei Zeichen lang sein \und wso wäre es irgendein Muster entsprechen , die eine oder mehrere dieser beiden Zeichen.

Es sedsieht also so aus, als würde das []und behandelt es so, als würde es die exakten Zeichen enthalten, die übereinstimmen, anstatt die spezielle Sequenz \wwie perlund zu grepbeachten. Natürlich []sind die in diesem Beispiel völlig unnötig, aber man könnte sich vielleicht Fälle vorstellen, in denen es wichtig wäre, aber dann könnten Sie dafür sorgen, dass es mit parens und ors funktioniert.