Grep mehrere Muster negative Übereinstimmung

Daher habe ich eine Reihe von Apache-Protokollen mit dem Standardprotokollformat. Ich möchte alle Protokollzeilen abrufen, die nicht von einem Webcrawler stammen.

Nehmen wir also an, ich habe eine Datei robot_patterns mit Einträgen wie

Googlebot
msnbot-media
YandexBot
bingbot

Wenn ich den Befehl ausführe grep -f robot_patterns *.log, erhalte ich alle Einträge von Bots, die den obigen Mustern entsprechen. Meine aktuelle Liste enthält ca. 30 Einträge von Bots und Agenten, die ich ignorieren möchte.

Aber ich möchte alle Einträge finden, die NICHT von Bots stammen . Also versuche ich grep -v -f robot_patterns *.logund es werden keine Ergebnisse von grep zurückgegeben. Dies ist nicht das, was ich erwarte oder wünsche, und ich finde keinen offensichtlichen Weg, um das zu bekommen, was ich will. Wenn Sie die -vOption mit mehreren Mustern in einer Datei kombinieren, gibt grep nur dann eine übereinstimmende Zeile zurück, wenn sie mit JEDEM Muster übereinstimmt.

Befindet sich eine leere Zeile in der Musterdatei, stimmt diese mit jeder Zeile überein, sodass keine Zeilen mit zurückgegeben werden -v. Dies liegt daran, dass die Zeilen als reguläre Ausdrücke interpretiert werden und ein leerer regulärer Ausdruck immer übereinstimmt.

Dies ist jedoch kein Problem -F, da grepLeerzeilen mit ignoriert werden -F.
-FVerursacht grep, dass die Zeilen als einfache Zeichenfolgen interpretiert werden, nach denen gesucht werden muss, und beschleunigt sich möglicherweise, grepwenn reguläre Ausdrücke nicht benötigt werden.

Du kannst es versuchen:

grep -vE 'Googlebot|msnbot-media|YandexBot|bingbot' yourlogfile