Unix & Linux csv

8

Wie erhalte ich die Zeichenanzahl von Wörtern in einer bestimmten Spalte?

Ich habe eine CSV-Datei wie diese: abd,123,egypt,78 cde,456,england,45 Wie kann ich die Anzahl der Zeichen nur für die Wörter in der 3. Spalte ermitteln? Ich kann nicht herausfinden, wie ich wcdazu komme.

12 shell columns csv wc

2

So zeigen Sie TSV (csv) in der Konsole an, wenn leere Zellen fehlen: `column -t -s $ '\ t'`

Ich habe eine Datei mit Spalten, mit denen gespeert wurde tab. Ich habe eine Datei, wenn einige Zeilen leere Zellen haben (am Anfang, in der Mitte). In solchen Fällen column -t -s $'\t'scheitert einfach: Eingang: $ echo -e 'A\tB\tC\tD\n\tb1\t\td1\n\t\t\td2\na3\t\t\td3' > in.tsv $ hexdump -C in.tsv 00000000 41 09 42 09 …

12 text-processing csv spreadsheet

6

Entfernen Sie Zeilen aus einer Datei, abhängig von den Zeilen in einer anderen Datei

Die Datei file1.txt enthält Zeilen wie: /api/purchase/<hash>/index.html Beispielsweise: /api/purchase/12ab09f46/index.html Die Datei file2.csv enthält Zeilen wie: <hash>,timestamp,ip_address Beispielsweise: 12ab09f46,20150812235200,22.231.113.64 a77b3ff22,20150812235959,194.66.82.11 Ich möchte file2.csv filtern und alle Zeilen entfernen, in denen der Wert von Hash auch in file1.txt vorhanden ist. Das heißt: cat file1.txt | extract <hash> | sed '/<hash>/d' file2.csv oder …

11 bash shell-script text-processing sed csv

2

Neuindizierung einer großen CSV-Datei

Ich habe die Antworten in diesem hilfreichen Thread durchgesehen , aber mein Problem scheint so unterschiedlich zu sein, dass mir (zumindest mit sed) keine gute Antwort einfällt . Ich habe eine große CSV-Datei (200+ GB) mit Zeilen, die wie folgt aussehen: <alphanumerical_identifier>,<number> wo <alphanumerical_identifier>ist über die gesamte Datei eindeutig. Ich …

11 files sed awk csv

3

Formatieren Sie die Ausgabe des Befehls 'ps' ohne Leerzeichen

Ich habe den folgenden psBefehl, um bestimmte Eigenschaften aller laufenden Prozesse zusammen mit einigen Eigenschaften abzurufen: ps --no-headers -exo "uname,ppid,pid,etime,%cpu,%mem,args" Ich möchte, dass es in CSV formatiert wird, damit ich es analysieren kann. Hinweis: Ich habe die Argumente am Ende gesetzt, um das Parsen zu vereinfachen. Ich glaube nicht, dass …

11 csv ps

5

Unterstrich durch Komma ersetzen und doppelte Anführungszeichen in CSV entfernen

Ich habe eine CSV-Datei als input.csv "1_1_0_0_76" "1_1_0_0_77" "1_1_0_0_78" "1_1_0_0_79" "1_1_0_0_80" "1_1_0_0_81" "1_1_0_0_82" "1_1_0_0_83" "1_1_0_0_84" "1_1_0_0_85" ............. und so weiter. Ich muss diese CSV-Datei in konvertieren result.csv 1,1,0,0,76 1,1,0,0,77 1,1,0,0,78 1,1,0,0,79 1,1,0,0,80 1,1,0,0,81 1,1,0,0,82 1,1,0,0,83 1,1,0,0,84 1,1,0,0,85

10 linux awk sed csv text-formatting

4

Entfernen Sie nur die Kommas in doppelten Anführungszeichen

In einer Textdatei möchte ich ,(Kommas) und auch "(Anführungszeichen) entfernen ( nur wenn die doppelten Anführungszeichen durch Kommas getrennte Zahlen enthalten). 56,72,"12,34,54",x,y,"foo,a,b,bar" Erwartete Ausgabe 56,72,123454,x,y,"foo,a,b,bar" Hinweis: Ich zeige die obige Zeile nur als Beispiel. Meine Textdatei enthält viele Zeilen wie oben und die durch Kommas getrennten Zahlen in doppelten Anführungszeichen …

10 text-processing sed csv

5

Analysieren einer durch Trennzeichen getrennten Textdatei in Bash als Befehlsargumente

Ich habe eine Textdatei wie folgt aufgeteilt: field1,field2,field3 xield1,xield2,xield3 dield1,dield2,dield3 gield1,gield2,gield3 Jede dieser Spalten ist ein Parameter für ein Programm, und ich möchte, dass das Programm für jede Zeile aufgerufen wird Ich hatte auf eine Schleife gehofft, so etwas wie: for $i in file command $field2 -x $field3 -PN -$field1 …

10 bash text-processing scripting csv

1

awk entfernt unerwartet Punkte aus der Zeichenfolge

Ich möchte eine Spalte (2. Platz) in eine .csvDatei einfügen und möchte, dass die Werte dieser Spalte Zeichenfolgen sind und in Anführungszeichen gesetzt werden. Der folgende Befehl fügt die Spalte hinzu, jedoch ohne Anführungszeichen: awk -F"," 'BEGIN { OFS = "," } {$2="2.4.0"; print}' test.csv > output.csv Der folgende Ansatz …

9 awk csv

1

So erhalten Sie Zeilen, deren n-te Spalte die m-te Spalte enthält

Ich habe eine CSV-Datei, die Domains und Webmails enthält, wie folgt: site1.com,mail.site1.com site2.com,testmail.com site3.com,mx.site3.com site4.com,smtp.site4.com site5.com,foomail.com site6.com,barmail.com site7.com,webmail.site7.com site8.com,01mx.site8.com site9.com,foobarmail.com site10.com,mx-smtp222.site10.com Ich möchte Zeilen erhalten, in denen die Webmails-Spalte die Domains-Spalte derselben Zeile enthält. Für das obige Beispiel sollte die Ausgabe sein: site1.com,mail.site1.com site3.com,mx.site3.com site4.com,smtp.site4.com site7.com,webmail.site7.com site8.com,01mx.site8.com site10.com,mx-smtp222.site10.com

9 text-processing awk sed csv

7

Behalten Sie nur die Zeilen bei, die die genaue Anzahl der Trennzeichen enthalten

Ich habe eine riesige CSV-Datei mit 10 durch Kommas getrennten Feldern. Leider sind einige Zeilen fehlerhaft und enthalten nicht genau 10 Kommas (was einige Probleme verursacht, wenn ich die Datei in R einlesen möchte). Wie kann ich nur die Zeilen herausfiltern, die genau 10 Kommas enthalten?

9 csv filter

4

Konvertieren Sie CSV in eine HTML-Tabelle

Ich habe eine Medical.csvDatei mit Zeilen im folgenden Format: field: 'participation.type', displayName: 'program_type', type: 'String',path:'participation' field: 'participation.program', displayName: 'program_name', type: 'String',path:'participation' Ich möchte ein schreiben Bash - Skript , es mit zu HTML - Tabelle zu konvertieren field, displayNameund typeals Header dynamisch. Die Csv2HtmlConverter.sh(Inspiriert von Antwort bei Konvertieren von CSV …

8 bash text-processing csv html

6

Wie kann ich tabulatorgetrennte Daten in durch Kommas getrennte Daten konvertieren?

Ich fordere eine Liste von ec2-Snapshots über das ec2-Befehlszeilentool von amazon an: ec2-describe-snapshots -H --hide-tags > snapshots.csv Die Daten sehen ungefähr so aus: SnapshotId VolumeId StartTime OwnerId VolumeSize Description snap-00b66464 vol-b99a38d0 2012-01-05 5098939 160 my backup Wie kann ich die Daten abfangen, bevor ich sie umleitung, snapshots.csvund die folgenden Schritte …

8 shell-script text-processing sed awk csv

7

Wie drucke ich alle Zeilen einer Datei mit doppelten Werten in einer bestimmten Spalte?

Bei einer Datei wie dieser: 1,768,12,46576457,7898 1,123,435,134,146 2,345,6756856,12312,1311 5,234,567465,12341,1341 1,3245,4356345,2442,13 9,423,2342,121,463 9,989,342,121,1212 Ich möchte alle Zeilen (im Bash-Terminal) so auflisten, dass der Wert in Spalte 1 mindestens zweimal erscheint (in Spalte 1). Das Ergebnis sollte sein 1,768,12,46576457,7898 1,123,435,134,146 1,3245,4356345,2442,13 9,423,2342,121,463 9,989,342,121,1212

7 text-processing awk csv

3

awk, wenn sowohl Trennzeichen als auch Anführungszeichen für ein Feld verwendet werden

Ich habe eine Datei im folgenden Format: field1|field2|field3 field1|"field2|field2"|field3 Beachten Sie, dass die zweite Zeile doppelte Anführungszeichen enthält. Die Zeichenfolge in doppelten Anführungszeichen gehört zu Feld 2. Wie wird dies mit awk extrahiert? Ich habe ohne Ergebnisse gegoogelt. Ich habe es auch ohne Glück versucht FS='"| "|^"|"$' '{print $2}'

7 awk csv

Als «csv» getaggte Fragen