So ersetzen Sie die line-endings in VIM

Wie kann ich ersetzen Sie alle line-endings in einer großen Datei (>100MB)?
Ich habe versucht, das zu tun

:%s/\n/, /g

aber es ist zu langsam.

Warum wollen Sie dies tun, in VIM. Sie werden nur am Ende mit einer langen Linie, die Sie nicht Lesen können (mit den Augen ist.) Auch, was die Zeilenenden bestehen: DOS -, UNIX -, MAC-oder eine Kombination?

InformationsquelleAutor Frankovskyi Bogdan | 2010-03-04

8

So, ich ging durch und getestet/zeitlich einige der Antworten, die gegeben wurden von anderen Personen, sowie ein python-Antwort auf meine eigene. Hier ist, was ich habe:

tr:
```
> time tr "\n" "," < lines > line
real    0m1.617s
user    0m0.100s
sys     0m1.520s
```
python:
```
> time python -c 'import sys; print sys.stdin.read().replace("\n",", "),' < lines > line
real    0m1.663s
user    0m0.060s
sys     0m1.610s
```
awk:
```
> time awk '{printf("%s, ", $0)}' lines > line                                 
real    0m1.998s
user    0m0.390s
sys     0m1.600s
```
perl:
```
> time perl -e 'while (<>) { chomp; print "$_, " }' lines > line
real    0m2.100s
user    0m0.590s
sys     0m1.510s
```
sed:
```
> time sed 's/$/, /g' lines > line                                             
real    0m6.673s
user    0m5.050s
sys     0m1.630s
```
Hier ist die Datei die ich verwendet habe:
```
> ls -lh lines
-rw-r--r-- 1 some one 101M 2010-03-04 19:54 lines
> wc -l < lines
1300000
> head -n 3 < lines
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched.
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched.
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched.
> head -n 1 < lines | wc -c
82
```
Ursprünglich die timings wurden in cygwin, haben Sie sich nun genommen worden, mit vollständig aktualisierten ubuntu 9.10. Auch die text-Dateien, die Größe wurde erhöht auf 100 MB, mit Linien 80ish Zeichen breit. Wie man sehen kann, ziemlich viel alles andere als sed ist eine gute Idee.
- ich bin sehr misstrauisch Ihrer awk Ergebnisse. Zeit, die Sie Befehle ein paar mal, nicht nur einmal. Python sollte nicht schneller als awk, denn es braucht Zeit, um zu importieren Module und Zeug
- Es lief hab ein paar mal, das war über dem Durchschnitt. Gerade lief es über 10 mal mehr, 1.7 xx jedes mal. Vielleicht wäre es anders, wenn ich nicht mit cygwin awk.
- Sie waren Recht vermuten, mein awk Ergebnisse, ich re-lief es auf eine echte linux-box, und es war viel schneller.
InformationsquelleAutor Seamus Connor
3

:%s/$/, / gefolgt von einem :1,$j könnte schneller sein. Ansonsten, tun Sie es in einem externen Programm:
```
perl -e 'while (<>) { chomp; print "$_, " }' input_file > output_file

awk '{printf("%s, ", $0)}' input_file > output_file
```
Weiß nicht, aus der Spitze von meinem Kopf, die wäre am schnellsten.
- perl -ne 'chomp; print "$_, "' file. -n "meint while-Schleife"
- Gute Entscheidung, auf den -n.
- schneller laufen" ist nicht gerechtfertigt.
- Du hast Recht, das ist es nicht. In der Tat ist es ziemlich vergleichbar. Wie python und tr.
InformationsquelleAutor Cascabel
2

Verwenden Sie dieses Perl-Skripts gehen Sie durch Ihre Datei; es würde schneller sein als holding, alles im Speicher mit VIM. Nur Rohr Ausgabe in eine neue Datei.
```
#!/usr/local/bin/perl

while (<>) {
  $_ =~ s/\n/,/g;
  print $_;
}
```
- Ich vermute, dass der perl-interpreter ist nicht smart genug, um zu wissen, dass in diesem Fall $_ kann nicht von einem newline-mit Ausnahme des letzten Charakter - chomp ist wahrscheinlich viel schneller.
- In meiner völlig unwissenschaftlichen Tests, ist es etwa 300ms schneller zu chomp auf eine 100 MB-Datei.
InformationsquelleAutor OverClocked
0

Tun, Sie zu tun haben, das in vim?

Es ist schön, Unix-Dienstprogramm, das bedeutet, die Figur der übersetzung. Es ' C genannt tr.
Einige Referenz.

In deinem Fall wäre es:
```
tr "\n" -", " < inputfile > output_file 
```
- Dies ist sicherlich schneller als die Lösungen, die ich geschrieben, aber leider, es ersetzt "," anstatt ", " als die OP beantragt. Ich bin mir nicht sicher, es gibt einen Weg, das zu tun, mit tr gibt es?
- tr dauert nur single Charakter
- Nein gibt es nicht, ich habe nicht bemerkt, die dort Platz. Zu setzen, mehr als 1 Zeichen, man könnte ja mit sed, weil jemand unten geschrieben.
- Ja, aber sed ist wirklich keine gute option - es ist dabei die gleiche regex-Ersetzung, die zu langsam in Vim.
- Ich weiß über diesen Befehl, aber ich Versuch die zu finden, vim-Lösung, ohne die Verwendung externer tools.
InformationsquelleAutor pajton
0

Das beste tool ist sed, und Sie können verwenden Sie es mit :! Befehl

so verwenden :!sed -e 's/\n/,/g' % > %.tmp ; cat %.tmp > % ; rm %.tmp'

Benötigen Sie eine tmp-Datei ändern, bevor Sie integrieren in Ihre aktuelle Datei

InformationsquelleAutor shingara
0
```
$ more file
aaaa
bbbb
cccc
dddd
eeee

$ awk 'NR>1{printf("%s, ", p)}{p=$0}END{print p}' file
aaaa, bbbb, cccc, dddd, eeee

$ sed -e :b -e '$!N;s/\n/, /;tb' file
```
- Haben Sie testen Sie Ihr sed-Kommando? sed 'N;s/\n/, /' Datei
- nicht wirklich. seine ein Schnitt einer paste aus wiki, aber ich denke wiki kann man nicht trauen manchmal.
InformationsquelleAutor ghostdog74

Schreibe einen Kommentar

Du musst angemeldet sein, um einen Kommentar abzugeben.