Cómo reemplazar terminaciones de línea en VIM

Question

¿Cómo puedo reemplazar todas las terminaciones de línea en archivo grande (> 100MB)? He tratado de hacer

:%s/\n/, /g

pero es demasiado lento.

Answer 1

lo tanto, fui a través y probados/cronometrados algunas de las respuestas que fueron dadas por otras personas, más una respuesta de pitón propia. Aquí es lo que tengo:

tr:

> time tr "\n" "," <lines> line 
real 0m1.617s 
user 0m0.100s 
sys  0m1.520s 

pitón:

> time python -c 'import sys; print sys.stdin.read().replace("\n",", "),' <lines> line 
real 0m1.663s 
user 0m0.060s 
sys  0m1.610s 

awk:

> time awk '{printf("%s, ", $0)}' lines > line         
real 0m1.998s 
user 0m0.390s 
sys  0m1.600s 

Perl:

> time perl -e 'while (<>) { chomp; print "$_, " }' lines > line 
real 0m2.100s 
user 0m0.590s 
sys  0m1.510s 

sed:

> time sed 's/$/, /g' lines > line            
real 0m6.673s 
user 0m5.050s 
sys  0m1.630s 

Aquí está el archivo que he utilizado:

> ls -lh lines 
-rw-r--r-- 1 some one 101M 2010-03-04 19:54 lines 
> wc -l < lines 
1300000 
> head -n 3 < lines 
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched. 
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched. 
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched. 
> head -n 1 < lines | wc -c 
82 

Originalmente, los tiempos fueron tomadas en cygwin, que ahora se han adoptado con Ubuntu completamente actualizado 9.10. Además, el tamaño de los archivos de texto se aumentó a 100 megas, con líneas de 80 caracteres de ancho. Como puedes ver, cualquier cosa que no sea sed es una buena idea.

Answer 2

Utilice este script Perl para revisar su archivo; Sería más rápido que mantener todo en la memoria con VIM. Simplemente canalice la salida a un nuevo archivo.

#!/usr/local/bin/perl 

while (<>) { 
    $_ =~ s/\n/,/g; 
    print $_; 
} 

Answer 3

¿Tienes que hacer esto en vim?

Hay una buena utilidad Unix que hace la traducción basada en caracteres. Se llama tr. Algunos reference.

En su caso sería:

 
tr "\n" "," < input_file > output_file 

Answer 4

:%s/$/, / seguido de un :1,$j podría ser más rápido. De lo contrario, hacerlo de una utilidad externa:

perl -e 'while (<>) { chomp; print "$_, " }' input_file > output_file 

awk '{printf("%s, ", $0)}' input_file > output_file 

No sabe la parte superior de la cabeza que sería más rápido.

Answer 5

$ more file 
aaaa 
bbbb 
cccc 
dddd 
eeee 

$ awk 'NR>1{printf("%s, ", p)}{p=$0}END{print p}' file 
aaaa, bbbb, cccc, dddd, eeee 

$ sed -e :b -e '$!N;s/\n/, /;tb' file 

Answer 6

La mejor herramienta es sed y puedes usarla con:! comando

a fin de utilizar :!sed -e 's/\n/,/g' % > %.tmp ; cat %.tmp > % ; rm %.tmp'

Es necesario crear un archivo tmp con el cambio antes de integrar en su archivo actual