Traitement de texte - joindre toutes les deux lignes avec des virgules

J'ai plus de 1000 lignes dans un fichier. Le fichier commence comme suit (numéros de ligne ajoutés):

Station Name
Station Code
A N DEV NAGAR
ACND
ABHAIPUR
AHA
ABOHAR
ABS
ABU ROAD
ABR

J'ai besoin de convertir cela en un fichier, avec des entrées séparées par des virgules en joignant toutes les deux lignes. Les données finales devraient ressembler à

Station Name,Station Code
A N DEV NAGAR,ACND
ABHAIPUR,AHA
ABOHAR,ABS
ABU ROAD,ABR
...

Ce que j’essayais, c’est d’essayer d’écrire un script shell puis de echoles séparer par une virgule. Mais j'imagine qu'une solution simple et efficace ferait l'affaire ici sed/ awk.

Des idées?

Utilisez simplement cat(si vous aimez les chats ;-)) et paste:

cat file.in | paste -d, - - > file.out

Explication: pastelit dans un certain nombre de fichiers et colle ensemble les lignes correspondantes (ligne 1 du premier fichier avec ligne 1 du deuxième fichier, etc.):

paste file1 file2 ...

Au lieu d'un nom de fichier, nous pouvons utiliser -(tiret). pasteprend la première ligne de file1 (qui est stdin). Ensuite, il veut lire la première ligne de file2 (qui est aussi stdin). Cependant, puisque la première ligne de stdin a déjà été lue et traitée, ce qui attend maintenant sur le flux d'entrée est la deuxième ligne de stdin, qui pastese colle heureusement à la première. L' -doption définit le délimiteur comme une virgule plutôt qu'un onglet.

Sinon, faire

cat file.in | sed "N;s/\n/,/" > file.out

PS Oui, on peut simplifier ce qui précède pour

< file.in sed "N;s/\n/,/" > file.out

ou

< file.in paste -d, - - > file.out

qui a l'avantage de ne pas utiliser cat.

Cependant, je n'ai pas utilisé cet idiome exprès , pour des raisons de clarté - il est moins bavard et j'aime bien cat(CATS ARE NICE). Alors s'il vous plaît ne pas éditer.

Alternativement, si vous préférez coller aux chats (coller est la commande pour concaténer des fichiers horizontalement, tandis que cat les concaténer verticalement), vous pouvez utiliser:

paste file.in | paste -d, - -

Si quelqu'un qui atterrit ici cherche à combiner toutes les lignes dans un liner CSV, essayez

cat file | tr '\n' ','

sed 'N;s/\n/,/' file

Avec sed, joignez (N) toutes les 2 lignes et remplacez la nouvelle ligne (\ n) par ",".

paste -sd ',\n' file.in > file.out

Notez également que, comme nous remplaçons simplement un caractère par un autre (chaque nouvelle ligne par une virgule), nous pouvons travailler sur le fichier d'entrée à la place:

paste -sd ',\n' file.in 1<> file.in

(mais attention, il est possible que cela ne fonctionne pas sur des systèmes non-Unix dotés de terminateurs CRLF (comme ceux de Microsoft) que certains POSIX émulés pastepourraient traiter de manière non-Unix)

Voici un one-liner (bien que potentiellement des millions de commandes) utilisant Bash pur:

(IFS=; while read -r name; do read -r code; printf '%s\n" "$name,$code"; done < file.in) > file.out

J'utilise un sous-shell (la parenthèse) pour ne pas avoir à stocker ni restaurer IFS. Ce que l’autre devrait faire pour ne pas gâcher l’environnement des utilisateurs au cas où la source serait source L'alternative serait de passer que les nouvelles IFS uniquement readcomme IFS= read -r name, IFS= read -r code.

Le fait que toutes les commandes de la boucle soient intégrées au shell rend ses performances acceptables et est même plus rapide que les autres solutions pour les petits fichiers. Mais beaucoup de gens considéreraient cela comme une mauvaise pratique et il faut être prudent lorsqu’on la généralise à autre chose.

Pour l’ensemble complet de réponses, une awksolution possible pourrait être:

awk 'NR%2==1 {printf $0","} NR%2==0 { print $0}' *file*

Hoary vieux marron d'un awkidiome

awk '{ORS=NR%2?",":"\n";print}' file
Station Name,Station Code
A N DEV NAGAR,ACND
ABHAIPUR,AHA
ABOHAR,ABS
ABU ROAD,ABR

Possible aussi avec perl,

perl -pe 's/^\d+\.\s+//;$.&1?chomp:print","' file

Par exemple:

seq 0 70 | xargs -L 2 | sed 's/ /,/g'

Sortie: (note: xargs -L number_of_columnsfonctionne bien avec la plupart des colonnes et pas seulement toutes les deux lignes)

0,1
2,3
4,5
6,7
8,9
10,11
12,13
14,15
16,17
18,19
20,21
22,23
24,25
26,27
28,29
30,31
32,33
34,35
36,37
38,39
40,41
42,43
44,45
46,47
48,49
50,51
52,53
54,55
56,57
58,59
60,61
62,63
64,65
66,67
68,69
70

Solution POSIX avec pr:

pr -2 -a -t -s, file

http://pubs.opengroup.org/onlinepubs/9699919799/utilities/pr.html