Visionneuse CSV en ligne de commande? [fermé]

Quelqu'un connaît-il une visionneuse CSV en ligne de commande pour Linux / OS X? Je pense à quelque chose comme lessmais qui espace les colonnes de manière plus lisible. (Je serais d'accord pour l'ouvrir avec OpenOffice Calc ou Excel, mais c'est beaucoup trop maîtrisé pour simplement regarder les données comme je le dois.) Avoir un défilement horizontal et vertical serait formidable.

Vous pouvez également utiliser ceci:

column -s, -t < somefile.csv | less -#2 -N -S

column est un programme Unix standard qui est très pratique - il trouve la largeur appropriée de chaque colonne et affiche le texte sous forme de tableau bien formaté.

Remarque: chaque fois que vous avez des champs vides, vous devez y placer une sorte d'espace réservé, sinon la colonne est fusionnée avec les colonnes suivantes. L'exemple suivant montre comment utiliser sedpour insérer un espace réservé:

$ cat data.csv
1,2,3,4,5
1,,,,5
$ sed 's/,,/, ,/g;s/,,/, ,/g' data.csv | column -s, -t
1  2  3  4  5
1           5
$ cat data.csv
1,2,3,4,5
1,,,,5
$ column -s, -t < data.csv
1  2  3  4  5
1  5
$ sed 's/,,/, ,/g;s/,,/, ,/g' data.csv | column -s, -t
1  2  3  4  5
1           5

Notez que la substitution de ,,pour , ,est effectué deux fois. Si vous ne le faites qu'une seule fois, 1,,,4deviendra 1, ,,4puisque la deuxième virgule est déjà associée.

Vous pouvez installer csvtool(sur Ubuntu) via

sudo apt-get install csvtool

puis exécutez:

csvtool readable filename | view -

Cela le rendra joli et joli à l'intérieur d'une instance de vim en lecture seule, même si vous avez des cellules avec des valeurs très longues.

Jetez un œil à csvkit . Il fournit un ensemble d'outils qui adhèrent à la philosophie UNIX (ce qui signifie qu'ils sont petits, simples, à usage unique et peuvent être combinés).

Voici un exemple qui extrait les dix villes les plus peuplées d'Allemagne de la base de données gratuite Maxmind World Cities et affiche le résultat dans un format lisible par console:

$ csvgrep -e iso-8859-1 -c 1 -m "de" worldcitiespop | csvgrep -c 5 -r "\d+" 
  | csvsort -r -c 5 -l | csvcut -c 1,2,4,6 | head -n 11 | csvlook
-----------------------------------------------------
|  line_number | Country | AccentCity | Population  |
-----------------------------------------------------
|  1           | de      | Berlin     | 3398362     |
|  2           | de      | Hamburg    | 1733846     |
|  3           | de      | Munich     | 1246133     |
|  4           | de      | Cologne    | 968823      |
|  5           | de      | Frankfurt  | 648034      |
|  6           | de      | Dortmund   | 594255      |
|  7           | de      | Stuttgart  | 591688      |
|  8           | de      | Düsseldorf | 577139      |
|  9           | de      | Essen      | 576914      |
|  10          | de      | Bremen     | 546429      |
-----------------------------------------------------

Csvkit est indépendant de la plateforme car il est écrit en Python.

Tabview: le visualiseur de fichiers CSV en ligne de commande curses python léger (et aussi d'autres données tabulaires Python, comme une liste de listes) est ici sur Github

Fonctionnalités:

• Python 2.7+, 3.x
• Prise en charge Unicode
• Vue semblable à une feuille de calcul pour visualiser facilement les données tabulaires
• Navigation de type Vim (h, j, k, l, g (haut), G (bas), 12G goto ligne 12, m - mark, '- goto mark, etc.)
• Basculer la ligne d'en-tête persistante
• Redimensionner dynamiquement les largeurs et l'espace des colonnes
• Triez croissant ou décroissant par n'importe quelle colonne. Tri d'ordre «naturel» pour les valeurs numériques.
• Recherche plein texte, n et p pour parcourir les résultats de la recherche
• «Entrée» pour afficher le contenu complet de la cellule
• Yank contenu des cellules dans le presse-papiers
• F1 ou? pour les raccourcis clavier
• Peut également être utilisé à partir de la ligne de commande python pour visualiser toutes les données tabulaires (par exemple, liste de listes)

Si vous êtes un vimmer, utilisez le plugin CSV , qui est joliment beau .

Le package nodejs tecfu / tty-table peut être globalement installé pour faire précisément ceci:

apt-get install nodejs
npm i -g tty-table
cat data.csv | tty-table

Il peut également gérer des flux.

Pour plus d'informations, consultez les documents d'utilisation du terminal ici .

xsv est plus qu'une visionneuse. Je le recommande pour la plupart des tâches CSV sur la ligne de commande, en particulier lorsqu'il s'agit de grands ensembles de données.

Mon projet FOSS CSVfix vous permet d'afficher des fichiers CSV au format tableau "ASCII art".

La réponse d'Ofri vous donne tout ce que vous avez demandé. Mais .. si vous ne voulez pas vous souvenir de la commande, vous pouvez l'ajouter à votre ~ / .bashrc (ou équivalent):

csview()
{
local file="$1"
sed "s/,/\t/g" "$file" | less -S
}

C'est exactement la même chose que la réponse d'Ofri, sauf que je l'ai enveloppé dans une fonction shell et j'utilise l' less -Soption pour arrêter le wrapping des lignes (fait lessse comporter plus comme un bureau / oocalc).

Ouvrez un nouveau shell (ou tapez source ~/.bashrcvotre shell actuel) et exécutez la commande en utilisant:

csview <filename>

J'ai utilisé la réponse de pisswillis pendant longtemps.

csview()
{
    local file="$1"
    sed "s/,/\t/g" "$file" | less -S
}

Mais j'ai ensuite combiné du code que j'ai trouvé sur http://chrisjean.com/2011/06/17/view-csv-data-from-the-command-line qui fonctionne mieux pour moi:

csview()
{
    local file="$1"
    cat "$file" | sed -e 's/,,/, ,/g' | column -s, -t | less -#5 -N -S
}

La raison pour laquelle cela fonctionne mieux pour moi est qu'il gère mieux les colonnes larges.

tbllessdans le package Tabulator encapsule la columncommande unix et aligne également les colonnes numériques.

Voici une option (probablement trop) simple:

sed "s/,/\t/g" filename.csv | less

Encore un autre outil de manipulation CSV multifonctionnel (et pas seulement): Miller . D'après sa propre description, c'est comme awk, sed, cut, join et tri pour les données indexées comme CSV, TSV et JSON tabulaire. (lien vers le référentiel github: https://github.com/johnkerl/miller )

J'ai écrit ce csv_view.sh pour formater les CSV à partir de la ligne de commande, cela lit le fichier entier pour déterminer la largeur optimale de chaque colonne (nécessite perl, suppose qu'il n'y a pas de virgule dans les champs, utilise également moins):

#!/bin/bash

perl -we '
  sub max( @ ) {
    my $max = shift;

    map { $max = $_ if $_ > $max } @_;
    return $max;
  }

  sub transpose( @ ) {
    my @matrix = @_;
    my $width  = scalar @{ $matrix[ 0 ] };
    my $height = scalar @matrix;

    return map { my $x = $_; [ map { $matrix[ $_ ][ $x ] } 0 .. $height - 1 ] } 0 .. $width - 1;
  }

  # Read all lines, as arrays of fields
  my @lines = map { s/\r?\n$//; [ split /,/ ] } ;

  my $widths =
    # Build a pack expression based on column lengths
    join "",

    # For each column get the longest length plus 1
    map { 'A' . ( 1 + max map { length } @$_ ) }

    # Get arrays of columns
    transpose

    @lines
  ;

  # Format all lines with pack
  map { print pack( $widths, @$_ ) . "\n" } @lines;
' $1 | less -NS

En utilisant TxtSushi, vous pouvez faire:

csvtopretty filename.csv | less -S

Tabview est vraiment bon. Travaillé avec 200 + fichiers MB qui s'affichaient bien qui étaient bogués avec LibreOffice ainsi que le plugin csv dans gvim.

La version Anaconda est disponible ici: https://anaconda.org/bioconda/tabview

J'ai créé un tableau à ces fins (et à d'autres). Installer avec

[sudo -H] pip3 install tablign

et

$ cat test.csv
Header1,Header2,Header3
Pizza,Artichoke dip,Bob's Special of the Day
BLT,Ham on rye with the works,

$ tablign test.csv
Header1 , Header2                   , Header3
Pizza   , Artichoke dip             , Bob's Special of the Day
BLT     , Ham on rye with the works ,

Fonctionne également si les données sont séparées par autre chose que des virgules. Plus important encore, il conserve les délimiteurs afin que vous puissiez également l'utiliser pour styliser vos tables ASCII sans sacrifier votre syntaxe [Markdown, CSV, LaTeX].

J'ai écrit un script, viewtab , dans Groovy dans ce but. Vous l'invoquez comme:

viewtab filename.csv

Il s'agit essentiellement d'une feuille de calcul ultra-légère qui peut être invoquée à partir de la ligne de commande, gère les fichiers CSV et séparés par des tabulations, peut lire de très gros fichiers sur lesquels Excel et Numbers s'étouffent et est très rapide. Ce n'est pas une ligne de commande dans le sens d'être uniquement textuel, mais il est indépendant de la plate-forme et conviendra probablement à la plupart des personnes à la recherche d'une solution au problème de l'inspection rapide de nombreux ou de gros fichiers CSV tout en travaillant dans un environnement de ligne de commande .

Le script et comment l'installer sont décrits ici:

http://bayesianconspiracy.blogspot.com/2012/06/quick-csvtab-file-viewer.html

Il y a ce court script de ligne de commande en python: https://github.com/rgrp/csv2ascii/blob/master/csv2ascii.py

Il suffit de télécharger et de placer sur votre chemin. L'utilisation est comme

csv2ascii.py [options] csv-file-path

Convertissez le fichier csv à csv-file-pathen forme ascii en retournant le résultat sur stdout. Si csv-file-path= '-' alors lisez depuis stdin.

Options:

  -h, --help afficher ce message d'aide et quitter
  -w LARGEUR, --largeur = LARGEUR
                        Largeur de sortie ascii
  -c COLONNES, --colonnes = COLONNES
                        N'afficher que ce nombre de colonnes