Dire que j'ai un énorme fichier texte (> 2 Go) et je veux juste catles lignes Xà Y(par exemple , de 57.890.000 à 57.890.010). D'après ce que je comprends que je peux le faire par la tuyauterie headdans tailou vice - versa, à savoir head -A /path/to/file | tail -B Ou bien tail -C /path/to/file |...
Un de mes énormes fichiers texte (jusqu’à 2 Gio) contient environ 100 doublons exacts de chaque ligne qu’il contient (inutile dans mon cas, car le fichier est une table de données de type CSV). Ce dont j'ai besoin, c’est d’éliminer toutes les répétitions (de préférence, mais cela peut être sacrifié...
J'ai un énorme (70 Go), une ligne , un fichier texte et je veux remplacer une chaîne (jeton) en elle. Je souhaite remplacer le jeton <unk>par un autre jeton factice ( problème de gant ). J'ai essayé sed: sed 's/<unk>/<raw_unk>/g' < corpus.txt > corpus.txt.new mais le fichier...
J'ai un fichier assez volumineux (35 Go), et j'aimerais filtrer ce fichier in situ (c'est-à-dire que je n'ai pas assez d'espace disque pour un autre fichier), en particulier je veux grep et ignorer certains modèles - faire cela sans utiliser un autre fichier? Disons que je veux filtrer toutes les...
J'ai deux gros fichiers (6 Go chacun). Ils ne sont pas triés, avec des sauts de ligne ( \n) comme séparateurs. Comment puis-je les différencier? Cela devrait prendre moins de
Je l'ai essayé avec SCP, mais il indique "Taille de fichier négative". >scp matlab.iso xxx@xxx:/matlab.iso matlab.iso: Negative file size A également essayé d'utiliser SFTP, a bien fonctionné jusqu'à ce que 2 Go du fichier soient transférés, puis s'est arrêté: sftp> put matlab.iso Uploading...
J'ai un fichier texte de 25 Go qui a besoin d'une chaîne remplacée sur seulement quelques lignes. Je peux l'utiliser sedavec succès, mais cela prend beaucoup de temps pour fonctionner. sed -i 's|old text|new text|g' gigantic_file.sql Existe-t-il un moyen plus rapide de
J'ai un répertoire avec environ 100000 petits fichiers (chaque fichier est de 1 à 3 lignes, chaque fichier est un fichier texte). En taille, le répertoire n'est pas très grand (<2 Go). Ces données résident dans un serveur NFS géré par des professionnels. Le serveur exécute Linux. Je pense que le...
J'ai une ext4partition de 900 Go sur un disque dur (magnétique) qui n'a aucun défaut et aucun mauvais secteur. La partition est complètement vide à l'exception d'un lost+foundrépertoire vide . La partition a été formatée en utilisant les paramètres par défaut, sauf que j'ai défini le nombre de...
J'ai quelques fichiers de taille> 1 Go chacun. J'ai besoin de supprimer les derniers octets des fichiers. Comment puis-je le faire? Je préfère modifier le fichier en place pour économiser de l'espace disque. Je suis sur
Est-il utile d'utiliser l' indicateur -T largefile pour créer un système de fichiers pour une partition avec de gros fichiers comme la vidéo et l'audio au format flac? J'ai testé la même partition avec cet indicateur et sans lui, et en utilisant tune2fs -l [partition] , j'ai vérifié dans...
Dans le même esprit que cette autre question: ligne de chat X à ligne Y sur un énorme fichier : Existe-t-il un moyen d'ouvrir depuis Emacs (et d'afficher sur un tampon) un ensemble donné de lignes (par exemple toutes les lignes entre la ligne Xet Y) à partir d'un énorme fichier texte? Par exemple,...
J'ai un fichier texte de 250 Mo, le tout sur une seule ligne. Dans ce fichier, je veux remplacer les acaractères par des bcaractères: sed -e "s/a/b/g" < one-line-250-mb.txt Il échoue avec: sed: couldn't re-allocate memory Il me semble que ce type de tâche pourrait être effectué en ligne sans...
J'ai ~ 30k fichiers. Chaque fichier contient environ 100 000 lignes. Une ligne ne contient aucun espace. Les lignes d'un fichier individuel sont triées et dupliquées gratuitement. Mon objectif: je veux trouver toutes les lignes en double dans deux fichiers ou plus, ainsi que les noms des fichiers...
J'ai besoin de voir une grande image png (50000x40000 px) sous Linux. Malheureusement, la plupart des outils (eog, convert, etc.) se bloquent ou échouent avec une note sur trop peu de mémoire. Existe-t-il un moyen de visualiser cette image (je préférerais voir à la fois l'image redimensionnée et...
J'ai environ 2 millions (60 Go) de petits fichiers compressés et je voudrais créer une archive compressée les contenant tous dans une version non compressée. Malheureusement, je ne peux pas tous les décompresser, puis créer l'archive compressée car je n'ai que 70 Go d'espace disque libre. En...
/opt/freeware/bin/ls //media/nfs/slack64/pubblica /opt/freeware/bin/ls: cannot open directory //media/nfs/slack64/pubblica: Value too large to be stored in data type Cela arrive avec coreutils-8.23 de perlz et avec 8.24 recompilé sur aix. Le fs est nfs. Comment résoudre? C'est la spec de coreutils...