Filtre Rsync: copier un seul motif

J'essaie de créer un répertoire qui contiendra tous et uniquement mes PDF compilés à partir de LaTeX. J'aime garder chaque projet dans un dossier séparé, le tout logé dans un grand dossier appelé LaTeX. Alors j'ai essayé de courir:

rsync -avn *.pdf ~/LaTeX/ ~/Output/

qui devrait trouver tous les fichiers PDF ~/LaTeX/et les transférer dans le dossier de sortie. Ça ne marche pas. Il me dit qu'il n'a trouvé aucune correspondance pour " *.pdf". Si je laisse ce filtre de côté, la commande répertorie tous les fichiers de tous les dossiers du projet sous LaTeX. C'est donc un problème avec le filtre * .pdf. J'ai essayé de remplacer ~/par le chemin complet de mon répertoire personnel, mais cela n'a pas eu d'effet.

Je suis en utilisant zsh. J'ai essayé de faire la même chose en bash et même avec le filtre qui répertorie chaque fichier dans chaque sous-répertoire ... Qu'est-ce qui se passe ici?

Pourquoi rsync ne comprend-il pas mon filtre PDF uniquement?

D'ACCORD. Donc mise à jour: Non j'essaie

rsync -avn --include="*/" --include="*.pdf" LaTeX/ Output/

Et cela me donne la liste complète des fichiers. Je suppose que tout correspond au premier motif ...

TL, DR:

rsync -am --include='*.pdf' --include='*/' --exclude='*' ~/LaTeX/ ~/Output/

Rsync copie la ou les sources vers la destination. Si vous passez en *.pdftant que sources, le shell étend cette liste à la liste des fichiers portant l' .pdfextension dans le répertoire en cours. Aucune traversée récursive ne se produit car vous n'avez passé aucun répertoire en tant que source.

Vous devez donc exécuter rsync -a ~/LaTeX/ ~/Output/, mais avec un filtre, indiquer à rsync de ne copier .pdfque les fichiers. Les règles de filtrage de Rsync peuvent sembler décourageantes lorsque vous lisez le manuel, mais vous pouvez construire de nombreux exemples avec quelques règles simples.

• Inclusions et exclusions:

  • Exclusion de fichiers par nom ou par emplacement est facile: --exclude=*~, --exclude=/some/relative/location( par rapport à l'argument source, par exemple ceci exclut ~/LaTeX/some/relative/location).
  • Si vous souhaitez uniquement faire correspondre quelques fichiers ou emplacements, incluez-les, incluez tous les répertoires qui y mènent (par exemple avec --include=*/), puis excluez le reste avec --exclude='*'. Ceci est dû au fait:
  • Si vous excluez un répertoire, cela exclut tout ce qui se trouve en dessous. Les fichiers exclus ne seront pas pris en compte du tout.
  • Si vous incluez un répertoire, cela n'inclut pas automatiquement son contenu. Dans les versions récentes, --include='directory/***'nous le ferons.
  • Pour chaque fichier, la première règle de correspondance s'applique (et tout ce qui ne correspond jamais est inclus).

• Les motifs:

  • Si un modèle ne contient pas de /, il s'applique au nom de fichier sans répertoire.
  • Si un modèle se termine par /, il s’applique uniquement aux répertoires.
  • Si un modèle commence par /, il s'applique à tout le chemin du répertoire passé en argument rsync.
  • *toute sous-chaîne d'un seul composant de répertoire (c'est-à-dire qu'elle ne correspond jamais /); **correspond à n'importe quelle sous-chaîne de chemin.

• Si un argument source se termine par un /, son contenu est copié ( rsync -r a/ bcrée b/foopour chaque a/foo). Sinon, le répertoire lui-même est copié ( rsync -r a bcrée b/a).

Nous devons donc inclure *.pdf, inclure les répertoires les contenant et exclure tout le reste.

rsync -a --include='*.pdf' --include='*/' --exclude='*' ~/LaTeX/ ~/Output/

Notez que cela copie tous les répertoires, même ceux qui ne contiennent aucun fichier ou sous-répertoire correspondant. Cela peut être évité avec l' --prune-empty-dirsoption (ce n'est pas une solution universelle car vous ne pouvez pas copier un répertoire même en le faisant correspondre explicitement, mais c'est une exigence rare).

rsync -am --include='*.pdf' --include='*/' --exclude='*' ~/LaTeX/ ~/Output/

rsync -av --include="*/" --include="*.pdf" --exclude="*" ~/Latex/ ~/Output/ --dry-run

La valeur par défaut consiste à tout inclure. Vous devez donc explicitement tout exclure après avoir inclus les fichiers que vous souhaitez transférer. Supprimez le --dry-run pour transférer les fichiers.

Si vous commencez avec:

--exclude '*' --include '*.pdf'

Ensuite, la correspondance gourmande exclura tout de suite.

Si tu essayes:

--include '*.pdf' --exclude '*' 

Ensuite, seuls les fichiers pdf du dossier de niveau supérieur seront transférés. Il ne suivra aucun répertoire, car ceux-ci sont exclus par '*'.

Si vous utilisez un modèle tel que *.pdf, le shell "développe" ce modèle, c'est-à-dire qu'il remplace le modèle par toutes les correspondances du répertoire en cours. La commande que vous exécutez (dans ce cas, rsync) ignore que vous avez essayé d'utiliser un modèle.

Lorsque vous utilisez zsh , il existe une solution simple: Le **modèle peut être utilisé pour faire correspondre les dossiers de manière récursive. Essaye ça:

rsync -avn ~/LaTeX/**/*.pdf ~/Output/

Vous pouvez utiliser findune liste intermédiaire de fichiers ( files_to_copy) pour résoudre votre problème. Assurez-vous que vous êtes dans votre répertoire personnel, puis:

find LaTeX/ -type f -a -iname "*.pdf" > files_to_copy && rsync -avn --files-from=files_to_copy ~/ ~/Output/ && rm files_to_copy

Testé avec Bash.

A en juger par la section "INCLUDE / EXCLUDE PATTERN RULES" de la page de manuel , la manière de procéder est la suivante:

rsync -avn --include="*/" --include="*.pdf" ~/Latex/ ~/Output/

La différence critique entre ceci et la réponse de kbrd est le --include="*/"drapeau, qui indique à rsync de continuer et de copier tous les répertoires trouvés, quel que soit leur nom. Cela est nécessaire car rsync ne recurse pas dans un sous-répertoire à moins d’avoir été invité à copier ce sous-répertoire.

Notez également que les guillemets empêchent le shell d'essayer de développer les modèles en noms de fichiers relatifs au répertoire en cours et d'effectuer l'une des opérations suivantes:

1. Réussir et gâcher votre filtre (pas très probablement au milieu d'un drapeau comme celui-ci, bien que vous ne sachiez jamais quand quelqu'un créera un fichier nommé --include=foo.pdf...)

2. Échec et éventuellement production d’une erreur au lieu d’exécuter la commande (comme vous avez découvert zsh le fait par défaut).

Que dis-tu de ça:

rsync -avn --include="*.pdf" ~/Latex/ ~/Output/

Voici quelque chose qui devrait fonctionner sans utiliser find. La différence par rapport aux réponses déjà postées correspond à l'ordre des règles de filtrage. Les règles de filtrage dans une commande rsync fonctionnent beaucoup comme les règles iptables, la première règle à laquelle un fichier correspond est celle utilisée. De la page de manuel :

Au fur et à mesure que la liste des fichiers / répertoires à transférer est construite, rsync vérifie tour à tour chaque nom à transférer avec la liste des modèles d'inclusion / exclusion, et le premier modèle correspondant est traité: s'il s'agit d'un modèle d'exclusion, alors ce fichier est sauté; s'il s'agit d'un modèle d'inclusion, le nom de fichier n'est pas ignoré; si aucun motif correspondant n'est trouvé, le nom du fichier n'est pas ignoré.

Ainsi, vous avez besoin d'une commande comme suit:

rsync -avn --include="**.pdf" --exclude="*" ~/LaTeX/ ~/Output/

Notez le motif "**. Pdf". Selon la page de manuel :

si le modèle contient un / (sans compter un /) ou un "**", il est comparé au nom de chemin complet, y compris tous les principaux répertoires. Si le modèle ne contient pas de / ou "**", il ne correspond alors qu'au dernier composant du nom du fichier. (Rappelez-vous que l'algorithme est appliqué de manière récursive afin que "nom de fichier complet" puisse en réalité être n'importe quelle partie d'un chemin du répertoire de départ

Dans mon petit test, cela fonctionne de manière récursive dans l'arborescence de répertoires et ne sélectionne que les fichiers PDF.

Ceci est ma solution préférée:

find source_dir -iname '*.jpg' -print0 |  rsync -0 -v --files-from=- . destination_dir/

La findcommande est plus facile à comprendre que les règles d'inclusion / exclusion de rsync:-)

Si vous souhaitez copier uniquement des fichiers pdf, il suffit de changer .jpgà.pdf