Filtr Rsync: kopiowanie tylko jednego wzorca

Próbuję utworzyć katalog, w którym będą przechowywane wszystkie i tylko moje pliki PDF skompilowane z LaTeX. Lubię trzymać każdy projekt w osobnym folderze, wszystkie w dużym folderze o nazwie LaTeX. Więc próbowałem uruchomić:

rsync -avn *.pdf ~/LaTeX/ ~/Output/

które powinny znaleźć wszystkie pliki pdf ~/LaTeX/i przenieść je do folderu wyjściowego. To nie działa Mówi mi, że nie znaleziono dopasowań dla „ *.pdf”. Jeśli pominę ten filtr, polecenie wyświetla listę wszystkich plików we wszystkich folderach projektu w LaTeX. Jest to problem z filtrem * .pdf. Próbowałem zastąpić ~/pełną ścieżką do mojego katalogu domowego, ale to nie przyniosło efektu.

Używam zsh. Próbowałem zrobić to samo w bash, a nawet z filtrem, który wyświetlał każdy pojedynczy plik w każdym podkatalogu ... Co się tutaj dzieje?

Dlaczego rsync nie rozumie mojego filtru tylko w formacie PDF?

DOBRZE. Więc zaktualizuj: Nie, próbuję

rsync -avn --include="*/" --include="*.pdf" LaTeX/ Output/

A to daje mi całą listę plików. Chyba dlatego, że wszystko pasuje do pierwszego wzoru ...

TL, DR:

rsync -am --include='*.pdf' --include='*/' --exclude='*' ~/LaTeX/ ~/Output/

Rsync kopiuje źródło (źródła) do miejsca docelowego. Jeśli przekażesz *.pdfjako źródła, powłoka rozwija to do listy plików z .pdfrozszerzeniem w bieżącym katalogu. Nie dzieje się żadne przechodzenie rekurencyjne, ponieważ nie przekazałeś żadnego katalogu jako źródła.

Musisz więc uruchomić rsync -a ~/LaTeX/ ~/Output/, ale z filtrem, który każe rsync kopiować .pdftylko pliki. Reguły filtrowania Rsync mogą wydawać się zniechęcające podczas czytania instrukcji, ale możesz zbudować wiele przykładów za pomocą kilku prostych reguł.

• Włączenia i wyłączenia:

  • Wykluczanie plików według nazwy lub lokalizacji jest proste: --exclude=*~, --exclude=/some/relative/location(w odniesieniu do argumentu źródłowego, np Wyklucza ~/LaTeX/some/relative/location).
  • Jeśli chcesz dopasować tylko kilka plików lub lokalizacji, dołącz je, dołącz każdy katalog prowadzący do nich (na przykład za pomocą --include=*/), a następnie wyklucz resztę za pomocą --exclude='*'. To dlatego, że:
  • Wykluczenie katalogu wyklucza wszystko poniżej. Wykluczone pliki w ogóle nie będą brane pod uwagę.
  • Jeśli dołączasz katalog, nie obejmuje to automatycznie jego zawartości. W najnowszych wersjach --include='directory/***'zrobi to.
  • Do każdego pliku ma zastosowanie pierwsza reguła dopasowania (i dołączane jest wszystko, co nigdy nie jest dopasowane).

• Wzory:

  • Jeśli wzorzec nie zawiera /, odnosi się do nazwy pliku w katalogu sans.
  • Jeśli wzorzec kończy się na /, odnosi się tylko do katalogów.
  • Jeśli wzorzec zaczyna się od /, dotyczy całej ścieżki z katalogu, który został przekazany jako argument rsync.
  • *dowolny podciąg jednego komponentu katalogu (tzn. nigdy nie pasuje /); **dopasowuje dowolny podciąg ścieżki.

• Jeśli argument źródłowy kończy się na a /, jego zawartość jest kopiowana ( rsync -r a/ btworzona b/foodla każdego a/foo). W przeciwnym razie sam katalog jest kopiowany ( rsync -r a btworzy b/a).

Dlatego tutaj musimy uwzględnić *.pdf, uwzględnić katalogi zawierające je i wykluczyć wszystko inne.

rsync -a --include='*.pdf' --include='*/' --exclude='*' ~/LaTeX/ ~/Output/

Zauważ, że powoduje to skopiowanie wszystkich katalogów, nawet tych, które nie zawierają pasującego pliku lub podkatalogu zawierającego jeden. Można tego uniknąć dzięki tej --prune-empty-dirsopcji (nie jest to rozwiązanie uniwersalne, ponieważ nie można wówczas skopiować katalogu, nawet poprzez jawne dopasowanie go, ale jest to rzadkie wymaganie).

rsync -am --include='*.pdf' --include='*/' --exclude='*' ~/LaTeX/ ~/Output/

rsync -av --include="*/" --include="*.pdf" --exclude="*" ~/Latex/ ~/Output/ --dry-run

Domyślnie wszystko obejmuje, więc musisz jawnie wykluczyć wszystko po dołączeniu plików, które chcesz przenieść. Usuń --dry-run, aby faktycznie przesłać pliki.

Jeśli zaczniesz od:

--exclude '*' --include '*.pdf'

Chciwe dopasowanie wykluczy wszystko od razu.

Jeśli spróbujesz:

--include '*.pdf' --exclude '*' 

Następnie przesyłane będą tylko pliki pdf w folderze najwyższego poziomu. Nie będzie podążał za żadnymi katalogami, ponieważ są one wykluczone przez „*”.

Jeśli użyjesz wzorca podobnego *.pdf, powłoka „rozszerzy” ten wzorzec, tzn. Zastąpi wzorzec wszystkimi dopasowaniami w bieżącym katalogu. Uruchamiane polecenie (w tym przypadku rsync) nie wie o tym, że próbowałeś użyć wzorca.

W przypadku korzystania z zsh istnieje jednak proste rozwiązanie: **wzorca można użyć do rekurencyjnego dopasowywania folderów. Spróbuj tego:

rsync -avn ~/LaTeX/**/*.pdf ~/Output/

Aby rozwiązać problem, możesz użyć findpośredniej listy plików ( files_to_copy). Upewnij się, że jesteś w swoim katalogu domowym, a następnie:

find LaTeX/ -type f -a -iname "*.pdf" > files_to_copy && rsync -avn --files-from=files_to_copy ~/ ~/Output/ && rm files_to_copy

Testowane z Bash.

Sądząc po sekcji „OBEJMUJ / WYŁĄCZ ZASADY WZORU” na stronie podręcznika , sposobem na to jest

rsync -avn --include="*/" --include="*.pdf" ~/Latex/ ~/Output/

Krytyczną różnicą między tym a odpowiedzią kbrd jest --include="*/"flaga, która mówi rsync, aby poszła naprzód i skopiowała znalezione katalogi, bez względu na ich nazwę. Jest to konieczne, ponieważ rsync nie będzie się powtarzał w podkatalogu, chyba że otrzyma polecenie skopiowania tego podkatalogu.

Zauważ też, że znaki cudzysłowu uniemożliwiają powłoce próbowanie rozwinięcia wzorców do nazw plików względem bieżącego katalogu i wykonanie jednej z następujących czynności:

1. Sukces i zepsucie filtra (niezbyt prawdopodobne w środku takiej flagi, chociaż tak naprawdę nigdy nie wiadomo, kiedy ktoś utworzy plik o nazwie --include=foo.pdf...)

2. Niepowodzenie i potencjalnie generowanie błędu zamiast uruchamiania polecenia (tak jak odkryłeś, że domyślnie robi to zsh).

Co powiesz na to:

rsync -avn --include="*.pdf" ~/Latex/ ~/Output/

Oto coś, co powinno działać bez użycia find. Różnica w stosunku do już opublikowanych odpowiedzi polega na kolejności reguł filtrowania. Reguły filtrowania w komendzie rsync działają podobnie jak reguły iptable, pierwsza reguła, do której pasuje plik, jest tą, która jest używana. Ze strony podręcznika :

Gdy tworzona jest lista plików / katalogów do przesłania, rsync sprawdza kolejno każdą nazwę, która ma zostać przesłana, z listą wzorców włączania / wykluczania, a następnie uruchamiany jest pierwszy pasujący wzorzec: jeśli jest to wzorzec wykluczenia, to ten plik jest pominięty; jeśli jest to wzorzec dołączania, nazwa pliku nie jest pomijana; jeśli nie znaleziono pasującego wzorca, nazwa pliku nie jest pomijana.

Dlatego potrzebujesz następującego polecenia:

rsync -avn --include="**.pdf" --exclude="*" ~/LaTeX/ ~/Output/

Zwróć uwagę na wzorzec „**. Pdf”. Według strony podręcznika :

jeśli wzorzec zawiera / (nie licząc końcowego /) lub „**”, to jest dopasowywany do pełnej nazwy ścieżki, w tym do wiodących katalogów. Jeśli wzorzec nie zawiera znaku / lub „**”, to jest dopasowywany tylko do końcowego komponentu nazwy pliku. (Pamiętaj, że algorytm jest stosowany rekurencyjnie, więc „pełna nazwa pliku” może faktycznie być dowolną częścią ścieżki od katalogu początkowego w dół

W moim małym teście działa to rekurencyjnie w dół drzewa katalogów i wybiera tylko pliki pdf.

To jest moje preferowane rozwiązanie:

find source_dir -iname '*.jpg' -print0 |  rsync -0 -v --files-from=- . destination_dir/

findPolecenia jest łatwiejsza do zrozumienia niż włączania / wyłączania reguł rsync:-)

Jeśli chcesz skopiować tylko pliki pdf, po prostu zmień .jpgna.pdf