Jak mogę wykonać operację „kopiuj, jeśli zmieniono”?

Chciałbym skopiować zestaw plików z katalogu A do katalogu B, z zastrzeżeniem, że jeśli plik w katalogu A jest identyczny z plikiem w katalogu B, plik ten nie powinien być kopiowany (a zatem jego czas modyfikacji nie powinien być zaktualizowane). Czy można to zrobić za pomocą istniejących narzędzi, bez pisania własnego skryptu?

Aby nieco rozwinąć mój przypadek użycia: automatycznie generuję kilka .cplików w katalogu tymczasowym (metodą, która musi bezwarunkowo wygenerować je wszystkie), a kiedy je ponownie generuję, chciałbym tylko skopiować te, które zmieniły się w rzeczywisty katalog źródłowy, pozostawiając te niezmienione bez zmian (ze starymi czasami tworzenia), aby makewiedzieć, że nie trzeba ich ponownie kompilować. ( .cJednak nie wszystkie generowane pliki są plikami, więc muszę porównywać binarnie, a nie porównywać tekst).

(Uwaga: wynikało to z pytania, które zadałem na https://stackoverflow.com/questions/8981552/speeding-up-file-comparions-with-cmp-on-cygwin/8981762#8981762 , gdzie próbowałem aby przyspieszyć plik skryptu, którego używałem do wykonania tej operacji, ale przychodzi mi do głowy, że naprawdę powinienem zapytać, czy istnieje lepszy sposób na zrobienie tego niż pisanie własnego skryptu - zwłaszcza, że ​​jakikolwiek prosty sposób to zrobić w powłoce skrypt wywoła coś podobnego cmpdo każdej pary plików, a uruchomienie wszystkich tych procesów trwa zbyt długo).

rsync jest prawdopodobnie najlepszym narzędziem do tego. Polecenie zawiera wiele opcji, więc przeczytaj stronę podręcznika . Myślę, że chcesz opcję --checksum lub --ignore-times

Możesz użyć -uprzełącznika, aby cp:

$ cp -u [source] [destination]

Ze strony podręcznika:

   -u, --update
       copy only when the SOURCE file is newer than the destination file or 
       when the destination file is missing

Chociaż używanie rsync --checksumto dobry ogólny sposób na „skopiowanie, jeśli zmieniono”, w twoim przypadku istnieje jeszcze lepsze rozwiązanie!

Jeśli chcesz uniknąć niepotrzebnej ponownej kompilacji plików, powinieneś użyć ccache, który został zbudowany właśnie w tym celu! W rzeczywistości nie tylko pozwoli uniknąć niepotrzebnych make cleanponownych kompilacji automatycznie generowanych plików, ale także przyspieszy wszystko, gdy to zrobisz, i ponownie skompiluje od zera.

Następnie jestem pewien, że zapytasz: „Czy to jest bezpieczne?” Tak, jak wskazuje strona internetowa:

Czy to jest bezpieczne?

Tak. Najważniejszym aspektem pamięci podręcznej kompilatora jest zawsze wytwarzanie dokładnie takich samych danych wyjściowych, jakie dałby prawdziwy kompilator. Obejmuje to dostarczenie dokładnie tych samych plików obiektowych i dokładnie takich samych ostrzeżeń kompilatora, które zostałyby wygenerowane, jeśli użyjesz prawdziwego kompilatora. Jedynym sposobem, w jaki powinieneś być w stanie stwierdzić, że korzystasz z ccache, jest szybkość.

I łatwo go użyć , po prostu dodając go jako przedrostek w CC=linii twojego makefile (lub możesz użyć dowiązań symbolicznych, ale sposób makefile jest prawdopodobnie lepszy).

To powinno zrobić to, czego potrzebujesz

diff -qr ./x ./y | awk '{print $2}' | xargs -n1 -J% cp % ./y/

Gdzie:

• x to twój zaktualizowany / nowy folder
• y jest miejscem docelowym, do którego chcesz skopiować
• awk weźmie drugi argument każdej linii z polecenia diff (być może będziesz potrzebować dodatkowych rzeczy dla nazw plików ze spacją - nie możesz tego teraz wypróbować)
• xargs -J% wstawi nazwę pliku do cp w odpowiednim miejscu

Lubię używać unison na rzecz, rsyncponieważ obsługuje wielu mistrzów, ponieważ już skonfigurowałem moje klucze ssh i VPN osobno.

Dlatego w moim crontabie tylko jednego hosta pozwalam im synchronizować co 15 minut:

* / 15 * * * * [-z "$ (pidof unison)"] && (timeout 25m unison -sortbysize -ui text -batch -times / home / master ssh: //192.168.1.12//home/master -path dev -logfile /tmp/sync.master.dev.log) &> /tmp/sync.master.dev.log

Wtedy mogę się rozwijać po obu stronach, a zmiany będą się rozprzestrzeniać. W rzeczywistości w przypadku ważnych projektów mam do 4 serwerów dublujących to samo drzewo (3 działają jednocześnie z cron, wskazując na ten, który tego nie robi). W rzeczywistości hosty Linux i Cygwin są mieszane - z wyjątkiem tego, że nie oczekuj wyczucia miękkich linków w win32 poza środowiskiem cygwin.

Jeśli pójdziesz tą drogą, zrób początkowe lustro po pustej stronie bez -batch, tj

unison -ui text  -times /home/master ssh://192.168.1.12//home/master -path dev

Oczywiście istnieje konfiguracja ignorująca pliki kopii zapasowych, archiwa itp .:

 ~/.unison/default.prf :
# Unison preferences file
ignore = Name {,.}*{.sh~}
ignore = Name {,.}*{.rb~}
ignore = Name {,.}*{.bak}
ignore = Name {,.}*{.tmp}
ignore = Name {,.}*{.txt~}
ignore = Name {,.}*{.pl~}
ignore = Name {.unison.}*
ignore = Name {,.}*{.zip}

    # Use this command for displaying diffs
    diff = diff -y -W 79 --suppress-common-lines

    ignore = Name *~
    ignore = Name .*~
    ignore = Path */pilot/backup/Archive_*
    ignore = Name *.o

Chociaż rsync --checksumjest to poprawna odpowiedź, należy pamiętać, że ta opcja jest niezgodna z --times, i --archiveobejmuje to --times, więc jeśli chcesz rsync -a --checksum, naprawdę musisz rsync -a --no-times --checksum.