Jak najlepiej porównać ogromne drzewa katalogów

Jak mogę porównać drzewa katalogów o dużych rozmiarach?

Myślę, że darmowe narzędzie do tworzenia migawki struktury systemu plików (lista plików i katalogów, ich rozmiar i znaczniki czasu) byłoby idealne, więc mogłem porównać migawkę z inną zrobioną później.

Treecomp byłby do tego świetny, ale z ogromnym drzewem (mam na myśli naprawdę ogromne!) Ulega awarii, ponieważ próbuje utrzymać go w pamięci (4 GB pamięci nie wystarcza) ...

Obejrzałem ten problem, dzieląc migawki na części i porównując je. Ale to nużące, a problem można z pewnością rozwiązać lepiej.

Czy istnieje inne bezpłatne (najlepsze również oprogramowanie typu open source), które mogę wypróbować? Czy jest jakiś inny sposób, aby to zrobić, czego nie widzę?

System operacyjny może być Linux lub Windows.

Postaram się nieco rozwinąć, jak to zrobić w Total Commander (mam nadzieję, że zrozumiałem, co chcesz zrobić).

• zainstaluj wtyczkę modułu DiskDir (umieszczam bezpośredni link do wtyczki, jeśli wolisz, możesz przejść do strony wtyczek i poszukać wtyczki DiskDir
• po zainstalowaniu wtyczki „spakuj” katalog, w którym chcesz śledzić zmiany za pomocą Alt + F5 i wybierz „lst” z rozwijanej listy w części Packer okna dialogowego; stworzy to „pakiet”, do którego można wejść naciskając klawisz enter, tak jak gdybyś wszedł do katalogu i wyświetlił pełną zawartość katalogu
• porównując wyniki, przejdź do oryginalnego katalogu w lewym okienku i wprowadź żądaną migawkę w prawym okienku
• użyj funkcji „Synchronize Dirs”, znajdującej się w menu Command
• w oknie Synchronizuj katalogi odznacz porównanie według zawartości, zaznacz Subdirs i Ignore date (lub nie, jeśli zmiana daty jest ważna) i uruchom porównanie
• okno pokaże pliki, które są równe (w tym przypadku nie według zawartości, tylko według rozmiaru), pliki, które są różne i pliki brakuje po lewej / prawej stronie

Ponieważ migawka jest zwykłym plikiem tekstowym i nie porównujesz zawartości, powinna być szybka, ale nigdy nie użyłem jej do naprawdę dużego katalogu.

Jest to przydatne, jeśli nie tworzysz kopii zapasowych, a chcesz jedynie zrobić migawkę zawartości katalogu w pewnym momencie. Jeśli wykonujesz kopie zapasowe, możesz użyć tego samego narzędzia (Synchronizacja katalogów), aby porównać również zawartość.

Istnieje również rozszerzona wersja wtyczki DiskDir, link do pobrania znajduje się w pierwszym poście. Ta wersja umożliwia wyświetlanie pakietów (takich jak zip, 7z ...) jako katalogów w migawce. Wydłużyłoby to oczywiście czas na zrobienie migawki.

możesz po prostu użyć w terminalu

du -a

Spowoduje to zwrócenie wszystkich plików we wszystkich podfolderach, w tym także tych rozmiarów, a następnie porównanie plików

Aby zapisać dane w pliku tekstowym

du -a > dump.txt

Następnie możesz po prostu użyć czegoś takiego jak diff do porównania plików

Dotyczy to systemu Linux: D

Wcześniej używałem skrótów i różnic MD5 do porównywania drzew. Jest wolny, ale znajdzie zmienione pliki w przypadkach, w których daty nie są wiarygodne. Jest również przenośny, dzięki czemu można przesyłać indeks zamiast porównywać pliki przez sieć.

find /path/to/check -type f | xargs md5sum > after.txt

diff before.txt after.txt > diffs.txt

Możesz po prostu użyć wiersza polecenia, aby zrzucić listę:

DIR /S >Listing1.txt

(jeśli chcesz, możesz dostroić opcje, ale ta podstawowa składnia jest prawdopodobnie wystarczająca)

Aby porównać te dwie listy, użyj dowolnego narzędzia do porównywania plików, takiego jak WinDiff lub CompareIt itp. WikiPedia ma listę takich narzędzi tutaj: http://en.wikipedia.org/wiki/Comparison_of_file_comparison_tools

Tydzień temu zrób pierwszą migawkę:

rsync --archive /the/source/ /var/snapshot1/

Teraz weź drugą migawkę:

rsync --archive /the/source/ /var/snapshot2/

I porównaj je:

rsync --archive --list-only /var/snapshot1/ /var/snapshot2/

Właśnie tego używam do porównywania naprawdę dużych drzew katalogów:

rsync --archive --dry-run --verbose /src/directory/ /dst/directory/

Zrobiłem to w Total Commander, używając funkcji synchronizacji katalogu. 1,2 TB danych na dwóch dyskach.

Freecommander ma opcję porównania dwóch różnych folderów.

Możesz także spróbować:

Drukarka katalogów Karen

Drukarka katalogów Karen może wydrukować nazwę każdego pliku na dysku, wraz z rozmiarem pliku, datą i godziną ostatniej modyfikacji oraz atrybutami (tylko do odczytu, ukryty, system i archiwum)! Teraz listę plików można posortować według nazwy, rozmiaru, daty utworzenia, daty ostatniej modyfikacji lub daty ostatniego dostępu.

Generator listy plików

FLG to darmowy generator list plików. Przeszukuje drzewo katalogów w poszukiwaniu plików o wymaganych kryteriach i tworzy listę w formacie HTML.

Czy próbowałeś Back In Time ?

Jest to narzędzie GNU / Linux, które tworzy migawkę systemu plików za pomocą twardych łączy lub fizycznych kopii plików i katalogów.

Jest bardzo konfigurowalny i ma części demona i GUI, które działają osobno.

Próbowałeś połączyć ? Nie mam pojęcia, czy nadaje się do dużych drzew, ale zawsze możesz spróbować :)

Meld to wizualne narzędzie do porównywania i scalania przeznaczone dla programistów. Meld pomaga porównywać pliki, katalogi i projekty z kontrolą wersji. Zapewnia dwukierunkowe i trzykrotne porównanie plików i katalogów oraz obsługuje wiele popularnych systemów kontroli wersji.

Meld pomaga przeglądać zmiany w kodzie i rozumieć łatki. Może nawet pomóc ci dowiedzieć się, co się dzieje podczas łączenia, którego ciągle unikasz.

Możesz sprawdzić Beyond Compare .

Nie jest bezpłatny, ale możesz go przetestować przez 30 dni (dni robocze, a nie dni po instalacji). Być może to wystarczy czasu na wykonanie zadania.