Jak znaleźć i usunąć zduplikowane utwory muzyczne?

Mój problem polega na tym, że z jakiegoś powodu mam duplikaty niektórych utworów muzycznych. Jednak nie są one nazywane identycznie. Na przykład:

Muzyka / Prefuse 73 / One Word Gasting / 07. Detchibe.mp3

I

Muzyka / Prefuse 73 / One Word Extinguisher / 07 - Detchibe.mp3

Zauważ, że są to zduplikowane utwory, ale 07 * . * i 07 - oszukuje zduplikowane wyszukiwarki plików, które wyszukują na podstawie nazw plików.

Możesz użyć fdupespodobnej odpowiedzi na pytanie »Jak znaleźć i usunąć duplikaty plików« sugerowane. Podam przykład:

mkdir -p "Music/Prefuse 73/One Word Extinguisher/"
dd if=/dev/urandom of=Music/Prefuse\ 73/One\ Word\ Extinguisher/07.Detchibe.mp3 bs=1023 count=2048
  2048+0 records in
  2048+0 records out
  2095104 bytes (2.1 MB) copied, 0.379806 s, 5.5 MB/s
cp Music/Prefuse\ 73/One\ Word\ Extinguisher/07.Detchibe.mp3 Music/Prefuse\ 73/One\ Word\ Extinguisher/"07 - Detchibe.mp3"
fdupes -rd .
  [1] ./Music/Prefuse 73/One Word Extinguisher/07.Detchibe.mp3
  [2] ./Music/Prefuse 73/One Word Extinguisher/07 - Detchibe.mp3

  Set 1 of 1, preserve files [1 - 2, all]:

Najpierw utworzyłem katalog jak w twoim przykładzie. Zrobiłem plik z losowych danych i skopiowałem jego zawartość do innych plików. Po uruchomieniu fdupes -rdoprogramowanie wyszukuje dwa dokładne pliki i pyta, które z nich usunąć.

Jeśli masz dużo plików, możesz skorzystać z tej opcji -1. fdupeswydrukuje wszystkie duplikaty w jednym wierszu. Możesz je przetwarzać za pomocą xargsi innych funkcji powłoki.

Znalazłem dość prosty łańcuch poleceń. Ogromne podziękowania dla @Oli.

fdupes -rf --quiet ~/Desktop/Dupes2/ | while read i; do mv "$i" ~/Desktop/Dupes/ ; done

Kiedyś fdupesrekurencyjnie ( -r) znajdowało duplikaty, pomijając pierwszą ( -f). Bash czyta ten wiersz po wierszu przez readręce i każdą linię, mvaby przenieść wszystkie duplikaty do innego katalogu. Zwróć uwagę na użycie cudzysłowów w whilepętli do obsługi spacji i innych podejrzanych interpunkcji, fdupesktóre nie będą obsługiwane (nawet z -1/ --sameline).

W odpowiedziach na Ręcznie ustawione liczenie słuchania utworów w Banshee? , opisuje, jak uzyskać dostęp do bazy danych używanej przez banshee do zapisywania wszystkich informacji o ścieżce.

Po nawiązaniu połączenia z bazą danych, w tabeli zapytań wykonaj, wklej

select tweaked_track, count(*) from 
  (select replace(replace(replace(title, ' ', ''), '-', ''), '.', '') as tweaked_track 
   from coretracks) 
group by tweaked_track 
order by 2, 1 desc;

w polu ciągu SQL, a następnie kliknij „wykonaj zapytanie”. Spowoduje to wyświetlenie wszystkich ścieżek o tym samym tytule, ignorując spacje, myślniki i kropki. Jeśli są inne znaki, które chcesz zignorować, dodaj je do zapytania według tego samego wzoru. (IE dodaj replace(przed pierwszym istniejącym „zamień” i po ostatnim „)” w tym wierszu, dodaj , '[character you want removed]', '').

(Nie wiem, ile wiesz o sql - jeśli potrzebujesz więcej szczegółów, dodaj komentarz).

To da ci listę tytułów. Będziesz musiał sam usunąć.

Może to być lepszy sposób, ale jeśli tak, nie wiem o tym.

Gdy będziesz mieć dużą listę plików do usunięcia (z mojej metody lub z fdupesinnych, o których wspominali inni), umieść listę plików, które chcesz usunąć, w katalogu tekstowym. Upewnij się, że spełniony jest jeden z poniższych warunków:

Opcja nr 1: nazwy plików zawierają pełną ścieżkę. Na przykład plik może zawierać:

/home/doneill/music/weird_al/duped_file.mp3
/home/doneill/music/weird_al/another_dupe.mp3
/home/doneill/music/bach/baroque_dupe.mp3

Opcja nr 2: nazwy plików zawierają ścieżkę względną, a plik z listą nazw plików jest zapisywany w folderze nadrzędnym. Na przykład, jeśli lista plików została zapisana /home/doneill/music/, zawierałaby:

weird_al/duped_file.mp3
weird_al/another_dupe.mp3
bach/baroque_dupe.mp3

W obu przypadkach otwórz okno terminala i przejdź do folderu zawierającego plik, cd /home/doneill/music/na przykład z listą .

Wpisz:

for a in `cat filelist.txt`; do echo $a; done

(Zastąpienie pliku filelist.txt nazwą pliku z listą). To powinno wypluć listę wszystkich plików, które chcesz usunąć. Poświęć chwilę, aby dokładnie sprawdzić listę. Jeśli to prawda, wpisz:

for a in `cat filelist.txt`; do rm $a; done

To w zasadzie mówi komputerowi: dla każdego wiersza w pliku filelist.txtusuń plik z wymienioną nazwą.