Usuń zduplikowane wiadomości z Maildir

Mam kilka zduplikowanych wiadomości w Maildir mojego serwera IMAP. Jaki jest najlepszy sposób na ich usunięcie?

Niektóre istotne punkty:

• Współdzielony identyfikator wiadomości jest zwykle wystarczającą definicją duplikatu. Mały skrypt, który usuwa wszystkie zduplikowane wiadomości oprócz jednego, działałby.
• Czasami konieczne jest znalezienie duplikatów na podstawie udostępnionych treści wiadomości. Jaka jest rozsądna definicja udostępnionego tutaj? Odpowiednik bitowy? Co z dziwnymi różnicami w zawijaniu wiersza, ucieczce, kodowaniu znaków?
• Czasami istnieje pewna znacząca różnica między „zduplikowanymi” wiadomościami. Jaki jest najlepszy sposób na sprawdzenie różnic w zestawach „zduplikowanych” wiadomości? Różnice?

Wprowadziłem kilka znaczących ulepszeń w skrypcie Kevina wspomnianym powyżej, a on był na tyle uprzejmy, aby zaakceptować moje prośby ściągnięcia. Ostatecznie podzieliliśmy to na dedykowany projekt, który można znaleźć tutaj:

https://github.com/kdeldycke/maildir-deduplicate

dla plików ogólnych w systemie Linux używam narzędzi fdupes do usuwania duplikatów plików. Odkryłem, że działa również w przypadku wiadomości Maildir.

Gnome's Evolution [graficzny agent użytkownika poczty] ma wbudowaną funkcję usuwania zduplikowanych wiadomości. Jak wyjaśniono na tej stronie pomocy , sprowadza się do:

1. Wybierz podejrzane wiadomości (lub tylko wszystkie wiadomości)
2. Przejdź do menu Wiadomości , wybierz Usuń zduplikowane wiadomości .

Voilà.

PS Evolution może uzyskiwać dostęp do wiadomości lokalnie (MailDir, MH, Mbox) lub przez IMAP.

Najlepsze, co dzisiaj znalazłem, to deduplikat maildir Kevina Deldyckego .

• X-MIMETrackDomyślnie ignoruje nagłówek i porównuje nagłówki za pomocą SHA224skrótu.
• Automatycznie usuwa duplikaty bez pytania o potwierdzenie; istnieje jednak tryb próbny, który umożliwia podgląd duplikatów, które zostaną usunięte.

Założę się, że ktoś może wymyślić coś fantazyjnego z delIMAPdups.pl Ricka Sandersa , który jest częścią jego narzędzi IMAP .