Automatyczne dzielenie plików na (rekurencyjny) katalog z dowolną liczbą plików na (pod) folder / foldery na nadrzędny folder
Najłatwiejszym i najskuteczniejszym sposobem IMHO jest reorganizacja plików w folderach, w razie potrzeby nawet na różnych poziomach poziomów katalogów. To sprawi, że twoje pliki będą można przeglądać bez zadławienia nautilusa.
Poniższy skrypt zrobi to za Ciebie. Stworzy foldery z dowolną liczbą plików. Foldery te zostaną zorganizowane w podfoldery, jeśli przekroczą (tę samą) dowolną liczbę itp. Innymi słowy; każdy (pod) poziom będzie miał taką samą maksymalną liczbę plików / podkatalogów, co ułatwi przeglądanie.
Każdy z utworzonych folderów pokazuje numer folderu + liczbę utworzonych podpoziomów (gdzie np. 22_1 zawiera tylko pliki):
Test
Przetestowałem w katalogu zawierającym 300 000 plików, które zostały zreorganizowane w kawałki (maks.) 100 plików, aby były uporządkowane w doskonałych katalogach (maks.) 100 folderów itp.
Zajęło to mniej niż minutę w moim systemie. Test 100 000 plików na mniejsze fragmenty zajął kilka sekund.
Scenariusz
#!/usr/bin/env python3
import subprocess
import os
import shutil
#--- set the directory to reorganize below
dr = "/path/to/directory"
#--- set the number of files/folders per level
size = 100
level = 0
def move(fn, drn, level):
folder = dr+"/"+str(drn)+"_"+str(level)
if not os.path.exists(folder):
os.mkdir(folder)
shutil.move(dr+"/"+f, folder+"/"+f)
while len(os.listdir(dr)) > size:
level += 1
fn = 0; drn = 1
for f in os.listdir(dr):
if fn < size:
move(fn, drn, level)
else:
fn = 0
drn += 1
move(fn, drn, level)
fn += 1
Jak używać
- Skopiuj skrypt do pustego folderu i zapisz go jako
reorganize.py
- W sekcji nagłówka ustaw ścieżkę do katalogu, żądaną liczbę plików w podkatalogu (= równą folderom w katalogu zawierającym).
Uruchom go za pomocą polecenia:
python3 /path/to/reorganize.py
Uwaga
Skrypt (tak jak jest) po prostu tworzy strukturę katalogów, w której każdy poziom ma określoną liczbę plików / folderów. Nie bierze pod uwagę żadnej organizacji według nazwy, daty ani żadnej innej.
EDYTOWAĆ
Zgodnie z prośbą w komentarzu, skrypt do przeniesienia plików z powrotem do jednego płaskiego katalogu po przetworzeniu plików.
Użycie jest prawie takie samo. Jako katalog ustaw ten sam katalog co pierwszy skrypt, ale wydaje się to oczywiste.
#!/usr/bin/env python3
import shutil
import os
#--- set the directory, the same as the first script
dr = "/path/to/directory"
#---
# move the files back
for root, dirs, files in os.walk(dr):
for file in files:
shutil.move(root+"/"+file, dr+"/"+file)
# remove the (now empty) subdirectories
for d in os.listdir(dr):
folder = dr+"/"+d
if os.path.isdir(folder):
shutil.rmtree(folder)
Uwaga
Jak wspomniano w komentarzu, skrypt zakłada, że nie ma ryzyka kolizji nazw, ponieważ wszystkie pliki początkowo pochodziły z tego samego (płaskiego) katalogu.