Jak wykonać dowolną komendę edytując jej plik (argument) „na miejscu” za pomocą basha?

Mam plik temp.txt, który chcę posortować za pomocą sortpolecenia w bash.

Chcę, aby posortowane wyniki zastąpiły oryginalny plik.

Na przykład to nie działa (otrzymuję pusty plik):

sortx temp.txt > temp.txt

Czy można to zrobić w jednej linii bez konieczności kopiowania do plików tymczasowych?

EDYCJA: Ta -oopcja jest bardzo fajna sort. Użyłem sortw moim pytaniu przykładu. Mam ten sam problem z innymi poleceniami:

uniq temp.txt > temp.txt.

Czy istnieje lepsze rozwiązanie ogólne?

sort temp.txt -o temp.txt

A sortmusi zobaczyć wszystkie dane wejściowe, zanim będzie można rozpocząć wyprowadzanie. Z tego powodu sortprogram może łatwo oferować opcję modyfikacji pliku w miejscu:

sort temp.txt -o temp.txt

W szczególności dokumentacja GNUsort mówi:

Zwykle sort czyta wszystkie dane wejściowe przed otwarciem pliku-wyjściowego, więc możesz bezpiecznie posortować plik w miejscu, używając poleceń takich jak sort -o F Fi cat F | sort -o F. Jednak za sortpomocą --merge( -m) można otworzyć plik wyjściowy przed odczytaniem wszystkich danych wejściowych, więc polecenie takie jak cat F | sort -m -o F - Gnie jest bezpieczne, ponieważ sortowanie może rozpocząć zapisywanie Fprzed zakończeniem catodczytu.

Podczas gdy dokumentacja BSD sortmówi:

Jeśli [] plik-wyjściowy jest jednym z plików wejściowych, sort kopiuje go do pliku tymczasowego przed sortowaniem i zapisaniem wyniku do [] pliku-wyjściowego.

Polecenia, takie jak uniqmogą rozpocząć zapisywanie danych wyjściowych, zanim zakończą odczytywanie danych wejściowych. Te polecenia zazwyczaj nie obsługują edycji lokalnej (i byłoby im trudniej obsługiwać tę funkcję).

Zwykle omijasz ten problem z plikiem tymczasowym lub jeśli absolutnie chcesz uniknąć posiadania pliku pośredniego, możesz użyć bufora do przechowywania pełnego wyniku przed jego wypisaniem. Na przykład z perl:

uniq temp.txt | perl -e 'undef $/; $_ = <>; open(OUT,">temp.txt"); print OUT;'

Tutaj część perla odczytuje pełne dane wyjściowe ze uniqzmiennej, $_a następnie zastępuje oryginalny plik tymi danymi. Możesz zrobić to samo w wybranym języku skryptowym, być może nawet w Bash. Pamiętaj jednak, że będzie potrzebować wystarczającej ilości pamięci do przechowywania całego pliku, nie jest to zalecane podczas pracy z dużymi plikami.

Oto bardziej ogólne podejście, działa z uniq, sort i innymi.

{ rm file && uniq > file; } < file

Komentarz Tobu na temat gąbki gwarantuje, że jest odpowiedzią samą w sobie.

Cytat ze strony głównej moreutils :

Prawdopodobnie najbardziej uniwersalnym narzędziem do tej pory w moreutils jest sponge (1), który pozwala robić takie rzeczy:

% sed "s/root/toor/" /etc/passwd | grep -v joey | sponge /etc/passwd

Jednak spongecierpi na ten sam problem, o którym mówi tutaj Steve Jessop. Jeśli którekolwiek z poleceń w potoku spongenie powiedzie się, oryginalny plik zostanie nadpisany.

$ mistyped_command my-important-file | sponge my-important-file
mistyped-command: command not found

Ups, my-important-fileodszedł.

Proszę bardzo, jedna linia:

sort temp.txt > temp.txt.sort && mv temp.txt.sort temp.txt

Z technicznego punktu widzenia nie ma kopiowania do pliku tymczasowego, a polecenie „mv” powinno być natychmiastowe.

Podoba mi się sort file -o fileodpowiedź, ale nie chcę dwukrotnie wpisywać tej samej nazwy pliku.

Korzystanie z rozszerzenia historii BASH :

$ sort file -o !#^

po naciśnięciu przechwytuje pierwszy argument bieżącego wiersza enter.

Unikalne sortowanie na miejscu:

$ sort -u -o file !#$

przechwytuje ostatni argument w bieżącej linii.

Wielu wspominało o opcji -o . Oto część strony podręcznika.

Ze strony podręcznika:

   -o output-file
          Write output to output-file instead of to the  standard  output.
          If  output-file  is  one of the input files, sort copies it to a
          temporary file before sorting and writing the output to  output-
          file.

Byłoby to mocno ograniczone do pamięci, ale można by użyć awk do przechowywania danych pośrednich w pamięci, a następnie zapisać je z powrotem.

uniq temp.txt | awk '{line[i++] = $0}END{for(j=0;j<i;j++){print line[j]}}' > temp.txt

Alternatywa dla spongebardziej powszechnych sed:

sed -ni r<(command file) file

Działa na każdej komendzie ( sort, uniq, tac, ...) i wykorzystuje bardzo dobrze znany sedjest -iopcja (edytowanie plików w miejscu).

Ostrzeżenie: spróbuj command filenajpierw, ponieważ edycja plików na miejscu nie jest z natury bezpieczna.

Wyjaśnienie

Po pierwsze, mówisz sednie do wydrukowania (oryginalna) linii ( -nopcja ), a także z pomocą sed„s rdowodzenia i bash” s Zmiana procesu , generowany przez treść <(command file)będzie wyjście zapisywane w miejscu .

Jeszcze łatwiejsze

Możesz opakować to rozwiązanie w funkcję:

ip_cmd() { # in place command
    CMD=${1:?You must specify a command}
    FILE=${2:?You must specify a file}
    sed -ni r<("$CMD" "$FILE") "$FILE"
}

Przykład

$ cat file
d
b
c
b
a

$ ip_cmd sort file
$ cat file
a
b
b
c
d

$ ip_cmd uniq file
$ cat file
a
b
c
d

$ ip_cmd tac file
$ cat file
d
c
b
a

$ ip_cmd
bash: 1: You must specify a command
$ ip_cmd uniq
bash: 2: You must specify a file

Użyj argumentu --output=lub-o

Właśnie wypróbowałem na FreeBSD:

sort temp.txt -otemp.txt

Aby dodać tę uniqmożliwość, jakie są wady:

sort inputfile | uniq | sort -o inputfile

Przeczytać na nieinterakcyjnym edytorze ex.

Jeśli nalegasz na użycie sortprogramu, musisz użyć pliku pośredniego - nie sądzę, aby sortmiał opcję sortowania w pamięci. Każda inna sztuczka ze stdin / stdout nie powiedzie się, chyba że możesz zagwarantować, że rozmiar bufora dla standardowego wejścia sortowania jest wystarczająco duży, aby zmieścić się w całym pliku.

Edycja: wstyd mi. sort temp.txt -o temp.txtdziała doskonale.

Inne rozwiązanie:

uniq file 1<> file