jak pokazać wspólne linie (reverse diff)?

Mam serię plików tekstowych, dla których chciałbym znać wiersze wspólne, a nie różne między nimi. Unix lub Windows z linii poleceń są w porządku.

bla:

linux-vdso.so.1 =>  (0x00007fffccffe000)
libvlc.so.2 => /usr/lib/libvlc.so.2 (0x00007f0dc4b0b000)
libvlccore.so.0 => /usr/lib/libvlccore.so.0 (0x00007f0dc483f000)
libc.so.6 => /lib/libc.so.6 (0x00007f0dc44cd000)

bar:

libkdeui.so.5 => /usr/lib/libkdeui.so.5 (0x00007f716ae22000)
libkio.so.5 => /usr/lib/libkio.so.5 (0x00007f716a96d000)
linux-vdso.so.1 =>  (0x00007fffccffe000)

Tak więc, biorąc pod uwagę, że te dwa pliki powyżej danych wyjściowych pożądanego narzędzia byłyby podobne file1:line_number, file2:line_number == matching text (tylko sugestia, naprawdę nie obchodzi mnie, jaka jest składnia):

foo:1, bar:3 == linux-vdso.so.1 =>  (0x00007fffccffe000)

dzięki.

Na * nix możesz użyć comm . Odpowiedź na pytanie brzmi:

comm -1 -2 file1.sorted file2.sorted 
# where file1 and file2 are sorted and piped into *.sorted

Oto pełne wykorzystanie comm:

comm [-1] [-2] [-3 ] file1 file2
-1 Suppress the output column of lines unique to file1.
-2 Suppress the output column of lines unique to file2.
-3 Suppress the output column of lines duplicated in file1 and file2. 

Zauważ również, że ważne jest, aby posortować pliki przed użyciem comm, jak wspomniano na stronach podręcznika.

Znalazłem tę odpowiedź na pytanie wymienione jako zduplikowane . Uważam, że grep jest bardziej przyjazny dla administratora niż comm, więc jeśli chcesz tylko zestaw pasujących wierszy (przydatnych na przykład do porównywania plików CSV), po prostu użyj

grep -F -x -f file1 file2

lub uproszczona wersja fgrep

fgrep -xf file1 file2

Ponadto możesz użyć file2*do globowania i szukać linii wspólnych dla wielu plików, a nie tylko dwóch.

Inne przydatne odmiany to

• -n flaga, aby pokazać numer każdego dopasowanego wiersza
• -c aby policzyć tylko liczbę pasujących wierszy
• -vaby wyświetlić tylko te wiersze w pliku2, które się różnią (lub używają diff).

Korzystanie commjest szybsze, ale odbywa się to kosztem konieczności sortowania plików. Nie jest zbyt przydatna jako „odwrotna różnica”.

Zostałem tu wcześniej zapytany: Polecenie Unix do znalezienia linii wspólnych w dwóch plikach

Możesz także spróbować z perl ( tutaj jest kredyt )

perl -ne 'print if ($seen{$_} .= @ARGV) =~ /10$/'  file1 file2

Właśnie nauczyłem się polecenia comm z tego wątku, ale chciałem dodać coś więcej: jeśli pliki nie są posortowane i nie chcesz dotykać oryginalnych plików, możesz potokować wyjście polecenia sortowania. To pozostawia oryginalne pliki nienaruszone. Działa w bashu, nie mogę powiedzieć o innych muszlach.

comm -1 -2 <(sort file1) <(sort file2)

Można to rozszerzyć, aby porównać dane wyjściowe polecenia zamiast plików:

comm -1 -2 <(ls /dir1 | sort) <(ls /dir2 | sort)

Najłatwiej to zrobić:

awk 'NR==FNR{a[$1]++;next} a[$1] ' file1 file2

Pliki nie muszą być sortowane.

Dla informacji, stworzyłem małe narzędzie dla Windows robiące to samo, co "grep -F -x -f plik1 plik2" (ponieważ nie znalazłem nic równoważnego temu poleceniu w Windows)

Oto on: http://www.nerdzcore.com/?page=commonlines

Użycie to „CommonLines plik_wejściowy1 plik_wejściowy2 plik_wyjściowy”

Kod źródłowy jest również dostępny (GPL)

W systemie Windows można użyć skryptu Powershell z CompareObject

compare-object -IncludeEqual -ExcludeDifferent -PassThru (get-content A.txt) (get-content B.txt)> MATCHING.txt | Out-Null #Find Matching Lines

PorównajObiekt:

• IncludeEqual bez -ExcludeDifferent: wszystko
• ExcludeDifferent bez -InclueEqual: nic