Jak mogę usunąć zduplikowane wiersze w programie Visual Studio Code?

Powiedzmy, że masz następujący tekst:

abc
123
abc
456
789
abc
abc

Chcę usunąć wszystkie wiersze „abc” i po prostu zachować jedną. Nie mam nic przeciwko sortowaniu. Wynik powinien wyglądać następująco:

abc
123
456
789

Jeśli kolejność wierszy nie jest ważna

Sortuj wiersze alfabetycznie, jeśli jeszcze nie są, i wykonaj następujące kroki:
_{(na podstawie tego pokrewnego pytania: Jak znaleźć i usunąć zduplikowane wiersze z pliku za pomocą wyrażeń regularnych? )}

1. Control+F

2. Przełącz „tryb zastępowania”

3. Przełącz „Użyj wyrażenia regularnego” (ikona z .*symbolem)

4. W polu wyszukiwania wpisz^(.*)(\n\1)+$

5. W polu „ zamień na ” wpisz$1

6. Kliknij („Zamień wszystko”).

Jeśli kolejność wierszy jest ważna, więc nie możesz sortować

W takim przypadku skorzystaj z rozwiązania innego niż VS Code (patrz tutaj ) lub - jeśli twój dokument nie jest bardzo duży i nie masz nic przeciwko spamowaniu przycisku Zamień wszystko - wykonaj poprzednie kroki, ale w krokach 4 i 5, wprowadź te:
_{(na podstawie opcji Usuń określone zduplikowane linie bez sortowania )}

Uwaga: blokuje pliki ze zbyt dużą liczbą wierszy (1000+); może spowodować awarię VS Code; może w niektórych przypadkach wprowadzić puste wiersze.

• szukaj :((^[^\S$]*?(?=\S)(?:.*)+$)[\S\s]*?)^\2$(?:\n)?

• zastąpić :$1

a następnie kliknij przycisk „Zamień wszystko” tyle razy, ile wystąpi duplikat .

Dowiesz się, że wystarczy, gdy liczba linii przestanie maleć po kliknięciu przycisku. Przejdź do ostatniego wiersza dokumentu, aby mieć na to oko.

Oto bardzo ciekawe rozszerzenie: Transformer

Cechy:

• Unikalne linie
• Unikalne linie jako nowy dokument
• Filtruj linie
• Filtruj wiersze jako nowy dokument
• Sortuj linie
• Sortuj linie według długości
• Wyrównaj do kursora
• Wyrównaj CSV
• Kompaktowy CSV
• Kopiuj do nowego dokumentu
• Wybierz linie
• Linie jako JSON
• Linie przycinania
• Policz zduplikowane wiersze jako nowy dokument
• Makra

Aby usunąć zduplikowane linie:

• Usuwa zduplikowane wiersze z dokumentu

• Działa na zaznaczeniu lub bieżącym bloku, jeśli brak wyboru

Nie bawiłem się nim zbyt wiele poza poleceniem „Unikalne linie”, ale wydaje się całkiem niezłe (włączając w to próbę zarejestrowania makr!).

Aby dodać do odpowiedzi @ Marc.2377.

Jeśli kolejność jest ważna i nie obchodzi Cię, że po prostu zachowujesz ostatni ze zduplikowanych wierszy, po prostu wyszukaj następujące wyrażenie regularne, jeśli chcesz usunąć tylko zduplikowane niepuste wiersze

^(.+\n)(?=(?:.*\n)*?\1)

Jeśli chcesz również usunąć zduplikowane puste wiersze, użyj *zamiast+

^(.*\n)(?=(?:.*\n)*?\1)

i zamień na nic.

To zajmie linię i spróbuje znaleźć więcej (może 0) linii, po których nastąpi dokładnie ta sama wybrana linia. Usunie wybraną linię.

To jest tylko jednorazowe wyrażenie regularne. Nie musisz spamować przycisku zamień.

Właśnie miałem ten sam problem i znalazłem pakiet Visual Studio Code „Sort lines”. Aby uzyskać szczegółowe informacje (np. Linie sortowania ), zobacz rynek Visual Studio Code .

Ten pakiet ma opcję "Sorting lines (unique)", która zrobiła to za mnie. Uważaj na spacje na początku / końcu linii. Wpływają na to, czy linie są uważane za wyjątkowe, czy nie.

Zainstaluj rozszerzenie DupChecker , naciśnij F1i wpisz „Sprawdź duplikaty”.

Sprawdza duplikaty i zapyta, czy chcesz je usunąć.

Spróbuj znaleźć i zamienić na wyrażenie regularne .

• Odnaleźć: ^(.+)((?:\r?\n.*)*)(?:\r?\n\1)$

• Zastąpić: $1$2

W pierwszej grupie można wprowadzić pewną wariancję.

Właściwie nie w Visual Studio Code, ale jeśli działa, to działa.

1. Otwórz nowy arkusz kalkulacyjny Excel
2. Wklej dane do kolumny
3. Przejdź do zakładki Dane
4. Wybierz kolumnę danych (jeśli jeszcze tego nie zrobiłeś)
5. Kliknij opcję Usuń duplikaty (nieco na środku paska)
6. Kliknij, OKaby usunąć duplikaty.

To nie jest najlepsza odpowiedź, tak jak określiłeś Visual Studio Code, ale tak jak powiedziałem: jeśli działa, to działa :)