Usuń duplikaty wierszy
Wklej listę z jednym elementem w wierszu, a każdy powtarzający się wiersz zostanie usunięty na bieżąco, pozostawiając pierwszą kopię każdego w oryginalnej kolejności. Możesz ignorować wielkość liter, usunąć puste wiersze i zobaczyć dokładnie, które wiersze zostały usunięte. Za darmo, bez rejestracji, a tekst nigdy nie opuszcza przeglądarki.
Opcje
Jak korzystać z narzędzia do usuwania duplikatów wierszy
- Wklej listę. Jeden element w wierszu: imiona, adresy e-mail, słowa kluczowe, pozycje bibliograficzne, adresy URL lub wiersze eksportu danych.
- Ustaw opcje. Zaznacz Nierozróżnianie wielkości liter, jeśli „Apple” i „apple” mają być tym samym wierszem. Zaznacz Usuń też puste wiersze, aby usuwać także puste wiersze, a nie tylko powtórki.
- Odczytaj karty. Wszystkich wierszy, Unikalnych wierszy i Usuniętych duplikatów aktualizują się w trakcie pisania.
- Skopiuj wynik. Oczyszczony wynik zawiera listę bez duplikatów. Poniżej Usunięte duplikaty pokazuje każdy powtórzony wiersz raz (pierwsze 20, a potem liczbę pozostałych), abyś mógł sprawdzić, czy nic nie zginęło przez pomyłkę.
Jak porównywane są wiersze
Narzędzie czyta tekst od góry. Gdy po raz pierwszy napotyka wiersz, zachowuje go; każdy późniejszy pasujący wiersz jest usuwany. Lista nigdy nie zmienia kolejności — pozostałe wiersze pojawiają się w takiej sekwencji, w jakiej wystąpiły po raz pierwszy — i dlatego nazywa się to metodą pierwszego wystąpienia. Jeśli chcesz, aby wynik był także posortowany alfabetycznie, przepuść go przez Sortuj wiersze.
Dopasowanie jest dokładne, znak po znaku. Domyślnie porównanie rozróżnia wielkość liter, a wiersz różniący się tylko spacją na końcu traktowany jest jako inny wiersz. Narzędzie nie przycina spacji, więc „[email protected]” i „[email protected] ” z przypadkową spacją na końcu są zachowywane obie. Jeśli skopiowana lista ma niewidoczne spacje, najpierw wyczyść ją Usuwaniem spacji.
Przykład krok po kroku
Weź tę listę dziewięciu wierszy, która zawiera dwa puste wiersze i mieszaną wielkość liter:
Dane wejściowe
apple Banana apple banana cherry Apple banana
| Opcje | Unikalne wiersze | Usunięte | Wynik |
|---|---|---|---|
| Domyślnie (z rozróżnianiem wielkości liter) | 6 | 3 | apple, Banana, banana, (pusty wiersz), cherry, Apple |
| Bez rozróżniania wielkości liter | 4 | 5 | apple, Banana, (pusty wiersz), cherry |
| Bez rozróżniania wielkości liter + usuń puste wiersze | 3 | 4 | apple, Banana, cherry |
Zauważ, co opcja pustych wierszy robi z liczbami. Gdy jest włączona, dwa puste wiersze są usuwane przed liczeniem, więc Wszystkich wierszy spada z 9 do 7. Bez niej pusty wiersz jest zwykłym wierszem: pierwszy zostaje zachowany, a drugi usunięty jako duplikat. Zauważ też, że pozostający wiersz zachowuje własną pisownię — „Banana” zostaje tak, jak napisano, mimo że pasowało do niego „banana”.
Do czego ludzie tego używają
- Listy e-mail i kontakty. Usuń osoby, które pojawiają się dwa razy po połączeniu dwóch eksportów.
- Listy słów kluczowych i tagów. Oczyść długą listę wyrazów wyszukiwania, zanim ją zaimportujesz.
- Listy bibliograficzne. Usuń zduplikowane pozycje, gdy wkleiłeś odniesienia z kilku źródeł na jedną listę.
- Dane i logi. Wyciągnij różne wartości z jednej kolumny lub fragmentu logu.
Którego narzędzia potrzebujesz?
| Jeśli chcesz… | Użyj |
|---|---|
| Usunąć powtarzające się wiersze, zachowując kolejność | Tej strony |
| Usunąć powtarzające się słowa albo poprawić literówki „the the” | Usuwanie zduplikowanych słów |
| Każde różne słowo z tekstu jako posortowaną listę | Ekstraktor unikalnych słów |
| Elementy wspólne dwóch list albo te, które ma tylko jedna | Porównaj listy |
| Dwie listy połączone w jedną | List Merger |
| Tylko wiersze zawierające słowo lub wzorzec | Line Filter |
Najczęstsze pytania
- Jak usunąć zduplikowane wiersze z tekstu?
- Wklej tekst do pola, jeden element w wierszu. Oczyszczona lista pojawia się od razu pod Oczyszczony wynik z usuniętymi powtórkami, a możesz ją skopiować jednym kliknięciem. Nie ma żadnego przycisku do naciśnięcia.
- Czy usuwanie zduplikowanych wierszy zachowuje oryginalną kolejność?
- Tak. Gdy wiersz pojawia się po raz pierwszy, zostaje na swoim miejscu, a każdy późniejszy identyczny wiersz jest usuwany. Pozostałe wiersze zachowują kolejność pierwszego wystąpienia, więc nic nie zostaje przetasowane.
- Czy porównanie rozróżnia wielkość liter?
- Domyślnie tak, więc „Apple” i „apple” to dwa różne wiersze. Zaznacz Nierozróżnianie wielkości liter, aby traktować je jako duplikaty. Pierwszy wiersz zachowuje swoją oryginalną wielkość liter w obu przypadkach.
- Dlaczego dwa wiersze wyglądające tak samo nie są usuwane?
- Zwykle jeden ma spację na końcu, tabulator albo inną wielką literę. Dopasowanie jest dokładne, a narzędzie nie przycina wierszy, więc „element” i „element ” się różnią. Włącz Nierozróżnianie wielkości liter dla wielkich liter i oczyść przypadkowe spacje przed wklejeniem.
- Czy mogę jednocześnie usunąć puste wiersze?
- Tak, zaznacz Usuń też puste wiersze. Bez tej opcji jeden pusty wiersz zostaje, bo pierwszy pusty wiersz liczy się jako wiersz, a usuwane są tylko późniejsze puste wiersze. Przy włączonej opcji wiersz zawierający same spacje liczy się jako pusty.
- Jak zdeduplikować i posortować listę?
- Usuń duplikaty tutaj, skopiuj wynik i wklej go do Sortuj wiersze. Obie kolejności dają ten sam zbiór wierszy, ale deduplikacja najpierw zostawia mniej do sortowania.
- Czy moja lista jest gdziekolwiek przesyłana?
- Nie. Wiersze są porównywane w przeglądarce, a tekst nie jest nigdzie wysyłany ani zapisywany.