Instrukcja jak usunąć duplikaty przy pomocy własnego skryptu (programowanie)
https://developers.google.com/apps-script/articles/removing_duplicates
Zalety:
- nikt poza tobą i google nie ma dostępu do twoich danych.
Wady:
- skomplikowanie
Usuwanie powtórzonych adresów email (dodatek)
Wersja prostsza
Zainstaluj dodatek do usuwania duplikatów.
W tym celu wybierz menu addons:

zainstaluj Remove Duplicates (from www.ablebits.com)

Aplikacja wymaga pewnych uprawnień (musisz się na nie zgodzić, by zainstalować aplikację).

Zainstalowałeś dodatek, możesz już z niego korzystać, w tym celu wybierz:
menu Add-ons > Remove Duplicates -> Find duplicates or uniques


Osobiście zaznaczyłem 'Duplicates’.
Wybierz kolumnę w której znajdują się adres email.

Można usunąć
duplikaty z automatu, albo 'pokolorować’ dzięki czemu będą bardziej widoczne.


Okazało się, że adres: mail_duplicated@starthere.pl jest powtórzony! Za pierwszym razem adres jest opisany jako „Ania”, a za drugim razem jako „Ania K”

By ułatwić porównanie pozostałych kolumn, warto posortować wpisy W tym celu staw się w drugiej kolumnie, tam gdzie masz adresy email (Wbrew temu co widać na obrazku)
Dzięki temu, łatwiej będzie Ci porównać dodatkowe pola. I być może znaleźć kolejne duplikaty choć adres email jest inny (zobacz GMAIL – ciekawostki)

Walidacja
Możesz chcesz sprawdzić czy adresy email są prawidłowe (Walidacja)? adres mail wygląda tak: nazwa-użytkownika@adres-serwera Walidację, można ograniczyć tylko do sprawdzenia czy jest tylko jeden znak @, czy nie ma dwóch kropek pod rząd w adresie serwera. Niewiele można sprawdzić bez komunikacji z serwerami pocztowymi klienta. Nawet sprawdzenie poprawności domeny najwyższego poziomu (np .pl .com.pl .waw.pl .com) może być kłopotliwe – sama lista dozwolonych gTLDs: https://publicsuffix.org/list/effective_tld_names.dat ma prawie 9 tysięcy linii i ciągle rośnie – new gTLDs. Adres serwera może zawierać niemal wszystkie znaki (domeny IDN – międzynarodowe). Jeśli chcesz sprawdzić czy wszystkie maile zawierają znak '@’, to zrób tak: Wpisz maile

Zaznacz pola z adresem email

albo całą kolumnę (kliknij na nazwę kolumny – w tym przypadku na „B”)

Wybierz: menu Data -> Validation

Wybierz walidację tekstu, i zaznacz wymaganie znaku @

Adresy mail bez znaku '@’ są bardziej widoczne.
