Program do usuwania duplikatów domen z listy

Witam

Znacie może jakiś prosty programik do usuwania duplikatów domen z listy?

Zazwyczaj robię to SB, ale przy częstych harwestech na róznych vps mało wygodne staje się przenoszenie listy tylko dla usinięcia duplikatów domen.

bedę wdzieczny za pomoc

Chyba w każdym harvesterze jest taka opcja Z darmowych narzędzi online http://www.textfixer.com/tools/remove-duplicate-lines.php

http://textmechanic.com/text-tools/basic-text-tools/remove-duplicate-lines/jest tam też kilka innych przydatnych toolsów

@s_matysik, a ty czasem nie miałeś xneolinks? W premium jest taki dodatek. 

Skipi jak się ten dodatek nazywa to jest to Xneolinks Browser ? Bo nie mogę coś tego na VPS uruchomić.

@Raichu2,

Manager linków z tego co pamiętam. 

Xneolinks sam usuwa z automatu duplikaty jak rozpoczniesz linkowanie..

xneolinks mam standard, do gsa chciałem filtrować od duplikatów żeby nie przerabiać niepotrzebnie wielomilionowych list, w GHarvester nie ma usuwania duplikatów

Jak te listy wyglądają? Normalna lista typu:

www.blabla.comwww.hehehe.comwww.blablablablabla.comblabla.comgoogle.com

I ma usunąć z tego jeden raz blabla.com? Ja bym najpierw pousuwał w notatniku przez Ctrl + H wszystkie początki, czyli https://, http://, www. Potem wkleił listę do jakiegoś narzędzia, które usuwa zduplikowane linie z listy: http://tools.seobook.com/keyword-list-cleaner/alternate/index.php

Jeśli lista jest bardziej zaawansowana (np. wiele danych [www.blabla.com][tytul strony][keywords]), to można zrobić to co opisałem wyżej, tylko jeszcze kombinując z Excelem, bo on podzieli to na kolumny i też z tego wybrniesz.