Подскажите прогу(или скрипт), которая удалит дубликаты урлов

Собствеено сабж.
Т.е. есть txt файлик - на каждой строчке урл, надо прогу, которая найдет одинаковые строки и удалит одну из них
Рейтинга хорошим людям не жалко.

если дело происходит на сервере то

Код:

sort in.txt | uniq > out.txt

в out.txt соответственно будут результаты.

excel может
editplus может
intop20.com тут можно если урлов не слишком много )

таких топиков дофига уже было... вот пара навскидку:
Разыскивается скрипт, или тот, кто его напишет.
Подскажите,как сделать

100% рабочий вариант на PHP. В файл mass_urls.txt - вбиваешь список урлов, результаты работы будут в файле result.txt

Цитата:

<?php $urls = file("mass_urls.txt"); $all = count($urls); $urls_src = $urls; $urls = @array_unique($urls); $fp = fopen("result.txt", "w+"); for($i=0;$i<$all;$i++){ if($urls[$i]){ fwrite($fp, trim($urls_src[$i])."\n"); } } fclose($fp); ?>

В редакторе любом нормальном типа EditPlus сортируй и убирай дубли