Каким софтом или скриптом отфильтровать уникальные адреса?

[lorens]

Есть список адресов в текстовом файле
Каким софтом или скриптом лучше отфильтровать уникальные адреса?
Ну к примеру что бы не было повторов Для просмотра ссылки Войди или Зарегистрируйся | x.com | Для просмотра ссылки Войди или Зарегистрируйся и т.п.

 

[matumba]

Allsubmitter чем тебе не помощник?

 

[bes555]

Есть список адресов в текстовом файле
Каким софтом или скриптом лучше отфильтровать уникальные адреса?
Ну к примеру что бы не было повторов Для просмотра ссылки Войди или Зарегистрируйся | x.com | Для просмотра ссылки Войди или Зарегистрируйся и т.п.

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Скрипт, фильтрует уникальные домены, url'ы и вообще много чего может.
Халявный.

 

[partizan]

Вот еще классная штука, unduble
Запускать unduble.exe basa.txt
где basa.txt файлик, котороый нужно фильтрануть от дублей

 

[Maxon]

При импорте ссылок в аллсабмитер, можно поставить "Убрать повторы доменов" .

 

[Ejen]

Ну неудобно сабмитером пользоваться с ссылками которые не относятcа к его проектам, раз, два - терпимо, а когда постоянно надо, импорт и экспорт уже в печенках сидит...

 

[Extens]

Есть чудесная прога от австралийцев TextPipe Pro.

Используется для всевозможных преобразований текстов.
Использует создаваемую вами систему фильтров для редактирования
текста.
Обработает тысячи строк по заданной схеме за секунды.

 

[partizan]

Есть чудесная прога от австралийцев TextPipe Pro.

Используется для всевозможных преобразований текстов.
Использует создаваемую вами систему фильтров для редактирования
текста.
Обработает тысячи строк по заданной схеме за секунды.

Если б ты еще на нее и сцылку дал или выложил, было бы вообще замечательно.

 

[Extens]

Если б ты еще на нее и сцылку дал или выложил, было бы вообще замечательно.

Я думал, что вам в этом Гугл поможет.

Ну, а кому не помог - смотрим здесь:
_http://forum.ru-board.com/topic.cgi?forum=35&bm=1&topic=1576&start=380#lt

 

[diez]

на php

<?
$ty=file("out.txt");
echo count($ty).'<br>';
$gh=array_unique($ty);
foreach ($gh as $val)
{
$wf=fopen("out_clear.txt","a+");
fwrite($wf,$val);
fclose($wf);
}
echo count($gh).'<br>';
?>

out.txt - начальный список url
out_clear.txt - очищенный