Каким софтом или скриптом отфильтровать уникальные адреса?

Тема в разделе "Сервисы", создана пользователем lorens, 26 окт 2006.

Статус темы:
Закрыта.
  1. lorens

    lorens Постоялец

    Регистр.:
    25 окт 2006
    Сообщения:
    107
    Симпатии:
    23
    Есть список адресов в текстовом файле
    Каким софтом или скриптом лучше отфильтровать уникальные адреса?
    Ну к примеру что бы не было повторов www.x.com | x.com | http://www.x.com и т.п.
     
  2. matumba

    matumba Прохожие

    Allsubmitter чем тебе не помощник?
     
  3. bes555

    bes555 Постоялец

    Регистр.:
    1 авг 2006
    Сообщения:
    93
    Симпатии:
    28
    http://codecult.org/freesoft/baseeditor.zip
    Скрипт, фильтрует уникальные домены, url'ы и вообще много чего может.
    Халявный.
     
  4. partizan

    partizan Создатель

    Регистр.:
    15 сен 2006
    Сообщения:
    45
    Симпатии:
    6
    Вот еще классная штука, unduble
    Запускать unduble.exe basa.txt
    где basa.txt файлик, котороый нужно фильтрануть от дублей
     

    Вложения:

    • UnDuble.zip
      Размер файла:
      8,7 КБ
      Просмотров:
      44
  5. Maxon

    Maxon Постоялец

    Регистр.:
    11 сен 2006
    Сообщения:
    51
    Симпатии:
    6
    При импорте ссылок в аллсабмитер, можно поставить "Убрать повторы доменов" .
     
  6. Ejen

    Ejen Постоялец

    Регистр.:
    24 авг 2006
    Сообщения:
    116
    Симпатии:
    24
    Ну неудобно сабмитером пользоваться с ссылками которые не относятcа к его проектам, раз, два - терпимо, а когда постоянно надо, импорт и экспорт уже в печенках сидит...
     
  7. Extens

    Extens Постоялец

    Регистр.:
    28 июл 2006
    Сообщения:
    79
    Симпатии:
    46
    Есть чудесная прога от австралийцев TextPipe Pro. :)

    Используется для всевозможных преобразований текстов.
    Использует создаваемую вами систему фильтров для редактирования
    текста.
    Обработает тысячи строк по заданной схеме за секунды.
     
  8. partizan

    partizan Создатель

    Регистр.:
    15 сен 2006
    Сообщения:
    45
    Симпатии:
    6
    Если б ты еще на нее и сцылку дал или выложил, было бы вообще замечательно.
     
  9. Extens

    Extens Постоялец

    Регистр.:
    28 июл 2006
    Сообщения:
    79
    Симпатии:
    46
    Я думал, что вам в этом Гугл поможет. ;)

    Ну, а кому не помог - смотрим здесь:
    _http://forum.ru-board.com/topic.cgi?forum=35&bm=1&topic=1576&start=380#lt
     
  10. diez

    diez

    Регистр.:
    1 ноя 2006
    Сообщения:
    182
    Симпатии:
    59
    на php
    HTML:
    
    <?
    $ty=file("out.txt");
    echo count($ty).'<br>';
    $gh=array_unique($ty);
    foreach ($gh as $val)
    {
    $wf=fopen("out_clear.txt","a+");
    fwrite($wf,$val);
    fclose($wf);
    }
    echo count($gh).'<br>';
    ?>
    
    out.txt - начальный список url
    out_clear.txt - очищенный
     
    abcolut нравится это.
Статус темы:
Закрыта.