Ищу Удалить дубли урлов, перемешать все урлы

Тема в разделе "Софт", создана пользователем nikky, 27 фев 2011.

  1. nikky

    nikky Постоялец

    Регистр.:
    5 июл 2007
    Сообщения:
    126
    Симпатии:
    12
    Нужна прога для удаления дублей урлов и программа для перемешки всех урлов...
    Заранее спасибо!
     
  2. VmpAkV

    VmpAkV

    Регистр.:
    24 июн 2008
    Сообщения:
    195
    Симпатии:
    13
    KeywordKeeper
     
  3. bertolai

    bertolai

    Регистр.:
    21 янв 2008
    Сообщения:
    157
    Симпатии:
    56
    Se7 Doubles Cleener использую для чистки дублей.
     
  4. pavelboot

    pavelboot Писатель

    Регистр.:
    27 янв 2011
    Сообщения:
    1
    Симпатии:
    0
    алсубмитер тоже чистит дубли ссылок и доменов
     
  5. nikky

    nikky Постоялец

    Регистр.:
    5 июл 2007
    Сообщения:
    126
    Симпатии:
    12
    больше интересует как хаотично перемешать?
     
  6. zzallexx

    zzallexx

    Регистр.:
    11 июн 2008
    Сообщения:
    1.036
    Симпатии:
    699
    если устроит на php перемешиваем в файле urls.txt каждый урл с новой строки
    PHP:
    <?php
    $array
    =file("urls.txt");
    $fp=fopen("peremeshano.txt","w");
    //print_r($array);
    shuffle($array);
    $c=count($array);
    for (
    $q=0$q<$c$q++) {echo $array[$q]."\n"fwrite($fp,$array[$q]."\n");} 
    fclose($fp);
    ?>
     
    nikky нравится это.
  7. nikky

    nikky Постоялец

    Регистр.:
    5 июл 2007
    Сообщения:
    126
    Симпатии:
    12
    вот то что надо, только список получается с пустыми строками в Notepad++, в обычном блокноте что типо прямоугольников (пробелов) в конце строк
     
  8. zzallexx

    zzallexx

    Регистр.:
    11 июн 2008
    Сообщения:
    1.036
    Симпатии:
    699
    PHP:
    $array=file("urls.txt");
    $fp=fopen("peremeshano.txt","w");
    //print_r($array);
    shuffle($array);
    $c=count($array);
    for (
    $q=0$q<$c$q++) {echo $array[$q]."<br>"fwrite($fp,trim($array[$q])."\n");} 
    fclose($fp);
    поправил
     
    nikky нравится это.
  9. smartman

    smartman Создатель

    Регистр.:
    29 ноя 2008
    Сообщения:
    14
    Симпатии:
    0
    AgressParser пасрит, удаляет дубли, пермешевыает ...
     
  10. bertolai

    bertolai

    Регистр.:
    21 янв 2008
    Сообщения:
    157
    Симпатии:
    56
    Ещё один php для чистки дублей, работает на Денвере:
    PHP:
    <?php
    $urls 
    file("1.txt");
    $all count($urls);
    $urls_src $urls;
    $urls = @array_unique($urls);
    $fp fopen("2.txt""w+");
    for(
    $i=0;$i<$all;$i++){
    if(
    $urls[$i]){
    fwrite($fptrim($urls_src[$i])."\n");
    }

    }
    fclose($fp);
    ?>