Клиент-серверный дорген, набираются желащие для тестирования

Тема в разделе "Вопросы новичков", создана пользователем number, 21 мар 2008.

Статус темы:
Закрыта.
  1. number

    number Прохожие

    Продолжается тестирование клиент-серверного дорвей генератора SmartPages

    вводная.
    как известно дорвеи бывают двух типов:
    статические (куча нагенеренных хтмл страниц) и динамические (скрипты собирают хтмл страницу из шаблона, кейвордов и контента по запросу)

    оба эти способа имеют свои достоинства и недостасти.
    правда самый важный недостаток обоих способов - это нагрузка на сервер хостинга (если доры разрешены) или же быстрое определение что сайт является дором и бан аккаунта (если доры запрещены).

    Дорген SmartPages (в гугле не ищите, проект нигде не светится) построен по принципу клиент-сервер.
    То есть серверные скрипты, размещенные на выделенном сервере занимаются тем, что собирают дорвей страницу по запросу из шаблона, контента и кейвордов и отдают результат клиентскому сайту.
    На клиентском же сайте должно быть размещено минимально три (!) файла:
    .htaccess, срипт запроса к доргену (2 строчки пхп) и индексный файл (для обработки запросов на морду дора или редиректов на фиды или спонсоров). Таким образом нагрузка на сайт хостинга отсутсвует, хостер придраться к тому, что сайт является дором ну никак не может.
    Плюс бонусы: быстрый перенос на другой хостинг (база лежит на серверном доргене), переносятся только файлы с хостинга, если были косяки с шаблоном или кейвордами, то не нужно судорожно перегенерировать десять тысяч страниц, достаточно перезалить данные файлы на серверный дорген.

    Как это работает?
    бот или клиент заходит по ссылке скажем
    domain.ru/kakoi-to-keyword.html

    на сайте, через htaccess kakoi-to-keyword.html перенаправлется на скрипт, который формирует запрос к доргену, мол дай мне такую-то страницу для такого домена
    дорген выбирает данные из предгенеренных метазаписей и формирует хтмл, затем выводит содержимое, которое и выдает по запросу скрипт на стороне клиентского сайта.
    Со стороны будет казаться, что данная страница находится непосредственно на данном сайте.

    Дорген существенно оптимизирован для работы с файлами метаданных до 10мб, оптимизирован под быструю отдачу результата и содержит двухуровневую структуру безопасности.
    В клиентской панели управления наличествует юзер-фриендли интерфейс + инструкция по эксплуатации.
    Весь процесс ввода нового дора в эксплуатацию занимает примерно 3-15 минут (в зависимости от опыта работы с доргеном:(
    залить 3 файла: текст,кейворды,шаблон
    прописать новый домен/создать категорию
    указать необходимые настройки
    залить на хостинг файлы
    протестировать

    На данный момент в доргене есть следующие ограничения для юзеров:
    кейвордов на сайт не более 8к -сайтом может быть как домен второго уровня, так и субдомен
    текста на сайт не более 2мб
    1 шаблон на 1 сайт
    не более 10 сайтов на аккаунт
    отключена возможность автогенерации дора через Automaker (заливка архива с настройками)

    в остальном же дорген полностью функционален и более того, успешно работает который месяц. На данный момент на нем крутится порядка 80 сайтов, примерно на 400к страниц. Тесты показывают минимальную загрузку ресурсов сервера.

    Сразу ответы на 2 вопроса

    1) а что делать, если серверный дорген упадет?
    ответ: вопрос решается так: клиентский скрипт запрашивает данные с доргена, если данных не получает (дорген лежит или нет линка), то после проверки длины строки скажем так:
    if (strlen($result)<100)) ...
    идет редирект куда-нибудь.
    таким образом трафик теряться не будет никак.

    2) дорген платный? как будет происходить оплата?
    ответ: использование клиент-серверного доргена бесплатно на данный момент. в дальнейшем планируется в качестве оплаты брать или некое количество $/мес или % с трафика.


    по общим вопросам и по вопросам регистрации стучаться:
    449-216
     
  2. SolutionFix

    SolutionFix 17 лет програмлю ;)

    Регистр.:
    20 ноя 2006
    Сообщения:
    272
    Симпатии:
    318
    Ничего идея, но сходу большое "НО".
    Главным преимуществом динамического доргена является создание страниц "на лету" и/или изменение контента страниц дора.
    В данном же проекте получается, наоборот, нет преимуществ ни динамического доргена, ни доргена для статических страниц.

    С одной стороны, я не могу использовать этот дорген для создания html или просто выдирания текста для вставки куда-то (фрихосты уже не поиспользуешь), с другой мне надо "залить 3 файла: текст,кейворды,шаблон, прописать новый домен/создать категорию" - то есть выполнить ВСЮ ту же работу что и для любого статического доргена.

    Поэтому хинты:
    - сделайте как в баксогене, чтобы страница генерировалась динамически по запросу.
    - пусть клиент на конечном сайте передает просто ID и пароль пользователя, и ключевое слово - и получает назад страницу.
    - сделайте возможность перегенерить страницу по данному ключевику по расписанию (с вариантами изменить полностью, добавить текста в конец) - чтобы создавалась видимость активного сайта
    - сделайте сами несколько десятков шаблонов и дайте возможность добавлять их пользователям.
    - дайте возможность пользователям забирать только сгенеренный текст, без обрамления шаблона

    От. И тогда проект imho имеет неплохие шансы на успех.
    PS А еще чем писать "существенно оптимизирован" огласите тесты с указанием времени генерации и времени отдачи в рабочем режиме. Да и пример качества текста не помешает.
     
  3. number

    number Прохожие

    это факт, хотя если фрихост поддерживает .htaccess -этого уже достаточно. Можно средствами htaccess сделать запрос к доргену за страницей.

    а потом еще залить десять тысяч файлов на хостинг, а если вдруг обнаружится ошибка - нужно перегенерить и перезаливать.
    Плюс как сообщалось выше, есть AutoMaker, но он в стадии конечного тестирования и будет доступен позже.

    на дорген передается ID вебмастера и ID страницы (в случае если ссылки типа page12345.html) или передается ID вебмастера и кейворд (в случае, если ссылки в виде kakoi-to-keyword.html)

    существует возможность дозаливки текста и кейвордов к уже существуем и догенерация страниц.
    но так как Automaker (user API, который автоматизирует ручной процесс) пока недоступен рядовым пользователям,
    то можно пока сказать, что автоматической наполняемости сайта пока что нет

    пользователи самостоятельно заливают СВОИ шаблоны.
    Ограничение: 1 шаблон на 1 сайт

    достаточно сделать собственный шаблон скажем в виде:
    <title>#TITLE#</title>
    <text>#TEXT#</text>
    <links#INLINKS#</links>

    или даже в виде
    #TEXT#
    #INTLINKS#

    и парсить его собственными усилиями...



    генерация файла метаданных на 5к кейвордов и 600кб текста (включая генерацию таблицы внутренних ссылок двух типов) занимает примерно 3-5 секунд (с выводом результата в браузер)

    отдача 5000й ссылки (по списку) медленнее чем отдача 1й ссылки по списку примерно на 0.1-0.18секунд
    тесты проводились на файле метаданных размером 4мб

    стукнитесь в аську, я покажу рабочие примеры доров, если интересует.
     
  4. Allex007

    Allex007

    Регистр.:
    6 фев 2007
    Сообщения:
    182
    Симпатии:
    19
    А этот дорген для рунета или больше для буржуй?

    Если RU то можно попробовать :)
     
  5. number

    number Прохожие

    без разницы какой контент или какие кейворды подсовывать.
     
  6. baaltazar25

    baaltazar25 Постоялец

    Регистр.:
    9 янв 2008
    Сообщения:
    82
    Симпатии:
    10
    Гм, а я то почему-то всегда думал, что алгоритмы генерации текста у буржуев и ру разные....

    Или тут в текст ключевики втыкаются? Как вообще дела с текстом обстоят? :)

    PS если с ру нормально работает, то мог бы тоже попробовать :ah:
     
  7. number

    number Прохожие

    с .ру работает, куда ж ему дется
    и яндекс индексирует и гугль
     
  8. -=ber$erk=-

    -=ber$erk=-

    Регистр.:
    17 мар 2008
    Сообщения:
    237
    Симпатии:
    105
    по примеру demo.smart-pages.ru
    на 09-06-09 в яндексе 2 стр. в гугле 149 в рамблере 0
    на 18-08-09 в яндексе 0 в гугле 154 в рамблере 2000
    от рамблера толку НОЛЬ, он все равно все ест и ничего из трафа не дает
    дай в личку примеры доров живущих под яндекс от месяца и более
    могу взять на тест дорген, с оплатой трафиком или как то еще
    предложи варианты
     
Статус темы:
Закрыта.