интересно, на что это сканят роботы?

Статус
В этой теме нельзя размещать новые ответы.

hoopeer

Мой дом здесь!
Регистрация
10 Фев 2007
Сообщения
804
Реакции
255
В статистике по одному из доменов наблюдаю такие обращения:
2 redirect.php
1 link.php
1 engine/redirect.php
1 rss.xml
1 go.php
1 r.php
1 engine/rss.php

Однако таких файлов на сайте нет.

У кого какие мысли на что сканят роботы сайт?
 
Это не роботы. Скорее всего это парсер.
 
Да скорее всего новости тырят
 
Это не роботы. Скорее всего это парсер.
Ну парсер не может быть роботом? И на предмет чего могут парсить?


Да скорее всего новости тырят
Ну ладно, пусть rss - это тырят, а в redirect.php или в link.php чего тырить?

При том, что сайт новый (домен первый раз регался, то есть до того его никто не регал), в гугле только морда пока и больше нигде его нет...
 
Если по каталогам гонял/гоняли возможно проверяют обратные ссылки... но опять же не все эти файлы. Мистика какая то :nezn:
 
hoopeer, а раньше на этом домене ничего другого не стояло?
 
Раньше ничего другого не стояло, в каталоги не гонялся как впрочем вообще не гонялся, только эдурл в Яндекс использовался и всё.
 
Ну парсер не может быть роботом? И на предмет чего могут парсить?

Ну ладно, пусть rss - это тырят, а в redirect.php или в link.php чего тырить?

При том, что сайт новый (домен первый раз регался, то есть до того его никто не регал), в гугле только морда пока и больше нигде его нет...

По теме:

1 engine/rss.php
1 rss.xml

^^^ - Сдесь всем понятно, что проверяют на предмет rss ленты.

 
такая мысль - то что ты купил домен, не говорит о том, что его раньше не использовали. вполне могут остаться ссылки.

сделай в yahoo.com
linkdomain:site.com

еще тебе надо посмотреть, с какого (их) ip лезут на эти урлы.
если разные, то тут тяжелый случай.

и юзерагента. может все же поисковые боты?

Добавлено через 5 минут
смотрю ещё раз и имхо на 100% раньше стоял скрипт там и домен юзался.

строчки говорят именно об этом
1 engine/redirect.php
1 engine/rss.php
 
Сплог с дорами висел на нем, судя по запросам :)
 
Статус
В этой теме нельзя размещать новые ответы.
Назад
Сверху