Как индексировать закритий сайт

[terran_1202]

нужно индексировать закритий сайт
каким адресам нужно дать доступ

 

[dmx]

закритий

на то и закритий Да и не надо этого !

 

[Sunday]

противоречие в самом вопросе

 

[terran_1202]

он открит некоторим сетям
каким ip адресам (google yandex) дать доступ

 

[Красавчег]

каким ip адресам (google yandex) дать доступ

Точных данных нету.

IP-адресов, с которых «ходит» робот Яндекса, много, и они могут меняться. Список адресов не разглашается.

 

[bork75]

он открит некоторим сетям
каким ip адресам (google yandex) дать доступ

ПС ещё периодически заходят под видом пользователей, проверяют на клоакинг.

 

[terran_1202]

с ботом гугла также как и с яндексом накладно?

 

[Красавчег]

с ботом гугла также как и с яндексом накладно?

Вопрос: - Нельзя ли узнать IP-адреса, с которых выполняет сканирование Googlebot, чтобы фильтровать журналы?
Ответ: - IP-адреса, используемые Googlebotом, время от времени меняются. Лучший способ определить, когда сайт посещал Googlebot, - воспользоваться агентом-пользователем (Googlebotом).