Помощь Как избавиться от дублей

[Anigilator]

Здравствуйте.
В общем, проблема такая. Сейчас в поиске google есть дубли, из-за чего сайт в соплях на половину, что не есть айс
Подскажите пожалуйста, что можно сделать, чтобы убрать их?
robots на данный момент такой:
User-agent: *
Disallow: /backup/
Disallow: /catalog/
Disallow: /engine/
Disallow: /favorites/
Disallow: /language/
Disallow: /lastnews/
Disallow: /newposts/
Disallow: /tags/$
Disallow: /templates/
Disallow: /uploads/
Disallow: /user/
Disallow: /*print
Disallow: /*do=pm
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=addnews
Disallow: /*do=lastnews
Disallow: /*do=lastcomments
Disallow: /*do=lostpassword
Disallow: /*do=register
Disallow: /*do=search
Disallow: /addnews.html
Disallow: /statistics.html
Disallow: /search.html
Disallow: /rules.html
User-agent: Yandex
Disallow:
Host: site.ru
Sitemap: Для просмотра ссылки Войди или Зарегистрируйся

 

[Dr.Sheff]

Тут экстрасенсов нет, нужно сайт видеть. А лучше изучайте роботс.тхт самостоятельно эта информация из цикла "должен знать каждый".

 

[be_happy]

а какой смысл выходить из соплей? если у половины белых проектов там 50% и трафа меньше не становится...

 

[Anigilator]

Вот ссылка на сайт с тем же шаблоном, что и у меня.

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Дело не просто в том, что сайт в соплях. Дело в том, что он не должен там быть, т.к. все статьи уник на 95%+, тайтлы, дескрипшены и т.д. уник, все тексты (даже стандартные для регистрации) так же уник. Там нечему быть не уникальным.
Меня смущает то, что в поиске выдаются ЧПУ не человеко-подобные (как я установил в админке), а местами "site.ru/?=35" - типо того.

 

[limoshka]

Для начала удалите дубликаты контента;
Это сделать в базе данных
одинаковый title удалит на сайте

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Удаление дублей страниц

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[AkudJEE]

Дублей много в этом движке. Дубли я закрыл роботом. Яндекс с 760 проиндексированных страниц осталось только 420, половина оказалась дублями, да и гугл нашел много дублей. Вот прилагаю свой робот для наглядности:

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[yavasilek]

а в место вот этого

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

может легче вот это

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[AkudJEE]

Ну тогда все новости закроются от индексации, если не включен ЧПУ. Потому что ссылки будут иметь вид Для просмотра ссылки Войди или Зарегистрируйся

 

[yavasilek]

Ну тогда все новости закроются от индексации, если не включен ЧПУ. Потому что ссылки будут иметь вид Для просмотра ссылки Войди или Зарегистрируйся

так а ЧПУ не включен? я подразумеваю, что всегда включен!

 

[trooll]

а в место вот этого
*** скрытое содержание ***
может легче вот это
*** скрытое содержание ***

Интересная идея. Ты пробовал сам такой вариант? Кто пробовал еще такой вариант отпишитесь что да как, не режут ли ПСы лишнего.