Что надо закрывать от индексации?

[bsk]

Есть несколько способов. Например, sitemap.xml.
Кстати, такое решение позволяет снизить нагрузку на сайт от посещения роботов (когда меню закрывают ноуиндексом)

Я в курсе про sitemap.xml, поэтому и спросил, если карта проглочена, то можно спокойно закрывать меню? Нагрузка снижается за счет, того, что робот берет новые страницы с карты?

 

[Damasc]

Подскажите, а зачем закрывать от поисковика теги?

Я конечно понимаю, что есть смысл закрыть страницу со всеми тегами (может посчитать как ссылочный спам), но закрывать одиночные теги из статьи... Зачем?

 

[anton88]

что-бы не было дублей страниц.

 

[Damasc]

что-бы не было дублей страниц.

То есть теги создают дубли страниц и поэтому это очень плохо для поисковиков? Могут быть баны?

Есть смысл вообще отказаться от тегов и не использовать их?

 

[anton88]

Есть смысл вообще отказаться от тегов и не использовать их?

Смотрите, как для пользователя будет удобнее. Я лично отказался уже давно.

Могут быть баны?

Ну только за тэги вряд-ли.

 

[hoopeer]

ВОТ МОЙ РОБОТС

User-agent: *
Disallow: */comments
Disallow: */trackback
Disallow: /*.css$
Disallow: /*.inc$
Disallow: /*.js$
Disallow: /*/trackback
Disallow: /*?
Disallow: /*?*
Disallow: /archives/*
Disallow: /category/*
Disallow: /cgi-bin/
Disallow: /comments
Disallow: /index.php?s=
Disallow: /page/*
Disallow: /pages/*
Disallow: /search/*/*
Disallow: /tag/*
Disallow: /trackback
Disallow: /wp-admin
Disallow: /wp-admin*
Disallow: /wp-content*
Disallow: /wp-content/cache
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-includes
Disallow: /wp-login.php
Disallow: /wp-login.php*
Disallow: /wp-register.php
Disallow: /xmlrpc.php

При таком раскладе даже спама нет вовсе

 

[Balabasic]

Уважаемые, подскажите пожалуйста, какие разделы сайта лучше закрывать от индексации ПСами?
Стоит ли прикрыть в noindex\nofollow RSS фид?
Ссылки на каменты, разделы, Переходы по тегу MORE
Буду очень признателен за ответы. :bc:

Закрывай все скрипты , а особенно релирект !

 

[Maroon]

Желательно закрыть от индексации страницы тэгов и категорий, чтобы избежать дублированного контента

 

[Amaranth]

Уважаемые, подскажите пожалуйста, какие разделы сайта лучше закрывать от индексации ПСами?

Любой закрытый от индексации контент - лишнее подозрение. Если есть что-то, что может не понравиться поисковику - перепишите или удалите.

 

[anton88]

Любой закрытый от индексации контент - лишнее подозрение. Если есть что-то, что может не понравиться поисковику - перепишите или удалите.

Да какие подозрения? Закрыто и закрыто - это же робот - алгоритм. Тем более, что сам яндекс рекомендует служебные части текста закрывать в NOINDEX.