про нововведение яндекса в robots.txt

[seoadr]

к примеру на сайте Для просмотра ссылки Войди или Зарегистрируйся есть следующие страницы:

Для просмотра ссылки Войди или Зарегистрируйся
Для просмотра ссылки Войди или Зарегистрируйся
Для просмотра ссылки Войди или Зарегистрируйся
Для просмотра ссылки Войди или Зарегистрируйся
Для просмотра ссылки Войди или Зарегистрируйся

мне нужно закрыть для индексирования все страницы в названии которых встречается: &cid= (но не ?cid= )

если вот так прописать в robots.txt :

User-Agent: *
Disallow: *&cid=*

яндекс поймёт?
если нет то как надо?

 

[devit]

Да, поймет в связи с последними изменениями алгоритма обработки файлов robots.txt, теперь и гугля и яндекс понимают символы подстановки.

Подробнее о синтаксисе robots.txt для Яндекса:

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[seoadr]

покумекал...
пришел к нескольким решениям своей проблемы:

User-Agent: *
Disallow: /index.phtml?*&cid=

(этот вариант яндекс должен понять, а гугля не знаю)
(из хелпа яндекса:
User-agent: Yandex
Disallow: /add.php?*user=
# запрещает все скрипты 'add.php?' с параметром 'user')


User-Agent: *
Disallow: /*&cid=

(а этот гугля поймёт, а вот яндекс...?)
(из хелпа google:
User-Agent: *
Disallow: /*?

Строка Disallow:/ *? блокирует доступ ко всем URL-адресам со знаком вопроса (то есть, все URL, которые начинаются с имени домена и содержат цепочку, внутри которой встречается знак вопроса).
)

подскажите наиболее корректный вариант?

 

[devit]

подскажите наиболее корректный вариант?

один фиг для Яндекса отдельные указания надо прописывать (из-за 'host' например), я бы 2 блока составил один для гугли(user-agent: *), один для яндекса (user-agent: Yandex)

 

[need help]

В сервисе для вебмастера добавляете сайт, подтверждаете на него права и потмо можете спокойно проверить синтаксис своего robots.txt, какие страницы закрыты от индексации, а какие открыты.

 

[evgenii]

Можно и не добавляя сайт проверить:

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.