Правильно ли составлен роботс?

[LEXAlForpostl]

Здравствуйте.
Подскажите пожалуйста, правильно ли составлен файл роботс для Яндекса?

User-agent: *
Disallow: /stats/16866-sait-domain-ru.html

User-agent: *
Disallow: /2009/03/19/project-in-russia.html

 

[scratcherz]

Здравствуйте.
Подскажите пожалуйста, правильно ли составлен файл роботс для Яндекса?

Правильно User-agent: Yandex

 

[hipachka]

А что вы хотели сделать? И какие цели преследуете ?

 

[EnGeLs]

Тогда уж лучше так:

User-agent: *
Disallow: /stats/16866-sait-domain-ru.html
Disallow: /2009/03/19/project-in-russia.html

 

[webru]

СЕли зыкрыть индексацию для всех роботов то User-agent: *, если для яндекса User-agent: Yandex.

 

[Dark_YS_Shark]

User-agent: Yandex
Disallow: /stats/16866-sait-domain-ru.html
Disallow: /2009/03/19/project-in-russia.html

 

[too]

User-agent: Yandex
Disallow: /stats/16866-sait-domain-ru.html
Disallow: /2009/03/19/project-in-russia.html

Для яндекса так, для остальных:

User-agent: *
Disallow: /stats/16866-sait-domain-ru.html
Disallow: /2009/03/19/project-in-russia.html

 

[fima32]

Чтобы каждый файл статистики не перечислять, достаточно
User-agent: *
Disallow: /stats/

 

[Nei]

Я бы еще советовал директиву host указать, у яши бывает робота-зеркальщика глючит.

 

[topseller]

Робот

У меня 3 повторяющиеся товара. Нужно 2 из них закрыть в файле Роботс.
Disallow: /product.php?view_product=12001
Можно ли закрывать динамические ссылки например вот так как показано выше?