Вопрос по robot.txt

[zilon]

У яндекса изменились правила для директив allow и disallow вот ссылка на новость Для просмотра ссылки Войди или Зарегистрируйся а вот новые правила Для просмотра ссылки Войди или Зарегистрируйся

 

[Красавчег]

Не понимаю нафига изъёбываться и выдумывать что-то своё, если весь мир использует "Disallow"

 

[Sunday]

Sunday, например, директива Host есть только у Яндекса, зачем ею кормить другие поисковики?

Я в курсе, но ПС просто игнорирует директивы, которые им не поддерживаются, так зачем плодить кучу однотипных условий?

нафига изъёбываться

Это у Яндекса в крови

 

[leonspeedon]

проверьте может просто пс не обновила robots.txt Вашего сайта
это можно сделать в инструментах для веб-мастера той пс, на которую у Вас ориентир