Запрет индесации сайта (полностью)

[tofik228]

Ребят, собственно сабж... Хочу для тестов на один домен ставить разные CMS и магазины, но при этом чтобы поисковики вообще не индексировали сайт т.к буду потом сайты переносить уже по рабочим доменам... как можно сделать?

 

[PHP_Master]

Так закрой доступ к сайту для всех кроме своих IP/сети.

 

[tofik228]

можно по - подробнее пожалуйста т.е как я понимаю правку делать в .htacces?

 

[tank_2]

в корень сайта на хостинге ложим файл robots.txt следующего содержания:

User-agent : *
Disallow : /
Disallow : /images

первая строка говорит что дальнейшие указания актуальны для всех ПС
вторая запрещает к индексации все файлы и папки домена
третья (к примеру дал) запрещает индексацию только папки images в корне сайта.
Сам файл robots.txt является инструкцией к поведению для ПС, которую они безаговорочно выполняют.

 

[PHP_Master]

order allow deny
deny from all
allow from 111.111.111.111 <- твой IP

Если IP динамический, то можно вместо IP указывать сети.


PS роботы частенько кладут на robots.txt

 

[tofik228]

спасибо... как я понял это поможет избежать дубля на других доменах и можно смело будет потом переносить сайты на другие домены?

PS роботы частенько кладут на robots.txt

т.е ваша конструкция используется в htacces или в robots.txt? извиняюсь за глупые вопросы... первый раз хочу использовать запрет т.к не хочется возиться на локале, дабы не столкнуться с проблемами на хосте.

спасибо PHP Master за последний пост №7 и TANK 2...

 

[PHP_Master]

То, что я написал, закроет доступ к сайту всем, кроме указанного IP.
Текст положить в .htaccess.

 

[iskif]

order allow deny
deny from all
allow from 111.111.111.111 <- твой IP

Если IP динамический, то можно вместо IP указывать сети.

Всегда считал, что инструкции выполняются последовательно.
Т.е., в данном случае, сначала сработает запрет для всех и до разрешения дело не дойдёт. Или порядок значения не имеет?

 

[PHP_Master]

Учим матчасть

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[iskif]

ну да, я привык просто к использованию Order по умолчанию.
и, кстати, если верить "матчасти", то Ваш пример не корректен, если вообще работоспособен (проверять лень, спорить не буду) - синтаксис директивы Order подразумевает использование разделителя "запятая"

И Вы почему то совсем забыли упомянуть, что Ваш совет годится только для хостинга на "апаче" и совершенно не применим для web-сервера IIS