- Автор темы
- #1
У меня в последнее время сильно увеличился траффик...
По статистике выглядит вот так:
indexer45.aport.ru 238781 238781 15.90 GB 21 Мар 2009 - 00:21
indexer48.aport.ru 214374 214374 13.95 GB 20 Мар 2009 - 05:10
spider06.yandex.ru 86825 86825 1.41 GB 21 Мар 2009 - 00:21
robot03.rambler.ru 44705 44705 823.58 MB 19 Мар 2009 - 01:36
spider8.mail.ru 44423 44423 2.70 GB 17 Мар 2009 - 16:55
spider6.mail.ru 43149 43149 2.24 GB 18 Мар 2009 - 06:37
spider00.yandex.ru 30509 30509 502.17 MB 17 Мар 2009 - 08:10
Я так понял это поисковые боты?
при этом качают в основном
php Dynamic PHP Script file 1004185 52.6 % 47.86 GB 87.6 %
Т.е. получается что качают РНРскрипты? Как закрыть ботам доступ на РНР, чтоб не качали, но при этом индексировалось?
По статистике выглядит вот так:
indexer45.aport.ru 238781 238781 15.90 GB 21 Мар 2009 - 00:21
indexer48.aport.ru 214374 214374 13.95 GB 20 Мар 2009 - 05:10
spider06.yandex.ru 86825 86825 1.41 GB 21 Мар 2009 - 00:21
robot03.rambler.ru 44705 44705 823.58 MB 19 Мар 2009 - 01:36
spider8.mail.ru 44423 44423 2.70 GB 17 Мар 2009 - 16:55
spider6.mail.ru 43149 43149 2.24 GB 18 Мар 2009 - 06:37
spider00.yandex.ru 30509 30509 502.17 MB 17 Мар 2009 - 08:10
Я так понял это поисковые боты?
при этом качают в основном
php Dynamic PHP Script file 1004185 52.6 % 47.86 GB 87.6 %
Т.е. получается что качают РНРскрипты? Как закрыть ботам доступ на РНР, чтоб не качали, но при этом индексировалось?