БОТ
Вот тебе выжимка с 1 форума, так что ботяра это:
Сейчас в логах заметил, что после индексации msnbot'ом русской страницы с английским словом где то через минуту кто-то с майкрософтовского IP заходит на эту страницу с реферером из поиска этого слова в поисковике live.
Скажем есть русская страница с английским словом в тексте key1
Выглядит это так:
Код:
65.55.208.39 - - [20/Jun/2008:07:04:08 +0400] "GET /xxx/key1/ HTTP/1.1" 200 9456 "-" "msnbot/1.1 (+http://search.msn.com/msnbot.htm)"
65.55.110.235 - - [20/Jun/2008:07:05:32 +0400] "GET /xxx/key1/ HTTP/1.0" 200 9456 "http://search.live.com/results.aspx?q=key1&form=QBHP" "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.2; .NET CLR 1.1.4322)"
65.55.110.235 - - [20/Jun/2008:07:05:33 +0400] "GET /style.css HTTP/1.0" 200 10787 "http://www.site.ru/xxx/key1/" "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.2; .NET CLR 1.1.4322)"
65.55.110.235 - - [20/Jun/2008:07:05:33 +0400] "GET /javascript.js HTTP/1.0" 200 1117 "http://www.site.ru/xxx/key1/" "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.2; .NET CLR 1.1.4322)"
Сейчас посмотрел на других своих сайтах - в принципе поведение то же самое, поэтому надеюсь это не команда индусов, которые вручную модерируют сайты