vladis1333
Мой дом здесь!
- Регистрация
- 18 Июл 2010
- Сообщения
- 588
- Реакции
- 237
- Автор темы
- #1
Подскажите как, чем (софт,сервис) можно проверить у пару тысяч сайтов robots.txt на наличие там определенной строчки (закрытость к индексации профилей)?
Поиск результатов не дал.
Поиск результатов не дал.