Что пишут в robots.txt, чтобы спрятать sape-ссылки?

[Hmury]

Подскажите, сам никогда ссылки не продавал, только покупал )
Поэтому не знаю, каким образом они в сайт интегрируются, но наверняка есть какой-то общий код?..
В общем, суть вопроса - в шестом Allsubmitter'е в модуле "Анализатор бирж ссылок" в фильтрах появилась возможность также отфильтровывать плохие ссылки по содержимому robots.txt. Я так понимаю, что видимо есть умельцы, которые сапо-код закрывают в роботс, и это таким образом можно выявить.
Но какие характерные куски ссылок надо искать в роботсе?

 

[kpromo]

Скорее всего просто закрывают страницы от индексации. И робот туда никогда не зайдет и соответственно не проиндексирует.

 

[Lazy_bones]

Скорее всего просто закрывают страницы от индексации. И робот туда никогда не зайдет и соответственно не проиндексирует.

Думаю вряд ли так, тогда бы ссылки было бы еще проще отфильтровать просто на индексируемость. Думаю каждый кто с сапой работает, проверяет чтобы ссылки были в индексе. И делать такое безсмысленно, так как через пару дней ссылки снимут.
Там должно быть что то другое.

 

[Sergo_Sev]

Тоже думаю, что скорее всего каталоги закрывают в robots, вряд ли в нем что то можно намудрить что бы прятать продажные ссылки - прячут их скриптами обычно

 

[dump1111]

А как можно закрыть код сапы в роботс, ведь для каждого юзера выдаётся свой уникальный код для названия папки кода, которы нельзя подобрать?

 

[Допельгангер]

его не закрыть. Только если покупаемую страницу закрывать в робот тхт

 

[Alex-xv]

Закрыть ссылки можно ява скриптом, хотя если строить долгосрочные отношения с оптимизаторами которые у Вас ссылки покупают то я думаю не стоит, опять же мигание внешних ссылок не к чему хорошему не приведет

 

[metacreo]

кроме
UserAgent
Allow
Disallow
Host
ничего не пишут

 

[sens08]

Если и закрыть от индексации в роботсе, то сапобот начнет материться и вы ни чего не заработаете.

 

[ZCFD]

вообщето пишут не в rrobots а в htacsess -- редирект с урлов, содержащих гет параметры, на те же урлы, БЕЗ гет параметров