SAPE. Посоветуйте как распарсить все сайты продавцы

[saidxxx]

Необходимо для дальнейшей их обработки и получения контрольного списка, только по которому будет происходить закупка ссылок. Встроенных фильтров сапы не хватает

 

[Wink]

Полностью распарсить список не реально - часть площадок идет с закрытыми URL и без заявки на покупку эти URL увидеть не получится.

 

[nautilus]

часть площадок идет с закрытыми URL и без заявки на покупку эти URL увидеть не получится.

вот собственно и ответ на вопрос: подаем заявку на покупку ссылкок без ограничения по цене, пиару и т.д. - получаем почти весь список, без учета тех кто с закрытым урлом и вручную отсеял ваш сайт при модерации

 

[willy]

Главное чтоб САПА нормально ваш парсинг восприняла. Интересно когда они соберутся и сделают XML API для доступа ...

 

[skabbit]

Главное чтоб САПА нормально ваш парсинг восприняла. Интересно когда они соберутся и сделают XML API для доступа ...

вряд ли сделают - им это особо не надо, а вот проблем (с тем же парсингом содержимого их бд и учитывая потенциальную стоимость такого рода данных) могут заиметь.

а вообще, чем сейчас не хватает фильтров сапы? чисто экспериментальный интерес или для какой-то устоявшайся темы?

 

[kip]

Схема такая: заходишь по Оптимизатором, покпаешь 100к ссылок с разных доменов... А потом их парсишь =)

 

[saidxxx]

а вообще, чем сейчас не хватает фильтров сапы? чисто экспериментальный интерес или для какой-то устоявшайся темы?

не хватает например возраста сайта

просто хотел бы сделать списочек из "трастовых" по моему мнению сайтов и только с них покупать для разных проектов.

 

[Alexxa12]

Схема такая: заходишь по Оптимизатором, покпаешь 100к ссылок с разных доменов... А потом их парсишь =)

160к. если быть точным, и список всех сайтов, где вебмастеры одобрили ссылку, действительно предстает "на блюдечке с золотой каемочкой".

Если брать самые дешевые с УВ3 и найти среднюю цену по всем сайтам, то все равно цена удовольствия будет достаточно высокой, примерно $0.5 на 1 домен.

Гораздо дешевле подкупить сотрудника Sape, и договориться о сливе базы.

[offtopic]Контрольная закупка! Все в баню.[/offtopic]