parser myscore.com.ua

[zek24]

Решил вспомнить давно забытое пхп и написать парсер Для просмотра ссылки Войди или Зарегистрируйся
Идея такая, что парсер открывает главную страницу, проходит по нужным чемпионатам, собирает статистику и выдает по формуле подсказки.
Заминка оказался уже в самом начале...

Гляньте у кого есть 5мин и скажите, под силу ли это сделать на пхп и куда копать.

 

[Minor]

Да, там ajax.
Я когда то видел что парсили такое через shell_exeс и phantomjs чтоб не отлавливать аякс, и работать сразу с DOM.

 

[sngrl]

Если нужная информация загружается через ajax - то повторять эти запросы. Вижу, что после загрузки отправляется пара запросов на сервер, а ответ "закодирован" - нужно найти в js коде функцию, которая раскодирует эту информацию.
<-------------- добавлено через 61774 сек. -------------->
Да, как вариант - получить содержимое страницы, прогнать через phantomjs, и получить на выходе конечное dom-дерево, которое уже можно распарсить.

 

[subway]

phantomjs больше не поддерживается. у них планируется новый продукт, но когда выйдет не известно. подобного плана сайты имхо надежнее парсить с помощью Selenium WebDriver, так как иногда возникает необходимость интерактивного взаимодействия.