Парсер Datacol

[APSALIM]

Datacol - парсер для любых сайтов

Связанные темы:

 

[animal_x]

Вот Вы сами тест посмотрите, собирается 12 урл с вашего примера, а должно 6 Для просмотра ссылки Войди или Зарегистрируйся
Попробуйте использовать этот xpath

//div[contains(@class, "shop-item")]/a[@class="name"]

ну и для пагинации

//div[@class='pages']/a

 

[WKTP]

Вот Вы сами тест посмотрите, собирается 12 урл с вашего примера, а должно 6 Для просмотра ссылки Войди или Зарегистрируйся
Попробуйте использовать этот xpath

//div[contains(@class, "shop-item")]/a[@class="name"]

ну и для пагинации

//div[@class='pages']/a

С вашими xpath:
В этой

категории все норм собралось, 6 из 6!
А вот в этой

категории, 32 товара, собирает все равно со всех остальных! — Для просмотра ссылки Войди или Зарегистрируйся

Спасибо!

 

[animal_x]

Не знаю, нужно тестировать проект полностью. Так я не вижу откуда он может брать.
Попробуйте еще ограничить так "shop-item-page" в должны отсутствовать в коде Для просмотра ссылки Войди или Зарегистрируйся

 

[WKTP]

Тестировал полностью!
Добавил на вкладке "Навигация" - "Сбор ссылок" в "Фильтры ссылок" - "Должно присутствовать" - spalnye-meshki-kovriki
Собирает все что нужно! Как по другому настроить я не знаю!

 

[l0cky]

Столкнулась с проблемой:
Запрос был прерван: Не удалось создать защищенный канал SSL/TLS.
Что можно сделать?

а переключить на загрузка ==> браузер пробовали?

 

[animal_x]

а переключить на загрузка ==> браузер пробовали?

Так там писали за 5й Датакол, там такого нет

 

[l0cky]

Так там писали за 5й Датакол, там такого нет

я запускал в 7, парсил, но выглядело это ужасно.
Попробуйте BAS от bablosoft, он бесплатный и точно с этим справится.

 

[WKTP]

Я снова за помощью, не могу подобрать xpath
Сайт

Нужно собрать все, кроме 1, 2 это Главная и Интернет-магазин и последнего элемента название товара
xpath: //div[@id='status']

И помогите пожалуйста составить замену в названии, нужно убрать в конце с пробелом (xxxyyyzzz)
xpath: //h1[@id='main-header']

Спасибо!

update
С категориями вроде разобрался, хотя там в некоторых местах придется ручками с csv править...

update2
в notepad++
Найти: (.*?)\(.*?\)\s?(.*?)
Заменить: \1\3

 

[animal_x]

Я снова за помощью, не могу подобрать xpath
Сайт
Нужно собрать все, кроме 1, 2 это Главная и Интернет-магазин и последнего элемента название товара
xpath: //div[@id='status']

Если еще актуально по хлебным крошкам.
1. Поле статическое, на вкладке Статические ставите диапазон 2-5
2. xpath //div[@id="status"]/span/a[string-length(@href) > 3]

 

[WKTP]

Если еще актуально по хлебным крошкам.
1. Поле статическое, на вкладке Статические ставите диапазон 2-5
2. xpath //div[@id="status"]/span/a[string-length(@href) > 3]

Уже нет, все сделал, но все равно спасибо! На будущее буду знать!