Модуль SimplePars - Универсальный парсер для ИМ

Edward_DJ

Мой дом здесь!
Регистрация
24 Мар 2009
Сообщения
219
Реакции
238

SimplePars v4.9 - Универсальный парсер для ИМ (Full Decode - NULL)​


1636826061_1160.png


Модуль SimplePars предназначен для парсинга и наполнения интернет магазина.

Идея модуля заключается в том что бы вы могли заварить чашечку кофе и наблюдать как ваш магазин наполняется товарами.
Ведь намного приятнее наблюдать за строкой загрузки товара, чем заполнять каждую позицию вручную ;-)
Возможности модуля SimplePars
Основные задачи которые решает модуль это парсинг данных с сайта и последующее заполнение интернет магазина.
Вы можете как парсить напрямую в интернет магазин, так и парсить в CSV файл для дальнейшей обработки.
Так же реализовано обновления товаров при помощи парсинга сайтов доноров.

В двух словах не описать что умеет делать модуль, по этому обозначу только основные моменты.

- Полноценный парсер позволяющий парсить товары со сторонних магазинов и загружать себе.
- Встроенный гибкий сборщик ссылок , который поможет собрать ссылки на необходимые товары.
- Возможен парсинг и загрузка всех элементов товара.

Код товара [model]
Артикул [sku]
Название
Цена
Количество
Производитель
Описание
Категории
Изображения
Атрибуты
Опций
Данные - товара.

Более подробно можете увидеть на скриншотах модуля.

- Кроме загрузки возможно настройка обновления существующих товаров, цен, остатков и многое другое.
- Идентификация товара по артикулу, модели или имени товара.
- Доступна установка наценок любой сложности.
- Парсинг / Составление SEO шаблонов и заполнение Мета данных товара, категорий, производителей. Заполнение SEO_URL
- Формировать прайс csv с данными что вы парсите. Так же прайсы можно составлять в готовом формате для загрузки через АОП или любого другого загрузчика прайс листов.
- Поиск замена, мощный инструмент позволяющий вам налету изменять информацию. То есть, при парсинге вы можете вырезать или заменять определенные слова или целые блоки текста. Удалять или заменять в тексте названия сайта донора на ваш. И многое другое.
- Поиск замена полностью поддерживает регулярные выражения.
- Модуль способен парсить в многопоточном режиме. Что делает парсинг максимально быстрым.
- Поддерживается парсинг с авторизацией.
- Поддержка работы с прокси.
- Собственный прокси чекер, позволяющий отобрать прокси сервера котороые будут работать с конкретным донором.
- Возможна индивидуальная настройка запросов, Указание Cookies, User-Agent, Отправка собственных заголовков Headers
- Система логирования позволяющая контролировать процесс парсинга на любом этапе.
- Система кеширования сайта донора для безопасного парсинга.
- NEW Автоматический парсинг по расписанию, при помощи CRON
- NEW Встроенный редактор товаров. Редактор товаров поможет сделать финальную правку товаров. Инструкция к редактору товаров
- NEW Парсер XML/YML документов от поставщика.
- NEWПарсинг с автоматической авторизацией на сайте доноре. Инструкция по авторизации
- NEW Парсинг сайтов с изображениями в формате WEBP !!!! Подробнее
- NEW Расширение возможностей парсера собственными PHP скриптами Подробнее!!!
Вы можете указать любое количество границ парсинга, на любые данные что есть в html коде сайта донора.
SimplePars это универсальный инструмент который поможет вам наполнить ваш интернет магазин.
Обратите внимание что вы можете настроить парсинг на любые данные, и необязательно они должны быть совместимы с opencart. Вы можете парсить статьи, отзывы, блоги.

В данном модуле есть возможность парсить все данные не только в магазин но и CSV файл
Можно формировать прайс листы для загрузки их через популярные дополнения.

И это малая часть тех задач которые может выполнить данный модуль.

SimplePars разрабатывается как универсальный парсер, у него нету четких задач, у него есть только набор инструментов.
А что вы построите имея эти инструменты, уже зависит только от вас.

PS. Активация любыми данными

Скачать
 
Ктонибудь занимался решением чтобы при парсинге изображения автоматически сжималось? а то я спарсил сайтик один, 8к товаров, а он весит 70 гигов, благо стоит модуль автоперевода изображений в webp, но это только кеш..... а сами фото как весили, так и весят...
 
Ктонибудь занимался решением чтобы при парсинге изображения автоматически сжималось? а то я спарсил сайтик один, 8к товаров, а он весит 70 гигов, благо стоит модуль автоперевода изображений в webp, но это только кеш..... а сами фото как весили, так и весят...
Так выгрузи и сожми на пк, какой нибудь программой., но есть и скрипты вроде которые это могут сделать.
 
Так Simple Pars поддерживает PHP скрипты начиная с 4.6 версии.
Можно конечно написать что-то для пережатия картинок, но.... нагрузка и время парсинга существенно возрастут...
Если свой сервер, наверное bash скрипт для пережатия картинок наверное поудачнее будет, но это не точно.2023-04-21_145653.png
 
Ктонибудь занимался решением чтобы при парсинге изображения автоматически сжималось? а то я спарсил сайтик один, 8к товаров, а он весит 70 гигов, благо стоит модуль автоперевода изображений в webp, но это только кеш..... а сами фото как весили, так и весят...
Как по мне слить все фото с сервера и пережать самый простой способ. Можешь использовать программку Image Compressor ( прикрепил ссылку) . Она умеет массово жать файлы и з папки. Старенькая, но рабочая.


44566.jpg

 
а может у кого есть данный модуль на php 7.4 ?
этот жалуется, что он только до 7,3 работает.
 
а может у кого есть данный модуль на php 7.4 ?
этот жалуется, что он только до 7,3 работает.
Он работает прекрасно на 7,4, если "жалоба" это когда запускается inst.php - тогда забей. Лично этот модуль нулил, его сюда с провеббера перенесли.
 

SimplePars v4.9 - Универсальный парсер для ИМ (Full Decode - NULL)​


Посмотреть вложение 115169


Модуль SimplePars предназначен для парсинга и наполнения интернет магазина.

Идея модуля заключается в том что бы вы могли заварить чашечку кофе и наблюдать как ваш магазин наполняется товарами.
Ведь намного приятнее наблюдать за строкой загрузки товара, чем заполнять каждую позицию вручную ;-)
Возможности модуля SimplePars
Основные задачи которые решает модуль это парсинг данных с сайта и последующее заполнение интернет магазина.
Вы можете как парсить напрямую в интернет магазин, так и парсить в CSV файл для дальнейшей обработки.
Так же реализовано обновления товаров при помощи парсинга сайтов доноров.

В двух словах не описать что умеет делать модуль, по этому обозначу только основные моменты.

- Полноценный парсер позволяющий парсить товары со сторонних магазинов и загружать себе.
- Встроенный гибкий сборщик ссылок , который поможет собрать ссылки на необходимые товары.
- Возможен парсинг и загрузка всех элементов товара.

Код товара [model]
Артикул [sku]
Название
Цена
Количество
Производитель
Описание
Категории
Изображения
Атрибуты
Опций
Данные - товара.

Более подробно можете увидеть на скриншотах модуля.

- Кроме загрузки возможно настройка обновления существующих товаров, цен, остатков и многое другое.
- Идентификация товара по артикулу, модели или имени товара.
- Доступна установка наценок любой сложности.
- Парсинг / Составление SEO шаблонов и заполнение Мета данных товара, категорий, производителей. Заполнение SEO_URL
- Формировать прайс csv с данными что вы парсите. Так же прайсы можно составлять в готовом формате для загрузки через АОП или любого другого загрузчика прайс листов.
- Поиск замена, мощный инструмент позволяющий вам налету изменять информацию. То есть, при парсинге вы можете вырезать или заменять определенные слова или целые блоки текста. Удалять или заменять в тексте названия сайта донора на ваш. И многое другое.
- Поиск замена полностью поддерживает регулярные выражения.
- Модуль способен парсить в многопоточном режиме. Что делает парсинг максимально быстрым.
- Поддерживается парсинг с авторизацией.
- Поддержка работы с прокси.
- Собственный прокси чекер, позволяющий отобрать прокси сервера котороые будут работать с конкретным донором.
- Возможна индивидуальная настройка запросов, Указание Cookies, User-Agent, Отправка собственных заголовков Headers
- Система логирования позволяющая контролировать процесс парсинга на любом этапе.
- Система кеширования сайта донора для безопасного парсинга.
- NEW Автоматический парсинг по расписанию, при помощи CRON
- NEW Встроенный редактор товаров. Редактор товаров поможет сделать финальную правку товаров. Инструкция к редактору товаров
- NEW Парсер XML/YML документов от поставщика.
- NEWПарсинг с автоматической авторизацией на сайте доноре. Инструкция по авторизации
- NEW Парсинг сайтов с изображениями в формате WEBP !!!! Подробнее
- NEW Расширение возможностей парсера собственными PHP скриптами Подробнее!!!
Вы можете указать любое количество границ парсинга, на любые данные что есть в html коде сайта донора.
SimplePars это универсальный инструмент который поможет вам наполнить ваш интернет магазин.
Обратите внимание что вы можете настроить парсинг на любые данные, и необязательно они должны быть совместимы с opencart. Вы можете парсить статьи, отзывы, блоги.

В данном модуле есть возможность парсить все данные не только в магазин но и CSV файл
Можно формировать прайс листы для загрузки их через популярные дополнения.

И это малая часть тех задач которые может выполнить данный модуль.

SimplePars разрабатывается как универсальный парсер, у него нету четких задач, у него есть только набор инструментов.
А что вы построите имея эти инструменты, уже зависит только от вас.

PS. Активация любыми данными

Скачать *** Скрытый текст не может быть процитирован. ***

Огромная просьба, перезалейте пожалуйста!!!
 
Последнее редактирование модератором:
Назад
Сверху