Tanais: Парсинг

Продукт

Разработчики:

«Tanais Парсинг» — это система мониторинга текущего уровня цен конкурентов на основании данных «Яндекс.Маркета».

Решение «Tanais Парсинг» позволяет в полностью автоматическом режиме осуществлять парсинг товаров и предложений на «Яндекс.Маркете» с возможностью загрузки полученных данных в специальный регистр системы 1С:Предприятие для его последующего анализа или формирования отдельного файла с данными для его последующей обработки.

Принцип работы системы

Для обеспечения автоматизации, быстродействия и непрерывности работы, Парсинг использует пул прокси серверов, который можно редактировать и расширять. Статусы прокси серверов регулярно актуализируются благодаря специализированному регламентному заданию.
В системе предусмотрена многопоточная работа, за счет чего скорость получения данных достигает 0.8 сек/позиция (в зависимости от количества запущенных потоков).
Предусмотрена возможность работы в фоновом режиме. Помимо этого, есть возможность настроить расписание работы.
Результат парсинга в удобном формате хранится в специальном регистре 1С:Предприятие 8. Здесь можно найти всю необходимую информацию: данные о наименовании товара, продавце и ценах, дате получения информации, так же возможна выгрузка данных в отдельный файл.
Предусмотрена доработка формы справочника номенклатуры, которая позволяет просматривать результаты парсинга по позициям, а не единым отчетом.
В любой момент можно оценить качество работы парсинга, поскольку в системе для этого ведется протокол работы.
Результаты парсинга старше определенного срока можно автоматически удалять с помощью отдельного регламентного задания.

Архитектура решения

Система «Tanais Парсинг» может быть встроена в любые конфигурации 1С:Предприятия 8 или использоваться как внешняя компонента на базе 1С:Предприятия 8.