Расширение для парсинга теперь работает с любым сайтом

Главное в обновлении расширения для браузера: больше не нужно ждать, пока мы добавим поддержку конкретного магазина. Теперь система умеет создавать парсер практически для любого сайта автоматически.

Как это работает: откройте нужный сайт с установленным расширением. Если готового парсера для него ещё нет, отправьте несколько его страниц как образцы — кнопкой «Отправить образец» в шапке всплывающего окна (по одной странице за раз, лучше разного типа: и списки товаров, и карточки). Когда собрано достаточно образцов (по умолчанию 5), парсер генерируется с помощью ИИ — обычно за 10–15 минут. После этого страницы этого сайта (цены, характеристики, описания, изображения) разбираются автоматически, как и для уже поддерживаемых магазинов.

Во всплывающем окне виден прогресс — например, «2 из 5 образцов собрано» — и текущий статус: собираем образцы, идёт генерация парсера или парсер готов.

Если парсер ошибается — сообщите об этом

Прямо из расширения можно пожаловаться на парсер (нашёл не все товары, неверные цены, испорченные изображения). Текущая страница автоматически приложится к отчёту, и парсер будет доработан или пересоздан с учётом вашего отзыва.

Автоматический обход сайтов

Чтобы не открывать страницы вручную, расширение может обходить сайт само и попутно отправлять данные на сервер:

• Обход домена — расширение открывает сайт, прокручивает страницы (чтобы подгрузить ленивые списки товаров) и переходит по внутренним ссылкам, собирая цены и карточки.
• Сценарии — именованные списки адресов, которые расширение обходит по очереди. Удобно для регулярного сбора нужных категорий, продавцов и подборок.

Управление — на вкладке «Автоматизация» во всплывающем окне. Рядом с активным заданием показывается прогресс: сколько страниц пройдено и сколько карточек и цен уже собрано.

Куда попадают данные

В настройках можно выбрать назначение собранных данных: общая публичная библиотека (доступна всем пользователям системы) или приватная библиотека вашей компании (требует входа в аккаунт).

Подробнее — в разделе Расширение для ручного парсинга.

Обновление приватной библиотеки из поставщика

Мы добавили возможность автоматически обновлять приватную библиотеку прямо из прайса поставщика. Теперь можно использовать поставщика как источник данных и не загружать товары вручную отдельным файлом.

Если у поставщика включена галочка "Использовать как источник приватной библиотеки", то при обработке прайса товары будут дополнительно попадать в приватную библиотеку компании.

Как это настроить

Откройте настройки поставщика и включите галочку "Использовать как источник приватной библиотеки".

После этого появится отдельная вкладка "Настройка обновления приватной библиотеки", где нужно указать:

• "Источник приватной библиотеки"
• "Шаблон маппинга в приватную библиотеку"

Что это даёт

• данные из прайса поставщика можно сразу сохранять в приватную библиотеку;
• приватная библиотека обновляется автоматически;
• можно настроить отдельный шаблон под каждого поставщика;
• меньше ручной работы при регулярных загрузках.

Особенности

Для yml-прайсов эта схема подходит особенно хорошо: там обычно уже структурированы картинки, свойства и описание, поэтому товары чаще всего сразу попадают в приватную библиотеку в нужном виде и без дополнительной настройки.

Для xlsx-прайсов особенно важно корректно настроить поля, по которым система будет различать товары. Если у товаров нет стабильного кода или данные часто меняются, лучше сначала проверить настройки на небольшом объёме данных.

Если источник приватной библиотеки не выбран, обновление не запустится.

Если при настройке шаблона возникнут сложности, мы поможем его подобрать и проверить.

Также стоит учитывать, что при включенной функции обновление приватной библиотеки будет выполняться при каждом обновлении прайса. Если прайс большой и обновляется часто, это может заметно увеличить время выполнения задачи и в целом повлиять на очередь задач.

Рекомендация

Сначала проверьте настройки на одном поставщике, чтобы убедиться, что товары попадают в приватную библиотеку так, как вы ожидаете. После этого можно включать обновление для остальных поставщиков.