+7 988 353-52-54 kompman1@yandex.ru

г. Краснодар

Парсер товаров

Товары поставщика с его сайта — по каталогу, карте сайта, всему сайту или списку ссылок, с наценкой и по расписанию.

Парсер берёт товары с сайта поставщика, у которого нет выгрузки: название, цену, фото, описание, характеристики, варианты. Он загружает их в ваш магазин и обновляет по расписанию. Раздел: Магазин → Парсер товаров, один проект на поставщика.

Как искать товары

На первом шаге выберите режим.

  • Каталог. Вы указываете страницы разделов, парсер собирает с них ссылки на товары и листает страницы. Подходит большинству магазинов.
  • Карта сайта. Адреса товаров берутся из sitemap.xml. Это самый быстрый и полный способ, если карта есть. Адрес карты можно не указывать: парсер найдёт её сам через robots.txt или по адресу /sitemap.xml. Карту можно и загрузить файлом (.xml, .xml.gz) — например, если поставщик прислал её по почте.
  • Весь сайт. Парсер обходит все страницы, начиная с главной. Товаром считается страница, где нашлись название и цена. Корзина, вход, поиск и сортировки пропускаются сами. Этот режим для сайтов без карты, где каталог рисуется скриптом.
  • Список адресов. Вставьте ссылки на товары (до 5000) или загрузите файл со списком: одна ссылка в строке.

Кнопка «Проверить карту сайта»

Показывает, сколько адресов в карте и из каких они разделов: например, «/product/ — 10 000, /catalog/ — 850». Нажмите «Брать только этот раздел» у раздела с товарами. Если раздел называется привычно (/product/, /tovar/), парсер выберет его сам.

Городской поддомен

Бывает, что сайт поставщика открыт на поддомене города (krasnodar.supplier.ru), а карта сайта ведёт на основной домен. Тогда в поле «Брать товары с адреса» укажите поддомен: товары откроются на нём, с ценами этого города. Проверка карты сама подскажет это и предложит кнопку.

Каталог, который рисует скрипт

На многих современных сайтах ссылок на товары нет в коде страницы: их подгружает скрипт. Если на шаге «Как найти товары» указать, что адрес товара содержит, например, /product/, парсер найдёт адреса и в данных скриптов. Это включено по умолчанию.

Если не сработало, выберите режим «Карта сайта» или «Весь сайт».

Дальше

  • Поля. Название, цена и фото обычно находятся сами. Если нет — укажите их щелчком на странице товара.
  • Обработка. Наценка, округление, замены, пропуски, сопоставление категорий.
  • Расписание. Полное обновление и быстрое — только цены и остатки.

Вежливый парсер Парсер делает паузы между запросами и соблюдает robots.txt. Он не обходит защиту сайтов (капчи, Cloudflare и т. п.). Если поставщик закрыл сайт, парсер остановится и подготовит письмо с просьбой открыть доступ или прислать выгрузку.

kb.helpful_q