Сторонние парсеры

Парсинг удобен, когда нужно быстро загрузить базу поставщика в PHPShop. У нас есть интеграция с этими сервисами. Для загрузки базы с нуля, больше подходит Q-parser:

Q-Parser.ru

Для загрузки каталогов поставщиков с помощью Q-Parser необходимо выполнить несколько простых шагов:

1. Регистрируемся и выбираем тариф

Зарегистрируйтесь в сервисе. В Каталоге сайтов выберите сайт поставщика, на основе товаров которого, вы хотите сформировать прайс. Можно выбрать бесплатный сайт для загрузки товаров или оплатите тариф, если выбрали платный сайт. Цены на Q-Parser довольно демократичные, к слову, заказ парсинга одного сайта у фрилансера обойдется в среднем в 2-4 тыс. рублей.

2. Загружаем товары с сайта поставщика

Загрузите товары с сайта Поставщика. Для этого необходимо перейти к загрузке товаров с выбранного сайта и выбрать галочками нужные категории, либо вставить ссылки с сайта поставщика, содержащие списки товаров. Если вы зарегистрированы на сайте поставщика, то для получения оптовых цен, в специально отведенных полях, введите логин/пароль, который вы указывали при регистрации на сайте поставщика. Нажимаем Начать загрузку.

YML, CSV, Excel также можно спарсить в наш формат тут.

3. Формируем прайс

После нажатия загрузки, будет сформирован прайс. После окончания загрузки, вы увидите список полученных товаров и их свойств. Нажмите Выгрузить и ❗️выберите формат PHPShop.

Перед выгрузкой прайса, вы можете внести изменения в стоимость товара: сменить валюту, увеличить/уменьшить стоимость, округлить цену. Когда прайс сформирован, нажмите Выгрузить и выберите формат PHPShop в списке. Нажмите Показать настройки.

Выгрузка изображений - поставьте Внешними ссылками, если хотите загрузить в PHPShop сразу с файлом. При этом, фото будут загружаться ресурсами вашего хостинга, поэтому на дешевых тарифах мы рекомендуем включить Умную загрузку и поставить 50 товаров с интервалом в минуту.

💡 Если товаров много, лучше скачать фото в архиве и распакованную папку с фото вручную залить на сервер в папку /UserFiles/Image/.

Сами картинки не нужно доставать из папок, копируем всю папку на /UserFiles/Image/, путь будет /UserFiles/Image/распакованная-папка/содержимое-с-папками-и-фото.

При ручном способе загрузки, не работает автоматическое создание папок по именам каталогов и переименования фото по именам товаров, как при ручном добавлении товара через админпанель по кнопке Загрузить.

Нажмите Выгрузить товары. Прайс состоит из нескольких файлов: категории товаров и сами товары по 500 позиций. Сначала импортируются категории, затем товары.

4. Загружаем прайс в PHPShop

Загружаем каталоги: в меню База - Импорт данных выберите тип данных Каталоги и выберите файл каталогов с префиксом -categories.csv.

Действие Создать, UTF-8 (на Q-parser обычно кодировка файла utf-8).

Нажмите Выполнить.

Загружаем товары:

Перед загрузкой, зайдите в меню Настройки - Изображения и проверьте настройки, по которым будут загружены фото:

Нарезку и отображение в webp не поддерживает наш сервис аренды Shopbuilder.ru.

1. В меню База - импорт данных тип данных Товары, нажмите Загрузить файл.

2. Действие - Создание. Кодировка: UTF-8 (или в которой сохраняли csv)

3. Включите опции Обработка изображений и Загрузка изображений, если на Q-parser указывали выгрузку Ссылками.

4. Нажмите Выполнить.

Если вы ошиблись с загрузкой фото, можно удалить фото у всех товаров, для последующей перезагрузки через csv, в База -SQL запрос к базе выберите команду Удалить фото у товаров

Частые ошибки

Картинки не загружаются по ссылкам

Указан флаг загрузки изображений, но они все равно проставляются внешними ссылками.

Решение:

В настройках хостинга включите для PHP директиву allow_url_fopen on

Дубли товаров с одинаковыми артикулами

Часто, один и тот же товар размещен в нескольких каталогах и имеет один артикул. При парсинге сайта, данный товар будет размножен – будет находиться в каждом каталоге, с одинаковым артикулом. При загрузке в PHPShop создастся только 1 товар с этим артикулом.у Поэтому, конечная цифра загруженных товаров может не совпадать с количеством товара в ваших файлах.

Решение:

При парсинге на Q-parser заранее удалите дубли артикулов, выберите Фильтр - удалить дубли - артикул - https://q-parser.ru/howto/mods/deduplication.

Или в Excel удалите дубли вручную, подсветив их по команде:

Дублирование url каталогов

Если в базе товаров имеются одинаковые по названию каталоги, которые находятся в разных родительских каталогах, ссылка url у них будет одинаковая, из-за этого на витрине один из каталогов будет выводиться с ошибкой. Также возможны проблемы с меню каталога при раскрытии.

Решение:

Зайдите в любой из одинаковых каталогов, и переименуйте его url в карточке редактирования каталога, вкладка Модули, например, добавьте 2 в конце:

Настраиваем редиректы

Если Q-Parser используется для миграции сайта со старой CMS на PHPShop, то есть возможность автоматически загрузить старые SEO-ссылки товаров, чтобы срабатывал автоматический редирект со старых ссылок на новые. Для этого нужно включить и настроить модуль Seo Url Pro. Это поможет сохранению веса сайта в поисковой выдаче.

Cloudparser.ru

С помощью Cloudparser.ru удобнее обновлять цены, для загрузки базы с нуля подходит Q-parser.ru

1. Регистрируемся и выбираем тариф

Для начала нужно зарегистрироваться в сервисе. В Каталоге сайтов выбрать сайт поставщика, на основе товаров которого, вы хотите сформировать прайс. Оплатить тариф, если вы выбрали платный сайт (можно выбрать бесплатный сайт). Цены на Облачном парсере довольно демократичные, к слову, заказ парсинга одного сайта у фрилансера обойдется в среднем в 2-4 тыс. рублей.

2. Загружаем товары с сайта

Для этого необходимо перейти к загрузке товаров с выбранного сайта и вставить ссылки с сайта поставщика, содержащие списки товаров. Если вы зарегистрированы на сайте поставщика, то для получения оптовых цен, в специально отведенных полях, введите логин/пароль, который вы указывали при регистрации на сайте поставщика. Нажимаем Начать загрузку.

3. Формируем прайс

После окончания загрузки, вы увидите список полученных товаров и их свойств.

Перед выгрузкой прайса, вы можете внести изменения в стоимость товара: сменить валюту, увеличить/уменьшить стоимость, округлить цену.

Когда прайс сформирован, нужно его скачать, предварительно выбрав нужный формат загрузки Формат загрузки PHPShop.

Прайс состоит из нескольких файлов: категории товаров и товары файлами по 500 позиций. Сначала импортируются категории, затем товары.

4. Загружаем прайс в PHPShop

Подробнее о загрузке прайса можно посмотреть в разделе Наполнение через Excel. Для автоматической загрузки изображений с внешних ресурсов (http://test.ru/img/imageXXX.jpg) на внутренние (/UserFiles/Image/imageXXX.jpg) можно использовать PriceLoader. Также возможен автоматический ресайз изображений для превью и проставление копирайта.

Удаление битых картинок из базы

В меню База - Обслуживание - Проверка изображений можно увидеть фото, которые присутствуют в товарах, но физически на сервере не существуют.

Такое часто бывает, когда для наполнения магазина используют парсеры. Чтобы удалить битые картинки, просто выделите их галкой и нажмите Удалить.

Добавление превью к товарам

Превью товаров создаются автоматически при загрузке, если опция включена в Настройки - Изображения и сами фото размещены на сервере до импорта.

Если импорт запущен до размещения фото на сервере, превью не нарежется автоматически, тогда можно выполнить команду вручную.

Зайдите в меню База - SQL запрос к базе и вставьте строку, нажмите Выполнить.

update phpshop_products set pic_small=pic_big

Last updated