Парсер товаров с Taobao

Автор: Роман Чернышов    Опубликовано: 8 ноября 2024

Доброго времени друзья! В рамках портфолио спешу поделиться небольшой заметкой о моей недавней разработке, а именно парсере(скрипт сбора данных) товаров с сайта Taobao. Скрипт умеет работать по списку поисковых ключей, по списку ссылок или в режиме глобального парсинга(обходить все каталоги и товары, что встретит на своем пути). Результаты парсинга можно выгрузить в базу дынных MySQL, таблицу Excel или сразу импортировать на ваш сайт.

Какие данные можно собрать

Парсер может собирать все данные предоставляемые в карточке товара:

• Название товара;
• Описание;
• Изображения;
• Артикул;
• Цена;
• Ссылка на карточку;
• Название продавца;
• Рейтинг продавца;
• Информация по гарантии/возврату;
• Прочее.

Технические параметры

Парсер работает в режиме эмуляции браузера, с возможность авторизации на сайте. Скорость парсинга товаров от 10000 в сутки, при этом скорость можно увеличить за счет многопоточности (но это будет требовать больше ресурсов сервера). При парсинге могут использовать прокси.

Формат выгрузки данных: MySQL, CSV, XLS, XLSX, TXT, DOC.

Условия предоставляения

Парсер предоставляется в двух вариантах исполнения:

1. С передачей самого скрипта(исходников парсера), для последующего развертывания на своем сервере, плюс инструкция. При этом вы на себя берете всю техническую сторону: сервер, настройку, поддержку.
2. Без передачи исходников, в виде работающего парсера на моем сервере с помесячной арендой (то есть, тут вы покупаете не сам скрипт, а результат его работы, который будет предоставлять в виде готовой базы с желаемым вами интервалом).

JavaScript / jQuery, mySQL, PHP     taobao, парсинг