Как парсить Alibaba простым способом?

Alibaba обладает ошеломляющей монополией на китайском рынке электронной коммерции. Поскольку Китай имеет мировую репутацию производителя тонн товаров, Alibaba - благодатная почва для маркетологов, желающих исследовать китайский рынок, найти дешевые товары и получить серьезную прибыль.

Но чтобы воспользоваться этой золотой жилой, вам нужно знать, как парсить Alibaba. К счастью, мы подготовили для вас это руководство.

Мы покажем вам, как парсить товары Alibaba с помощью парсинга без кода. Но прежде чем приступить к этому, давайте поговорим о том, что Alibaba думает о веб-скраппинге.

Законно ли парсить Alibaba?

Согласно Условиям использования Alibaba, "систематическое извлечение" содержимого сайта с целью создания или составления коллекции, базы данных или каталога без письменного разрешения Alibaba.com строго запрещено. Это включает в себя использование роботов, пауков, автоматических устройств или даже ручных процессов для таких целей.

Позиция Alibaba становится более логичной, если подумать о том, что в июне 2021 года платформа столкнулась с серьезной проблемой потери данных - 1,1 миллиарда пользовательских данных, включая имена пользователей и номера мобильных телефонов.

Учитывая эти обстоятельства, очевидно, что Alibaba серьезно относится к защите содержимого своего сайта и конфиденциальности своих пользователей.

Однако здесь важно провести различие между несанкционированным парсингом данных и этичным веб-скраппингом. В данном случае утечка данных была направлена на личную информацию пользователей, что подпадает под несанкционированный веб-скрепинг.

В отличие от этого, парсинг в Интернете, когда он выполняется с соблюдением этических норм и в законных целях, стоит на других основаниях. Этичный веб-скраппинг направлен на сбор общедоступных данных, таких как информация о продукте, без ущерба для личной информации и здоровья сайта.

Например, поиск товаров и анализ рынка или конкурентов часто считаются законными основаниями для того, чтобы парсить Alibaba или любую другую платформу.

Короче говоря, да, вы можете парсить Alibaba, но убедитесь, что это делается по законным причинам и с использованием безопасных методов.

Именно об этом и пойдет речь в этой статье. Мы покажем вам, как парсить Alibaba в поисках общедоступных данных, не нарушая их рекомендаций.

Какой способ парсинга Alibaba самый простой?

Поскольку маркетологи не являются универсальными специалистами в области кодирования и при этом хорошо разбираются в своей профессии, парсинг Alibaba становится для них сложной задачей.

Именно здесь на помощь приходят инструменты для парсинга Alibaba без кода. Хотя существует множество решений, мы выбрали для этого руководства бесплатный инструмент для парсинга Alibaba под названием Octoparse.

Бескодовый парсинг Alibaba

С помощью Octoparse мы покажем вам, как парсить товары Alibaba со страницы категории. Но вы можете использовать этот же метод для любой страницы сайта Alibaba. На этом откланяемся, давайте начнем наше руководство.

Два способа парсить Alibaba с помощью Octoparse

Octoparse предлагает два способа парсить любые платформы. Вы можете использовать готовый парсинг из галереи шаблонов или создать собственную задачу парсинга для любой платформы.



Поэтому давайте поищем в их галерее шаблонов подходящий шаблон экстрактора Alibaba. Просто нажмите кнопку "Шаблоны" и введите "Alibaba" в строке поиска.



Ох, похоже, мы зашли в тупик. В арсенале Octoparse нет встроенного парсинга Alibaba.

Как же теперь парсить Alibaba? Вот тут-то и пригодится второй метод, предлагаемый Octoparse.

Нам придется сделать собственный парсинг Alibaba, что будет так же просто. Итак, давайте начнем пошаговое руководство.

Шаг# 1: Загрузите и установите Octoparse

Octoparse поставляется в виде программного обеспечения, поэтому получите последнюю версию Octoparse с их страницы загрузки.

После завершения загрузки запустите программу и установите Octoparse, следуя инструкциям на экране.

Шаг# 2: Зарегистрируйте аккаунт

Чтобы использовать Octoparse, необходимо зарегистрироваться на платформе. Вы можете создать аккаунт, используя свой адрес электронной почты и придумав надежный пароль, либо используя свою учетную запись Google или Microsoft для быстрой регистрации.

Шаг# 3: Скопируйте и вставьте URL страницы Alibaba

Откройте Octoparse и вставьте в строку поиска URL-адрес целевой страницы Alibaba, которую вы хотите парсить. Это может быть любая страница, страница товара, страница категории или даже страница результатов поиска.

Для демонстрации мы выбрали страницу категории "Игровые наушники-вкладыши".



После того как вы вставили ссылку, нажмите кнопку " Начать", расположенную напротив строки поиска.

Шаг# 4:Позвольте Octoparse загружать страницу и автоматически определять поля данных

После нажатия кнопки " Начать" в предыдущем шаге Octoparse начнет загрузку страницы, а автоопределение начнет сканировать ее на предмет пригодных для использования данных. Вы заметите, что на странице появилась панель Tips, на которой отображается прогресс автообнаружения.

Автоопределение может занять некоторое время в зависимости от длины страницы и объема данных, так что не торопитесь,, пока оно не закончится.



После завершения автоматического обнаружения вы заметите, что поля данных каждого продукта были выделены зеленым цветом, что означает, что эти данные были автоматически выбраны для парсинга.



Для удобства Octoparse также отображает все данные, которые можно отсканировать на веб-странице, в таблице Data Preview в нижней части страницы с отдельными колонками для каждого типа данных.

Если внимательно посмотреть на эту таблицу, то можно заметить, что Octoparse отобразил всевозможные данные о продукте, включая полезную информацию, такую как название, цена, рейтинг и изображение, но также и нерелевантные данные, такие как ключевые слова, выделенные жирным шрифтом, и текст кнопок.

Давайте исправим это в следующем шаге.

Шаг# 5: Удалите неактуальные столбцы

Используйте горизонтальный ползунок, расположенный под таблицей, чтобы просмотреть все столбцы. Сократите список столбцов, которые, по вашему мнению, содержат ненужные данные.

Например, мы увидели, что столбцы с названиями Title1, Keywords, Mark и некоторыми другими не приносят никакой пользы.





Чтобы удалить колонку, просто наведите курсор на ее название и нажмите появившуюся кнопку удаления. Проделайте это со всеми ненужными колонками.

Шаг# 6: Создайте рабочий процесс

Парсинг Alibaba вот-вот будет готов. На панели подсказок нажмите кнопку "Создать рабочий процесс".



В результате будет создана блок-схема процесса парсинга. На схеме показана последовательность шагов, необходимых для парсинга страницы Alibaba. Вы можете настроить рабочий процесс, добавив или удалив шаги. Например, чтобы парсить данные не только с первого места, можно добавить в рабочий процесс пагинацию.

Шаг# 7: Переименуйте заголовки таблиц

Хотя Octoparse автоматически промаркировал столбцы таблицы, не все из них имеют правильные названия. Например, столбец, содержащий URL-адрес компании, был неправильно назван Year_URL. Столбец рейтинга также обозначен как View. Аналогично, некоторые другие столбцы можно немного переименовать.



Чтобы переименовать столбец, дважды щелкните по его названию и введите новое имя.



Этот шаг необходим, так как он поможет в будущем при обращении к столбцам.

Шаг# 8: Запустите парсинг Alibaba

После того как вы убедились, что все в порядке и ваш парсинг Alibaba готов к работе, пришло время запустить его.

Нажмите кнопку Сохранить, расположенную в правом верхнем углу экрана. Теперь начните парсинг Alibaba, нажав кнопку "Запустить" рядом с кнопкой "Сохранить".



При нажатии кнопки "Запустить" появится всплывающее окно с двумя вариантами парсинга Alibaba. Вы можете выбрать локальный парсинг или парсинг в облаке.



Мы решили запустить парсинг локально.



Теперь настроенный вами парсинг Alibaba начнет работу и извлечет подробную информацию о всех товарах на странице.

Шаг# 9: Экспортируйте результаты

По окончании выполнения вам будет предложено загрузить парсированные данные.



Нажмите кнопку "Экспорт", и появится еще одно всплывающее окно, где будут представлены все варианты экспорта. Octoparse позволяет экспортировать обработанные данные в форматы Excel, CSV, HTML, JSON и XML. Вы также можете экспортировать файл в онлайн-базы данных.



Поздравляем, парсинг Alibaba завершен. Теперь вперед и пользуйтесь результатами обработки данных Alibaba.

Защитите свой парсинг на Alibaba от системы защиты от ботов

Вы уже знаете, как парсить Alibaba, но все же есть одна загвоздка. Помните масштабную утечку данных Alibaba? Возможно, из-за нее они стали очень чувствительны к ботам. Если вы не будете осторожны, парся большие объемы данных, ваш краулер Alibaba может сработать как антибот и в итоге будет заблокирован.

Как же парсить Alibaba или любой другой сайт, не подвергаясь блокировке? Единственный надежный способ - использовать антидетект браузер, например AdsPower.

AdsPower маскирует ваш парсинг Alibaba под человека, используя такие приемы, как ротация IP-адресов, задержка запросов и настройка пользовательского агента. Таким образом, Alibaba не догадается, что вы на самом деле бот.

И цены на AdsPower тоже не подведут. Всего за 4,5 доллара в месяц вы сможете оставаться незамеченным и без проблем парсить веб-сайты.

Так что загружайте AdsPower прямо сейчас, регистрируйтесь бесплатно и начинайте парсить, не опасаясь быть пойманным.