Jak łatwo zeskrobać Alibabę?

Alibaba ma oszałamiający monopol na chińskim rynku e-commerce. Ponieważ Chiny mają globalną reputację producenta ton towarów, Alibaba stanowi żyzny grunt dla marketerów, którzy chcą eksplorować chiński rynek, znaleźć tanie produkty i osiągnąć poważne zyski.

Aby jednak wykorzystać tę żyłę złota, musisz wiedzieć, jak scrapować produkty Alibaba. Na szczęście ten poradnik Ci w tym pomoże.

Pokażemy Ci, jak scrapować produkty Alibaba za pomocą scrapera bez kodu. Ale zanim do tego przejdziemy, porozmawiajmy o tym, co Alibaba myśli o scrapowaniu stron internetowych.

Czy scrapowanie Alibaby jest legalne?

Zgodnie z Warunkami korzystania z serwisu Alibaba , podejmowanie prób „systematycznego pobierania” treści z serwisu w celu tworzenia lub kompilowania zbiorów, baz danych lub katalogów bez pisemnej zgody Alibaba.com jest surowo zabronione. Obejmuje to wykorzystywanie robotów, pająków, urządzeń automatycznych, a nawet procesów ręcznych do takich celów.

Stanowisko Alibaba zaczyna nabierać sensu, gdy weźmiemy pod uwagę, że w czerwcu 2021 r. platforma stanęła w obliczu poważnego wyciek danych 1,1 miliarda elementów danych użytkowników, w tym nazw użytkowników i numerów telefonów komórkowych.

Biorąc pod uwagę te okoliczności, jasne jest, że Alibaba poważnie traktuje ochronę treści swojej witryny i prywatność swoich użytkowników.

Należy jednak w tym miejscu rozróżnić nieautoryzowane scrapowanie danych i etyczne scrapowanie sieci. Omawiane naruszenie danych dotyczyło danych osobowych użytkowników, które podlegają nieautoryzowanemu scrapowaniu sieci.

Z kolei web scraping, wykonywany etycznie i w legalnych celach, opiera się na innych podstawach. Etyczne web scraping koncentruje się na gromadzeniu publicznie dostępnych danych, takich jak szczegóły produktów, bez narażania danych osobowych ani kondycji witryny.

Na przykład wyszukiwanie produktów i analiza rynku lub konkurencji są często uważane za uzasadnione podstawy web scrapingu Alibaba lub dowolnej innej platformy.

Krótko mówiąc, tak, możesz scrapować Alibabę, ale upewnij się, że robisz to z uzasadnionych powodów i z zachowaniem bezpiecznych praktyk.

I właśnie o tym jest ten artykuł. Pokażemy Ci, jak zeskrobać publicznie dostępne dane Alibaby, nie łamiąc ich wytycznych.

Jaki jest najłatwiejszy sposób na zeskrobanie danych Alibaby?

Ponieważ marketerzy nie są mistrzami w kodowaniu i nie mają umiejętności zawodowych, zeskrobanie danych Alibaby z internetu staje się dla nich wyzwaniem.

Właśnie tutaj bezkodowe scrapery Alibaba wypełniają tę lukę. Chociaż istnieje wiele rozwiązań, na potrzeby tego poradnika wybraliśmy darmowy scraper Alibaba o nazwie Octoparse.

Bezkodowy scraper Alibaba

Używając Octoparse, pokażemy Ci, jak scrapować produkty Alibaba ze strony kategorii. Możesz jednak zastosować tę samą metodę dla dowolnej strony witryny Alibaba. Pomijając to, zacznijmy nasz przewodnik.

Dwa sposoby scrapowania Alibaby za pomocą Octoparse

Octoparse oferuje dwa sposoby scrapowania danych z dowolnej platformy. Możesz skorzystać z gotowego scrapera z galerii szablonów lub stworzyć własne zadanie scrapowania danych z sieci dla dowolnej platformy.

Wyszukajmy więc w ich galerii szablonów odpowiedni szablon ekstraktora Alibaba. Wystarczy nacisnąć przycisk „Szablony” i wpisać „Alibaba”. w pasku wyszukiwania.



Ojej, wygląda na to, że dotarliśmy do ślepego zaułka. Octoparse nie ma w swoim arsenale gotowego narzędzia Alibaba Scraper.

Jak teraz scrapować Alibabę? Tutaj z pomocą przychodzi druga metoda oferowana przez Octoparse.

Będziemy musieli stworzyć własny scraper Alibaba, co będzie równie proste. Zacznijmy więc przewodnik krok po kroku.


Krok 1: Pobierz i zainstaluj Octoparse

Octoparse jest dostępny jako program, więc pobierz najnowszą wersję Octoparse ze strony pobierania.

Po zakończeniu pobierania uruchom instalator i zainstaluj Octoparse, postępując zgodnie z instrukcjami wyświetlanymi na ekranie.

Krok 2: Załóż konto

Aby korzystać z Octoparse, musisz się zarejestrować na platformie. Możesz utworzyć nowe konto, używając swojego adresu e-mail i silnego hasła lub korzystając z konta Google lub Microsoft, aby szybko się zarejestrować.



Krok 3: Skopiuj i wklej adres URL strony Alibaba

Otwórz Octoparse i wklej adres URL strony Alibaba, którą chcesz zeskrobać, w pasku wyszukiwania. Może to być dowolna strona, strona produktu, strona kategorii, a nawet strona wyników wyszukiwania.

Do demonstracji wybraliśmy stronę kategorii Słuchawki douszne do gier.



Po wklejeniu linku naciśnij przycisk Start znajdujący się obok paska wyszukiwania.



Krok 4: Pozwól Octoparse załadować stronę i automatycznie wykryć pola danych

Po naciśnięciu przycisku Start w poprzednim kroku, Octoparse rozpocznie ładowanie strony, a funkcja automatycznego wykrywania rozpocznie skanowanie strony w poszukiwaniu danych do scrapbookingu. Zauważysz panel „Wskazówki” unoszący się nad stroną i pokazujący postęp automatycznego wykrywania.

Automatyczne wykrywanie może potrwać chwilę, w zależności od długości strony i ilości danych, więc wstrzymaj się do jego zakończenia.



Po zakończeniu automatycznego wykrywania zauważysz, że pola danych każdego produktu zostały podświetlone na zielono, co oznacza, że dane te zostały automatycznie wybrane do scrapowania.



Dla ułatwienia Octoparse wyświetla również wszystkie możliwe do pobrania dane na stronie internetowej w tabeli Podgląd danych u dołu strony, zawierającej osobne kolumny dla każdego typu danych.

Przyjrzyj się bliżej tej tabeli, a zauważysz, że Octoparse wybrał wszystkie rodzaje danych produktu, w tym przydatne informacje, takie jak nazwa produktu, cena, ocena i zdjęcie, ale także nieistotne dane, takie jak pogrubione słowa kluczowe i tekst przycisków.

Poprawmy to w następnym kroku.

Krok 5: Usuń nieistotne kolumny

Użyj poziomego suwaka pod tabelą, aby wyświetlić wszystkie kolumny. Wybierz kolumny, które Twoim zdaniem zawierają zbędne dane.

Na przykład zauważyliśmy, że kolumny o nazwach Title1, Keywords, Mark i kilka innych nie dodawały żadnej wartości.





Aby usunąć kolumnę, po prostu najedź kursorem myszy na jej nazwę i naciśnij wyświetlony przycisk usuwania. Zrób to samo ze wszystkimi niepotrzebnymi kolumnami.

Krok 6: Utwórz przepływ pracy

Alibaba Scraper będzie wkrótce gotowy. W panelu wskazówek kliknij przycisk „Utwórz przepływ pracy”.



Spowoduje to wygenerowanie schematu blokowego procesu scrapowania. Schemat blokowy przedstawia sekwencję kroków scrapowania strony Alibaby. Możesz dostosować przepływ pracy, dodając lub usuwając kroki. Na przykład, aby zeskrobać dane wykraczające poza pierwsze miejsce, możesz dodać paginację do przepływu pracy.

Krok 7: Zmień nazwy etykiet tabeli

Chociaż Octoparse automatycznie oznaczył kolumny tabeli, nie wszystkie mają prawidłowe nazwy. Na przykład kolumna zawierająca adres URL firmy została błędnie nazwana Year_URL. Kolumna z oceną również została oznaczona jako View (Widok). Podobnie, niektóre inne kolumny mogłyby skorzystać z niewielkiej zmiany nazwy.



Aby zmienić nazwę kolumny, kliknij dwukrotnie jej nazwę i wpisz prawidłową nazwę.



Ten krok jest konieczny, ponieważ ułatwi odwoływanie się do kolumn w przyszłości.

Krok 8: Uruchom Alibaba Scraper

Po upewnieniu się, że wszystko jest w porządku i scraper Alibaba jest gotowy do użycia, czas go uruchomić.

Naciśnij przycisk „Zapisz” znajdujący się w prawym górnym rogu ekranu. Teraz rozpocznij scrapowanie Alibaby, naciskając przycisk „Uruchom” obok przycisku „Zapisz”.



Naciśnięcie przycisku „Uruchom” spowoduje otwarcie okna podręcznego z dwiema opcjami scrapowania Alibaby. Możesz wybrać scrapowanie lokalne lub w chmurze.