Wie kann man Alibaba auf einfache Weise scrapen?

Alibaba hat ein erstaunliches Monopolim chinesischen E-Commerce-Markt. Da China weltweit für seine Massenproduktion bekannt ist, bietet Alibaba einen fruchtbaren Boden für Vermarkter, die den chinesischen Markt erkunden, günstige Produkte finden und hohe Gewinne erzielen möchten.

Um diese Goldmine zu erschließen, müssen Sie wissen, wie man Alibaba scrapt. Zum Glück haben wir mit diesem Leitfaden alles für Sie.

Wir zeigen Ihnen, wie Sie Alibaba-Produkte mit einem No-Code-Scraper scrapen. Doch bevor wir darauf eingehen, wollen wir darüber sprechen, was Alibaba zum Thema Web Scraping hält.

Ist das Scraping von Alibaba legal?

Gemäß den Nutzungsbedingungen von Alibaba Nutzungsbedingungenist das „systematische Abrufen“ von Inhalten von der Site zum Erstellen oder Zusammenstellen einer Sammlung, Datenbank oder eines Verzeichnisses ohne die schriftliche Genehmigung von Alibaba.com strengstens untersagt. Dazu gehört der Einsatz von Robotern, Spidern, automatischen Geräten oder sogar manuellen Prozessen für solche Zwecke.

Alibabas Haltung wird verständlicher, wenn man bedenkt, dass die Plattform im Juni 2021 mit einem schwerwiegenden Datenleck konfrontiert war.Datenleck mit 1,1 Milliarden Nutzerdaten, darunter Benutzernamen und Handynummern.

Angesichts dieser Umstände ist es klar, dass Alibaba den Schutz seiner Website-Inhalte und die Privatsphäre seiner Nutzer ernst nimmt.

Hier ist jedoch zwischen unberechtigtem Daten-Scraping und ethischem Web-Scraping zu unterscheiden. Der fragliche Datendiebstahl betraf personenbezogene Nutzerdaten, die unter unberechtigtes Web-Scraping fallen.

Web Scraping hingegen basiert auf anderen Grundlagen, wenn es ethisch und zu legitimen Zwecken durchgeführt wird. Ethisches Web Scraping konzentriert sich auf die Erfassung öffentlich verfügbarer Daten wie Produktdetails, ohne personenbezogene Daten oder die Integrität der Website zu gefährden.

Beispielsweise gelten die Produktsuche sowie Markt- oder Wettbewerbsanalysen oft als legitime Gründe für das Web Scraping von Alibaba oder anderen Plattformen.

Kurz gesagt: Ja, Sie können Alibaba scrapen, aber stellen Sie sicher, dass dies aus legitimen Gründen und unter Verwendung sicherer Praktiken geschieht.

Und genau darum geht es in diesem Artikel. Wir zeigen Ihnen, wie Sie Alibaba nach öffentlich verfügbaren Daten durchsuchen, ohne gegen deren Richtlinien zu verstoßen.

Wie kann man Alibaba am einfachsten durchsuchen?

Da Marketer keine Allrounder sind, die sich mit Programmieren auskennen und gleichzeitig in ihrem Beruf kompetent sind, wird das Web Scraping von Alibaba für sie zu einer Herausforderung.

Hier kommen No-Code-Alibaba-Scraper ins Spiel, um diese Lücke zu schließen. Obwohl es viele Lösungen gibt, haben wir uns für diesen Leitfaden für den kostenlosen Alibaba-Scraper Octoparse entschieden.

No-Code-Alibaba-Scraper

Mit Octoparse zeigen wir Ihnen, wie Sie Alibaba-Produkte von einer Kategorieseite scrapen. Sie können diese Methode jedoch für jede Seite der Alibaba-Website verwenden. Lassen Sie uns nun mit unserem Leitfaden beginnen.

Zwei Möglichkeiten zum Scrapen von Alibaba mit Octoparse

Octoparse bietet zwei Möglichkeiten zum Scrapen von Plattformen. Sie können entweder einen vorgefertigten Scraper aus der Vorlagengalerie verwenden oder eine benutzerdefinierte Web-Scraping-Aufgabe für jede Plattform erstellen.

Suchen wir also in der Vorlagengalerie nach einer passenden Alibaba-Extraktor-Vorlage. Klicken Sie einfach auf die Schaltfläche „Vorlagen“ und geben Sie „Alibaba“ ein. in die Suchleiste ein.



Oh-oh, hier sind wir wohl in einer Sackgasse gelandet. Octoparse hat keinen vorgefertigten Alibaba Scraper im Angebot.

Wie kann man nun Alibaba scrapen? Hier bietet sich die zweite Methode von Octoparse an.

Wir müssen einen benutzerdefinierten Alibaba-Scraper erstellen, was genauso einfach ist. Beginnen wir also mit der Schritt-für-Schritt-Anleitung.


Schritt 1: Octoparse herunterladen und installieren

Octoparse ist ein Softwareprogramm. Laden Sie daher die neueste Version von der Downloadseite.

Führen Sie nach Abschluss des Downloads das Setup aus und installieren Sie Octoparse gemäß den Anweisungen auf dem Bildschirm.

Schritt 2: Konto erstellen

Um Octoparse nutzen zu können, müssen Sie sich auf der Plattform registrieren. Sie können ein neues Konto erstellen, indem Sie entweder Ihre E-Mail-Adresse verwenden und ein sicheres Passwort festlegen oder sich schnell mit Ihrem Google- oder Microsoft-Konto anmelden.



Schritt 3: Alibaba-Seiten-URL kopieren und einfügen

Öffnen Sie Octoparse und fügen Sie die Alibaba-Seiten-URL, die Sie scrapen möchten, in die Suchleiste ein. Es kann sich um eine beliebige Seite handeln, z. B. eine Produktseite, eine Kategorieseite oder sogar eine Suchergebnisseite.

Für die Demonstration haben wir die Kategorieseite für Gaming-In-Ear-Kopfhörer ausgewählt.



Nachdem Sie den Link eingefügt haben, klicken Sie auf die Schaltfläche „Start“ neben der Suchleiste.



Schritt 4: Octoparse lädt die Seite und erkennt Datenfelder automatisch

Nachdem Sie im vorherigen Schritt auf die Schaltfläche „Start“ geklickt haben, lädt Octoparse die Seite und die automatische Erkennung durchsucht die Seite nach scrapbaren Daten. Sie werden bemerken, dass ein Tipps-Panel über der Seite schwebt und den Fortschritt der automatischen Erkennung anzeigt.

Die automatische Erkennung kann je nach Seitenlänge und Datenmenge einige Zeit in Anspruch nehmen, also warten Sie, bis sie abgeschlossen ist.



Sobald die automatische Erkennung abgeschlossen ist, werden Sie feststellen, dass die Datenfelder jedes Produkts grün hervorgehoben wurden, was darauf hinweist, dass diese Daten automatisch zum Scraping ausgewählt wurden.



Zur Vereinfachung zeigt Octoparse alle scrapbaren Daten auf der Webseite in einer Datenvorschautabelle am unteren Seitenrand an, die für jeden Datentyp eine eigene Spalte enthält.

Bei genauerem Hinsehen fällt auf, dass Octoparse alle möglichen Produktdaten ausgewählt hat, darunter nützliche Informationen wie Produkttitel, Preis, Bewertung und Bild, aber auch irrelevante Daten wie fettgedruckte Schlüsselwörter und Schaltflächentexte.

Das beheben wir im nächsten Schritt.

Schritt 5: Irrelevante Spalten löschen

Verwenden Sie den horizontalen Schieberegler unter der Tabelle, um alle Spalten anzuzeigen. Wählen Sie die Spalten aus, die Ihrer Meinung nach unnötige Daten enthalten.

Beispielsweise haben wir festgestellt, dass die Spalten „Titel1“, „Schlüsselwörter“, „Marke“ und einige weitere keinen Mehrwert brachten.





Um eine Spalte zu löschen, bewegen Sie einfach die Maus über den Spaltennamen und drücken Sie die angezeigte Entf-Schaltfläche. Wiederholen Sie diesen Vorgang für alle nicht benötigten Spalten.

Schritt 6: Workflow erstellen

Der Alibaba Scraper ist bald einsatzbereit. Klicken Sie im Tipps-Bereich auf „Workflow erstellen“. Schaltfläche.



Dadurch wird das Flussdiagramm für den Scraping-Prozess erstellt. Das Flussdiagramm zeigt die Abfolge der Schritte zum Scraping der Alibaba-Seite. Sie können den Workflow anpassen, indem Sie Schritte hinzufügen oder entfernen. Um beispielsweise Daten über die erste Stelle hinaus zu scrapen, können Sie dem Workflow eine Paginierung hinzufügen.

Schritt 7: Tabellenbeschriftungen umbenennen

Obwohl Octoparse die Tabellenspalten automatisch beschriftet hat, sind nicht alle korrekt benannt. Beispielsweise wurde die Spalte mit der Firmen-URL fälschlicherweise „Jahr_URL“ genannt. Die Bewertungsspalte trägt ebenfalls die Bezeichnung „Ansicht“. Ebenso könnten einige andere Spalten eine kleine Umbenennung vertragen.



Um eine Spalte umzubenennen, doppelklicken Sie auf den Spaltennamen und schreiben Sie den richtigen Namen.



Dieser Schritt ist notwendig, da er später beim Referenzieren der Spalten hilfreich ist.

Schritt 8: Alibaba Scraper starten

Nachdem Sie sichergestellt haben, dass alles in Ordnung ist und Ihr Alibaba Scraper einsatzbereit ist, können Sie ihn starten.

Klicken Sie oben rechts auf dem Bildschirm auf die Schaltfläche „Speichern“. Starten Sie nun das Scraping von Alibaba, indem Sie auf „Ausführen“ neben „Speichern“ klicken.



Durch Klicken auf „Ausführen“ wird ein Popup-Fenster mit zwei Optionen zum Scraping von Alibaba geöffnet. Sie können Alibaba entweder lokal oder in der Cloud scrapen.