Cum să extragi date de pe Etsy cu și fără cod?

Etsy este o platformă pentru produse lucrate manual, articole vintage și obiecte artizanale. Cu aproape500 de milioanevizite lunare, este o piață extrem de profitabilă pentru vânzătorii care doresc să își dezvolte afacerea.

A ști ce se vinde bine, a urmări cele mai recente tendințe și a analiza concurența este esențial pentru dezvoltarea afacerii tale.

Totuși, cernerea manuală a milioane de liste de produse Etsy este prea multă muncă, dacă nu chiar imposibilă.

Atunci va trebui să extrageți date de pe Etsy. Procedând astfel, veți primi o mulțime de date valoroase de pe Etsy într-o formă organizată, economisindu-vă totodată timp și efort.

Exact despre asta este vorba în acest ghid. Vă vom arăta cum să extrageți date de pe Etsy folosind un scraper Etsy fără cod și Python. Așadar, indiferent dacă aveți sau nu experiență în programare, acest ghid vă va fi util.

2 moduri de a extrage date de pe Etsy

Mai jos sunt cele două metode de extragere a datelor de pe Etsy. Prima folosește un scraper Etsy fără cod și va ajuta persoanele care nu sunt la curent cu codul, în timp ce a doua se bazează pe Python. Așadar, alegeți dintre două abordări bazate pe setul dvs. de abilități.

Utilizarea unui scraper Etsy gata de utilizare

În trecut, scraping-ul era doar o sarcină pentru programatori. Cu toate acestea, odată cu creșterea instrumentelor de scraping no-code, scraping-ul web a devenit accesibil oricui cu cunoștințe minime de informatică.

Astăzi, folosim un instrument no-code numit Octoparse pentru a extrage date de pe Etsy. Așadar, haideți să începem tutorialul pas cu pas.

Primul pas: Descărcați și instalați Octoparse

VizitațiSite-ul web Octoparsepentru a descărca instrumentul. După descărcare, urmați pașii simpli furnizați pentru a-l instala pe computer.

Acum, lansați Octoparse și creați un cont nou sau conectați-vă folosind contul dvs. Google sau Microsoft, dacă aveți deja unul.

Cu Octoparse, aveți două opțiuni pentru extragerea datelor de pe Etsy: utilizarea unui șablon predefinit sau crearea unui scraper personalizat.



Acest ghid se va concentra pe construirea unui scraper Etsy personalizat. Deși utilizarea unui șablon este relativ ușoară, crearea propriului șablon permite mai multe opțiuni de personalizare. Să începem cu asta.

Al doilea pas: Introduceți adresa URL Etsy pentru a obține un flux de lucru automat

Lansați Octoparse și, în bara de căutare, lipiți adresa URL a paginii Etsy pe care doriți să o extrageți.

Este posibil să doriți să extrageți pagina cu lista de produse Etsy sau pagina cu rezultatele căutării. Octoparse poate gestiona orice adresă URL.



După ce ați lipit adresa URL, apăsați pe „Start” pentru a încărca pagina Etsy în cadrul Octoparse. Pentru exemplul nostru, vom folosi o pagină cu rezultate ale căutării pentru”lumânări lucrate manual”.

Al 3-lea pas: Alegeți datele de extras

După apăsarea butonului Start, pagina se va încărca în Octoparse, care apoi identifică și etichetează automat datele pe care le consideră a fi extrase.



Odată După finalizarea acestui proces, veți vedea toate datele de produs detectate etichetate (poate fi necesar să redenumiți unele pentru acuratețe) și afișate într-un tabel de previzualizare mai jos.

Aveți opțiunea de a elimina orice coloane de date pe care le considerați inutile, făcând clic pe pictograma coș de gunoi de lângă acestea.

Dacă lucrurile merg fără probleme, Octoparse poate gestiona automat paginarea, astfel încât scraperul să poată naviga prin mai multe pagini.

Faceți clic pe „Creați flux de lucru” pentru a vedea o diagramă de flux a proiectului dvs. de scraping. Nu ezitați să ajustați acest lucru adăugând sau eliminând pași după cum este necesar.



Pasul 4: Ajustarea etichetelor de date

Uneori, Octoparse poate eticheta greșit câmpurile de date. Veți dori să corectați aceste erori. De exemplu, să schimbăm o coloană denumită incorect „titlu” în „evaluare” făcând dublu clic pe numele coloanei și introducând numele corect.



În mod similar, schimbați alte nume de coloane etichetate greșit.

Veți observa că fluxul nostru de lucru elimină și unele date inutile, cum ar fi simbolurile valutare sau textul butoanelor. Puteți elimina aceste câmpuri făcând clic pe cele trei puncte de lângă numele coloanei și selectând opțiunea „Șterge câmp” din meniu.



După organizarea și denumirea câmpurilor de date, iată cum arată tabelul nostru de previzualizare.



Pasul 5: Lansați scraperul Etsy

După ce totul este configurat, faceți clic pe „Salvare” urmat de „Executare” în partea dreaptă sus a ferestrei pentru a începe extragerea datelor de pe Etsy.



Va apărea o fereastră care vă va întreba dacă preferați să rulați sarcina pe dispozitiv sau în cloud. Am ales să rulăm acest tutorial local.



Rețineți că trebuie să opriți manual sarcina făcând clic pe „Opriți” sau pe „Pauză” pentru a împiedica rularea acesteia pe termen nelimitat, deoarece nu am setat o limită de pagini și Etsy poate avea pagini nesfârșite.



Pasul 6: Exportați datele Etsy extrase

În cele din urmă, puteți exporta datele extrase în formate precum Excel, CSV sau altele, în funcție de cerințele dvs.

Extragerea de date web de pe Etsy folosind Python

Deși extragerea de date prin instrumente fără cod este cea mai ușoară, există și o modalitate ușoară de a extrage date de pe Etsy folosind Python.

API-ul Python Etsyare funcții încorporate pentru a extrage date despre produse și furnizori de pe Etsy.

Funcția de extragere a datelor de pe produs preia adresa URL a produsului ca date de intrare și extrage ID-ul produsului, titlul, descrierea și prețul, printre alte atribute. Funcția furnizor funcționează în același mod și returnează câmpuri de date precum numele furnizorului, locația, numărul de vânzări și lista de produse.

Tot ce vă mai rămâne de făcut este să instalați biblioteca pe sistemul dvs. folosindpip install etsy_scraperși să o importați în scriptul dvs. tastândimport etsy_scraper.

După aceea, apelați funcția de produs sau furnizor cu adresa URL Etsy relevantă ca intrare, astfel:

importetsy_scraper productScrape(https://www.etsy.com/listing/540091623/italian-garden-essential-oil-candle?click_key=100bc1abf4cfe1ad2b3fef753903f0f5003a836b%3A540091623&click_sum=e4f02487&external=1&ref=hp_signed_out_opfy-1-1) vendorScrape(https://www.etsy.com/shop/OctoandCo?ref=shop-header-name&listing_id=540091623&from_page=listing)

Cu toate acestea, această bibliotecă are funcționalitate limitată și nu poate extrage rezultatele paginii cu lista de produse Etsy sau ale căutării.

Deci, va trebui să programați un scraper Etsy în Python de la zero. Iată pașii de bază pentru a face asta:

1. Instalați Python:Descărcați cea mai recentă versiune de Python de lasite-ul web oficial.
   
   
2. Instalați BeautifulSoup și alte biblioteci:Trebuie să instalați bibliotecile Python necesare pentru extragerea de date web.
   
   
   • BeautifulSoup4pentru analiza documentelor HTML și XML
   • cereribibliotecă pentru efectuarea de cereri HTTP
   • lxmlpentru analiza XML și HTML în Python
   • soupsievepentru selecție CSS avansată
     
     
3. Scrieți codul inițial:Deschideți editorul de cod și importați BeautifulSoup din bs4 și cereri.
   
   
4. Pretinde-te că ești un browser:În scriptul tău, includeAnteturi HTTPpentru a imita o solicitare de browser.Modificareauser agentantetul este adesea necesar pentru a accesa pagini web care restricționează accesul la scripturi sau roboți.
   
   
5. Preluați pagina web:Utilizați biblioteca „cereri” pentru a prelua pagina Etsy pe care sunteți interesat să o extrageți. Transmiteți adresa URL și anteturile ca argumente.
   
   
6. Analizează pagina:După ce ai conținutul paginii, folosește BeautifulSoup pentru a-l analiza. Aceasta implică crearea unui obiect BeautifulSoup și specificarea „lxml” ca parser.
   
   
7. Utilizați selectori CSS:Inspectați pagina Etsy pentru a identifica selectorii CSS corespunzători datelor pe care doriți să le extrageți. Înțelegeți structura paginii web și găsiți clasele sau etichetele care conțin datele dorite.
   
   
8. Extragere date:Parcurgeți elementele selectate de selectorii CSS și extrageți informațiile de care aveți nevoie, cum ar fi titlurile produselor, prețurile, evaluările sau imaginile.
   
   
9. Exportați date:După ce scriptul dvs. funcționează conform așteptărilor, exportați datele într-un fișier la formatul ales de dvs., cum ar fi CSV sau JSON.

Pentru un tutorial detaliat cu fragmente de cod, accesațiacest blog.

Explorează Etsy fără obstacole

În tutorialul nostru, am zgâriat doar suprafața datelor Etsy, așa că nu am întâmpinat probleme. Cu toate acestea, scraper-ul Etsy ar putea întâmpina o oarecare rezistență dacă sunt extrase cantități mari de date.

Extragerea unor cantități mari de date necesită trimiterea multor solicitări HTTP către serverul web Etsy, ceea ce nu este un comportament uman normal. Poate anula masca scraperului Etsy și îl poate bloca permanent.

Dar iată vestea bună:AdsPowerpoate menține proiectele tale de scraping Etsy în mișcare fără probleme, fără a fi blocate.

AdsPower este un browser anti-detecție reputat, conceput pentru a masca activitățile dvs. de scraping. Folosește tehnici avansate, cum ar fi rotația proxy-ului, falsificarea amprentelor digitale și întârzierile la solicitări, pentru a camufla scraperul și a-l face să arate ca traficul obișnuit al browserului către sistemele anti-boți ale Etsy.

Înscrie-teastăzi gratuit la AdsPower și accesează Etsy fără teama de blocări sau interdicții.