Reddit'te 2 Farklı Ama Etkili Yolla Veri Toplama Yöntemi

Reddit'in kullanıcılar tarafından oluşturulan verilerinin muazzam bir değere sahip olduğu aşikardır, öyle ki Google ve OpenAI, büyük Dil Modellerini (LLM) eğitmek için bunu kullanırlar.

Peki ter etmeden Reddit kazın değerinden nasıl yararlanacaksınız ve bankanızı bozmadan?

İster deneyimli bir kodlayıcı olun, ister programlamanın karmaşık dünyasını bilmeyen biri olun, tam size göre bir yöntem vardır.

Bu blog da, Reddit'i iki kolay yol kullanarak nasıl kazacağınızı ve Reddit sunduğu bilgi zenginliğine nasıl ereceğinizi öğreneceksiniz.

Ancak Reddit'i nasıl tarayacağımızın inceliklerine girmeden önce, Reddit'i taramanın farklı yollarına dair kısa bir özet yapalım.

Reddit'i Kazımanın Farklı Yolları

İnsanlar Reddit'i birçok şekilde tarar. Bu yöntemlerin her birinin kendine özgü avantajları ve dezavantajları vardır.

Bazıları parkta yürüyüş kadar kolay olup, hiçbir teknik beceri gerektirmezken, diğerleri zordur ve orta ila yüksek düzeyde programlama bilgisi gerektirir.

Reddit'ten veri toplamanın her bir yolunu size kısaca tanıtalım.

Reddit'i Manuel Olarak Kazıma

Bu, Reddit veya diğer platformları taramak için muhtemelen en kolay ve en doğrudan yaklaşımdır. Herhangi bir türde uzmanlık gerektirmez, sadece verileri kopyalayıp bir elektronik tabloya yapıştırma becerisi gerekir.

Fotoğraflar ve profil resimleri gibi medya platformdan kolayca indirilebilirken, videolar üçüncü taraf video indirme web siteleri kullanılarak çıkarılabilir.

Ek olarak, her veri noktasını kontrol edebilecek ve yalnızca doğru ve ilgili verilerin elektronik tabloya eklendiğinden emin olabileceksiniz.

Ancak, tüm süreç manuel olduğundan, ihtiyaçlarınız büyük olursa çok zamanınızı alacaktır. Ayrıca, manuel Reddit kazıma insan hataları ihtimalini artırır.

Reddit'i API'sini kullanarak tarayın

Reddit, geliştiricilerin Reddit platformu etrafında uygulamalar ve diğer ürünler oluşturmasına olanak sağlamak için API'sini sağlar. ;bu API'yi Reddit'ten veri toplamak için de kullanabilirsiniz. Ancak bunu yapmak için orta düzeyde kodlama becerilerine sahip olmanız gerekir. />

Sonra Reddit tarafından belirlenen API kullanmak için uymanız gereken başka kısıtlayıcı kurallar vardır. Bunun üstüne 2023 Reddit Tartışması, API ücretli olarak geliyor ve yalnızca moderasyon araçları geliştiricileri veya akademik amaçlar için ücretsiz kalıyor.

Özel Reddit Kazıyıcısı Oluşturun

Bir sonraki seçeneğiniz, sıfırdan özel bir Reddit kazıyıcısı oluşturarak API olmadan Reddit'i kazımaktır. Bu yöntem, ileri programlama becerileri gerektirdiği için zor ama eğer yapmayı başarabilirseniz son derece umut verici .

Bu yöntem kazıyıcıyı diğer hazır kazıyıcıların çıkarabileceği herhangi türde veri çıkaracak şekilde özelleştirmenize izin verir Çıkarılabilir olmamalıdır. Ayrıca, ihtiyaçlarınıza göre kazıma görevlerini ölçeklendirmek için komut yazabilirsiniz.

Ancak, özel bir Reddit kazıyıcısı geliştirmek kolay bir iş değildir ve maliyetli ve zaman alıcıdır.

Kodsuz Reddit Kazıyıcıyı Kullanın

Kodlama geçmişiniz yok mu? Önemli bir şey değil. Programlama gerektirmeyen bir sürü tıklama ve kazıma aracı var.

Bu araçlar, kullanıcı dostu yazılım veya tarayıcı uzantıları şeklinde gelir ve yalnızca birkaç fare tıklamasıyla birkaç dakika içinde Reddit'ten veri toplamanıza olanak tanır.

Gerçek parlak yüzü şu bu araçların ... data-type="text">Reddit'ten Kod Kullanarak ve Kodsuz Olarak Veri Nasıl Toplanır?

Şimdi, lafı fazla uzatmadan, işimize bakalım ve Reddit'i kodsuz bir Reddit Kazıyıcı ve bir Python Kütüphanesi kullanarak nasıl kazıyacağımızı keşfedelim.

Parsehub Kullanarak Reddit'i Kazıyın (Kod Yok)

Reddit'ten manuel olarak veri toplamak sonsuza kadar sürebilir. Gönderileri bulurken, açarken, yüklenmelerini beklerken ve sonra manuel olarak Verileri elektronik tabloya kopyalayıp yapıştırmak mümkün olsa da, özellikle yüzlerce gönderiyle uğraşırken yine de verimsizdir.

Otomatik web kazıyıcıların bu işi sizin için halletmesine izin verin. Bu araçlar, neredeyse her web ... nbsp;Kullanıcı adları, bağlantılar, gönderi başlıkları, tarihler, resimler ve yorumlar dahil olmak üzere Reddit'ten gelen veri türleri, birkaçını adlandırmak için.

Reddit'in önde gelen kodsuz veri toplama araçları arasında ParseHub, Apify ve Octoparse bulunur.

Daha önce belirtildiği kodsuz bir aracı kullanarak Reddit kazı çocuk oyuncağı ancak başlamak için bir kılavuza ihtiyacınız var.

Öyleyse, ParseHub'ı kullanarak Reddit'i nasıl tarayacağımızı öğrenelim.

• ParseHub'ı indirin: Resmi ParseHub web sitesi ve işletim sistemi için uygun indirme seçeneğini seçin. Kurulum indirilecektir. Kurulumu çalıştırın ParseHub bir dakika içinde kurulacaktır.

• Hesap Oluştur: ParseHub'ı ilk kez kullanıyorsanız, kaydolun ve bir hesap oluşturun. İşlem çok hızlıdır. Sadece adı nızı, e-postanızı ve şifrenizi girin, yeni hesabınıza oturum açılacaksınız.

• Yeni Proje Başlat: Ana ekranda, Yeni Proje düğmesine tıklayın.
  
  

• Yeni ekranda, kazımak istediğiniz subreddit bağlantısını yapıştırın. Kazıma amaçları en işe yardığı için Reddit eski düzenini kullanmanızı öneririz.

• Gösteri için NBA alt dizinini tarayacağız.
  
  

• Başlat düğmesine&basın, subreddit ana ekrana yüklenecektir.
  
  

• İlgili Verileri Seçin: Diyelim ki tüm gönderilerin başlıklarını ve bağlantılarını taramak istiyoruz. Sayfadaki ilk gönderinin başlığına tıklayın. Seçilen gönderi Başlık yeşil renge dönecek ve diğer gönderi başlıkları sarı renge dönecektir. Şimdi ikinci gönderi başlığını seçin, tüm başlıklar yeşil renge dönecek ve hepsinin seçildiğini gösterecektir. />
  

• Yan panelde, seçime uygun bir isim verin, örneğin gönderiler.
  
  

• Daha Fazla Seçim Yapın: Her gönderinin tarihini de istediğimizi varsayalım. Bunun için gönderiler seçimindeki + sembolüne tıklayın ve Göreceli Seç 'i seçin.
  
  

• Şimdi ilk gönderinin başlığına tıklayın ve bundan sonra gönderinin zaman damgasına tıklayın. Sayfanın tamamı buna benzemeye başlar.
  
  

• Yeni oluşturulan seçimin adını tarihine değiştir.
  
  

• Tarih seçimi, ilgili zaman damgasını çıkarır, ancak gönderinin tarihini ve saatini istiyoruz. Bu nedenle, tıklayın Tarih seçiminin yanındaki “+” sembolüne tıklayın, tam menüyü açmak için Gelişmiş 'e tıklayın ve Çıkart'ı seçin.
  
  

• Çıkart öğesinin yanındaki “Başlık Özniteliği seç
  
  

• Seçimin şu anda Tarihler ve Saatler'i çektiğini fark edeceksiniz.
  
  

• Daha Fazla Veri Türü İçin Tekrarla: Kullanıcı adları, yorumlar sayısı ve oylar için önceki adımı tekrarla.
  
  

• Sayfalandırma Ekle: Şu ana kadarki seçimler yalnızca ilk sayfadaki verileri ayıklar. Sonraki sayfalara geçmek için sayfa seçiminin + sembolüne tıklayın ve Seç 'i seçin.
  
  

• Sayfanın en altına doğru kaydırın ve ileri'ye tıklayın.
  
  

• Sonraki seçim üzerindeki “+” sembol tıklayın ve Tıkla seçeneğini belirleyin.
  
  

• Bu sonraki sayfa düğmesi olup olmadığını soran bir açılır pencere görüntülenir. Evet 'i seçin ve kaç sayfa girin ;tıklanmalı. 2 tane yazdık, yani toplamda 3 sayfa kazıyacağız. Şimdi Geçerli Şablonu Tekrarla düğmesine basın.
  
  

• Proje hazır.
  
  

• Projeyi Çalıştırın: Veri Al düğmesine basın.
  
  

• Çalıştır'ı seçin. Birkaç dakika içinde veriler hazır olacaktır. İstediğiniz dosya biçimini seçin.
  
  

Reddit'i Python ile Kazı (Kod)

Reddit'i kodsuz bir araç kullanarak nasıl tarayacağınızı bildiğinizde, insanların neden aynı görev için programlama betikleri yazmaya başvurduklarını merak ediyorsunuzdur.

Cevap, bu yöntemle gelen özgürlükte yatıyor.

Kodsuz bir Reddit kazıyıcısı kullanarak, yalnızca kazımanıza izin verdiği veri türlerini kazıyabilirsiniz. Ayrıca, sayfa sınırlamaları veya gönderi sınırlamaları gibi başka sınırlamalar da olabilir.

Premium plana yükselterek bu sınırlamaları aşabilirsiniz. Ancak bu bir Cüzdanınızdaki bsp;eziği ve ayrıca, kazıma ihtiyaçlarınız karmaşık ise, kodsuz Reddit kazıcılar yardımcı olamaz.

Bu, Reddit'i Python veya diğer programlama dilleriyle taramak zorunda kalacağınız zamandır.

Reddit'i Python ile tarayarak, yalnızca herhangi bir veriyi ve herhangi bir sayıda sayfayı çıkarmakla kalmayacak, aynı zamanda Tek bir kuruş ödemeden bunu başarabilirsiniz. Bu, yalnızca kodlamayı kendiniz biliyorsanız geçerlidir. Aksi takdirde, bir kazıma uzmanı tutmanız gerekecektir. />

Öyleyse, Reddit'i Python ile nasıl tarayacağımızı görelim:

1. Gerekli Kitaplıkları Kurun: Gerekli kitaplıkları kurduğunuzdan emin olun; örneğin PRAW (Python Reddit API Wrapper) ve Pandas.

2. Reddit Uygulaması Oluştur: Reddit'in web sitesine gidin ve yeni bir uygulama oluşturun. İstemci kimliğini, istemci sırrını, kullanıcı adını ve parolayı edinin.

3. Kimlik Doğrulama: Elde edilen kimlik bilgilerini PRAW kullanarak Reddit'in API ile kimlik doğrulama yapmak için kullanın.

4. Alt Reddit'i Seçin: Kazımak istediğiniz alt reddit'i belirtin.

5. Verileri Kazı: Seçilen alt&reddit den gönderileri almak PRAW yani gönderi sayısını ve istenen öznitelikleri belirtmek için PRAW kullanın.

6. Verileri Depola: Kazınan verileri uygun bir&formatta, Pandas&kullanarak bir DataFrame gibi depola.

7. Analiz Et veya Görselleştir: Projeniz veya analiziniz için ihtiyaç duyduğunuz kazınan verileri analiz edin veya görselleştirin.
   
   

Derinlemesine bir anlayış ve her adım için kod parçacıkları için şuraya gidin:bu ayrıntılı blog.

Kazıma Etkinliğinizi Engellenmekten Koruyun

Reddit'in kullanıcı sözleşmesi, otomasyon yoluyla siteye erişim sağlamak ve önceden izin alınmadan Reddit'ten veri toplamak yasaktır.

Ancak, Reddit'in IP kazıma karşı önleyici tedbirleri, IP yasaklama veya hesap askıya alma gibi hakkında fazla bilgi yok

Bu, Reddit'in veri kazıma konusunda hoşgörülü bir tutum sergilediğinin göstergesi olabilir. Ancak, veri kazıyıcınızın CAPTCHA, hız sınırları veya askıya alma gibi engellerle karşılaşma olasılığı hâlâ mevcut.

Bu AdsPower algılama önleyicisi işlemek için tasarlanmıştır. AdsPower parmak izi önlemleri arayıcılarınızın gerçek kullanıcılar gibi görünmesini sağlar böylece verileri sorunsuz şekilde kazabilirsiniz.

Artık Reddit'i kodlamayla ve kodlamadan nasıl tarayacağınızı bildiğinize göre,ücretsiz kaydolun AdsPower için ve kesintisiz yararlı alt&reddit'leri kazıyın.