Scraping işleri için proxy'ler
Bir scraper kısa sürede tek bir siteye çok sayıda istek gönderir. ProxyWorld sınırsız paketi bu istekleri birçok ev bağlantısı IP'sine dağıtır ve ne kadar veri indirirseniz indirin yalnızca gün için ücret alır.
İstekler neden engellenir
Çoğu site istekleri IP başına sayar. Bir IP sınırı aştığında onu bilerek yavaşlatır veya doğrulama ekranı gösterir. Tek bir sunucu IP'sinden gelen birkaç bin istek bu sınıra hızla ulaşır.
Gateway (proxy'nin giriş adresi) üzerinden istekleriniz geniş bir residential IP havuzundan çıkar. Residential IP, sıradan bir ev internet hattındaki adrestir. Gönderdiğiniz toplam aynı kalır, ancak her IP normal bir ziyaretçi kadar istek gönderir.
Fiyat süre ve basamağa göre belirlenir
200 bağlantı, 100 Mbps basamağında Layover (1 gün) $4.35'tir. Tour (7 gün) günlük $4.09, toplam $28.63; Stay (30 gün) günlük $3.70, toplam $111.00; Residence (90 gün) günlük $3.31, toplam $297.90'dır.
Veri hacmi önemli değildir. Bir iş günde yaklaşık 11~14 GB'tan fazla çekiyorsa sınırsız paket GB başına residential'dan daha ucuzdur. Fotoğrafı bol mağaza sayfaları toplamak sizi bu sınırın üstüne kolayca çıkarır.
Bağlantı basamağını seçmek
Herhangi bir anda kaç isteğin açık olduğunu sayın. 150 worker (aynı anda çalışan toplama işi) çalıştırıyorsanız 200 basamağı yeterlidir ve başarısız istekleri tekrar denemek için yer bırakır.
Birkaç toplama sunucunuz varsa tüm worker'larını toplayın. Toplam 400 civarı 500 basamağına (200 Mbps) uyar. Layover'da $7.12, Stay'de günlük $6.05'tir. Bir sonraki paket alımınızda farklı bir basamak seçebilirsiniz.
Neleri toplayabilirsiniz
Giriş yapmadan herkesin açabildiği sayfalar: herkese açık ürün verileri, haber makaleleri, işletme listeleri ve benzerleri. Başlamadan önce o sitenin kullanım koşullarını ve iş yaptığınız ülkenin yasalarını kontrol edin.
Sızdırılmış bilgilerle giriş denemeleri, spam, DDoS veya devlet sitelerine erişim nedeniyle hesaplar askıya alınır. Alan adı başına istekler arasında boşluk bırakmak karşı sunucunun yükünü azaltır ve o siteden uzun süre veri toplamaya devam etmenizi sağlar.
Web scraping için ProxyWorld kurulumu
1
E-posta ve şifreyle ya da kayıt sayfasında gösterilen token ile kayıt olun. Ardından ödeme penceresinde USD bakiyenizi kripto ile yükleyin.
2
Sınırsız residential altında bir süre (Layover, Tour, Stay, Residence veya 1~365 gün arası özel süre) ve bir bağlantı basamağı seçin, ardından ödeyin.
3
Proxy kullanıcı adınızın sonuna -zone-unl ekleyin. Ülkeye göre veri gerekiyorsa -cc-fr gibi bir ülke kodu da ekleyin.
4
Scraper'ın proxy ayarlarına gate.proxyworld.shop girin. Port HTTP için 6100, SOCKS5 için 6200'dür.
Sık sorulan sorular
IP her istekte değişir mi?
Evet. Kullanıcı adında -sid seçeneği yoksa her isteğe yeni bir residential IP atanır.
Giriş yaptıktan sonra birkaç sayfa için aynı IP gerekiyor.
Kullanıcı adına -sid- ve bir oturum adı ekleyin, örneğin -sid-shop01. Aynı oturum adına sahip istekler aynı IP'den çıkar, -ttl- ise ne kadar korunacağını belirler, en fazla 60 dakika.
Veri dışında sınır var mı?
Satın aldığınız basamağın eşzamanlı bağlantı sayısını ve hızını alırsınız. Veri sayılmaz.
Sipariş durumum Etkinleştiriliyor diyor.
Ödeme tamamlandı ve paket hazırlanıyor. Etkinleştirilemeyen sipariş iptal edilir ve ödediğiniz tutarın tamamı bakiyenize geri döner.
Diğer kullanım alanları
$25 yükleme, 73 GB residential
E-posta veya token ile kayıt olun, bakiye yükleyin ve hemen satın alın. Bakiyenizin süresi dolmaz.