Proxy para sa scraping
Nagpapadala ang scraper ng maraming request sa isang site sa maikling oras. Ikinakalat ng ProxyWorld unlimited plan ang mga request na iyon sa maraming home connection IP at araw lang ang sinisingil, gaano man karaming data ang i-download mo.
Bakit nabo-block ang mga request
Binibilang ng karamihan ng site ang request bawat IP. Kapag lumampas ang isang IP sa limit nila, sadya nila itong pinababagal o nagpapakita ng verification screen. Mabilis maabot ang limit na iyon ng ilang libong request mula sa iisang server IP.
Sa pamamagitan ng gateway (ang entry address ng proxy), lumalabas ang mga request mo mula sa malaking pool ng residential IP. Ang residential IP ay address sa karaniwang home internet line. Pareho ang kabuuang ipinapadala mo, pero bawat IP ay nagpapadala nang halos kasindami ng karaniwang bisita.
Ang presyo ay mula sa tagal at antas
Sa antas na 200 koneksyon at 100 Mbps, $4.35 ang Layover (1 araw). Ang Tour (7 araw) ay $4.09 kada araw, $28.63 lahat, ang Stay (30 araw) ay $3.70 kada araw, $111.00 lahat, at ang Residence (90 araw) ay $3.31 kada araw, $297.90 lahat.
Hindi mahalaga ang dami ng data. Kung higit humigit-kumulang 11~14 GB kada araw ang kinukuha ng isang trabaho, mas mura ang unlimited kaysa sa residential na kada GB. Madali mong malalampasan iyon sa pagkolekta ng mga store page na maraming larawan.
Pagpili ng antas ng koneksyon
Bilangin kung ilang request ang bukas sa anumang sandali. Kung 150 worker (mga collection job na sabay na tumatakbo) ang pinapatakbo mo, sapat na ang antas na 200 at may puwang pa para ulitin ang mga pumalyang request.
Kung may ilang collection server ka, pagsamahin ang lahat ng worker nila. Ang mga 400 lahat ay bagay sa antas na 500 (200 Mbps). $7.12 ito sa Layover, o $6.05 kada araw sa Stay. Puwede kang pumili ng ibang antas sa susunod mong bili ng plan.
Ano ang puwede mong kolektahin
Mga page na kayang buksan ng kahit sino nang hindi nagla-log in: public product data, balita, business listing at iba pa. Bago magsimula, tingnan ang terms of use ng site at ang batas sa bansang pinagnenegosyohan mo.
Sinu-suspend ang account dahil sa login attempt gamit ang na-leak na credentials, spam, DDoS o pag-access sa site ng gobyerno. Ang pagbibigay ng pagitan sa mga request sa bawat domain ay nagpapagaan sa kabilang server at hinahayaan kang mangolekta rito nang matagal.
Paano i-setup ang ProxyWorld para sa Web scraping
1
Mag-sign up gamit ang email at password, o gamit ang token na ipinapakita sa sign-up page. Pagkatapos, mag-top up ng USD balance gamit ang crypto sa payment window.
2
Sa unlimited residential, pumili ng tagal (Layover, Tour, Stay, Residence o custom na 1~365 araw) at antas ng koneksyon, tapos magbayad.
3
Idagdag ang -zone-unl sa dulo ng proxy username mo. Kung kailangan mo ng data ayon sa bansa, magdagdag din ng country code, gaya ng -cc-fr.
4
Ilagay ang gate.proxyworld.shop sa proxy settings ng scraper. Ang port ay 6100 para sa HTTP at 6200 para sa SOCKS5.
Mga madalas itanong
Nagbabago ba ang IP sa bawat request?
Oo. Kapag walang -sid na opsyon sa username, bagong residential IP ang itinatalaga sa bawat request.
Pagka-log in, kailangan ko ng parehong IP sa ilang page.
Idagdag ang -sid- at pangalan ng session sa username, halimbawa -sid-shop01. Ang mga request na may parehong pangalan ng session ay lalabas mula sa parehong IP, at ang -ttl- ang nagtatakda kung gaano ito katagal, hanggang 60 minuto.
May limit ba bukod sa data?
Makukuha mo ang sabay-sabay na koneksyon at bilis ng antas na binili mo. Hindi binibilang ang data.
Ina-activate ang status ng order ko.
Tapos na ang bayad at inihahanda na ang plan. Ang order na hindi ma-activate ay kakanselahin, at ibabalik sa balance mo ang buong halagang ibinayad mo.
$25 na top-up, 73 GB ng residential
Mag-sign up gamit ang email o token, mag-top up at bumili agad. Hindi nag-e-expire ang balance mo.