Proxys für Scraping-Aufgaben
Ein Scraper sendet in kurzer Zeit viele Anfragen an eine Website. Der Unlimited-Tarif von ProxyWorld verteilt diese Anfragen auf viele IPs von Privatanschlüssen und berechnet nur die Tage, egal wie viele Daten Sie herunterladen.
Warum Anfragen blockiert werden
Die meisten Websites zählen Anfragen pro IP. Überschreitet eine IP ihr Limit, wird sie absichtlich gebremst oder bekommt eine Prüfseite angezeigt. Einige tausend Anfragen von einer Server-IP erreichen dieses Limit schnell.
Über das Gateway (die Eingangsadresse des Proxys) laufen Ihre Anfragen über einen großen Pool von Residential IPs. Eine Residential IP ist eine Adresse an einem normalen privaten Internetanschluss. Die Gesamtmenge bleibt gleich, aber jede IP sendet ungefähr so viel wie ein normaler Besucher.
Der Preis ergibt sich aus Laufzeit und Stufe
In der Stufe mit 200 Verbindungen und 100 Mbps kostet Layover (1 Tag) $4.35. Tour (7 Tage) kostet $4.09 pro Tag, insgesamt $28.63, Stay (30 Tage) $3.70 pro Tag, insgesamt $111.00, und Residence (90 Tage) $3.31 pro Tag, insgesamt $297.90.
Die Datenmenge spielt keine Rolle. Holt eine Aufgabe mehr als etwa 11~14 GB pro Tag, ist Unlimited günstiger als Residential pro GB. Beim Erfassen von Shopseiten mit vielen Fotos ist diese Grenze schnell überschritten.
Verbindungsstufe wählen
Zählen Sie, wie viele Anfragen gleichzeitig offen sind. Wenn Sie 150 Worker (gleichzeitig laufende Erfassungsjobs) betreiben, reicht die Stufe 200 und lässt Spielraum für Wiederholungen fehlgeschlagener Anfragen.
Bei mehreren Erfassungsservern zählen Sie alle Worker zusammen. Rund 400 insgesamt passen zur Stufe 500 (200 Mbps). Sie kostet $7.12 bei Layover oder $6.05 pro Tag bei Stay. Beim nächsten Tarifkauf können Sie eine andere Stufe wählen.
Was Sie erfassen dürfen
Seiten, die jeder ohne Anmeldung öffnen kann: öffentliche Produktdaten, Nachrichtenartikel, Firmeneinträge und Ähnliches. Prüfen Sie vor dem Start die Nutzungsbedingungen der Website und das Recht des Landes, in dem Sie geschäftlich tätig sind.
Konten werden gesperrt bei Login-Versuchen mit geleakten Zugangsdaten, Spam, DDoS oder Zugriff auf Websites staatlicher Stellen. Ein Abstand zwischen den Anfragen pro Domain entlastet den fremden Server und ermöglicht Ihnen, dort lange weiter zu erfassen.
So richten Sie ProxyWorld für Web Scraping ein
1
Registrieren Sie sich mit E-Mail und Passwort oder mit dem Token von der Registrierungsseite. Laden Sie dann Ihr USD-Guthaben im Zahlungsfenster mit Krypto auf.
2
Wählen Sie unter Unlimited Residential eine Laufzeit (Layover, Tour, Stay, Residence oder eigene 1~365 Tage) und eine Verbindungsstufe und bezahlen Sie.
3
Hängen Sie -zone-unl an das Ende Ihres Proxy-Benutzernamens. Brauchen Sie Daten nach Land, fügen Sie auch einen Ländercode hinzu, etwa -cc-fr.
4
Tragen Sie gate.proxyworld.shop in die Proxy-Einstellungen des Scrapers ein. Der Port ist 6100 für HTTP und 6200 für SOCKS5.
Häufige Fragen
Wechselt die IP bei jeder Anfrage?
Ja. Ohne die Option -sid im Benutzernamen erhält jede Anfrage eine neue Residential IP.
Nach der Anmeldung brauche ich für einige Seiten dieselbe IP.
Fügen Sie dem Benutzernamen -sid- und einen Session-Namen hinzu, zum Beispiel -sid-shop01. Anfragen mit demselben Session-Namen laufen über dieselbe IP, und -ttl- legt fest, wie lange sie gehalten wird, bis zu 60 Minuten.
Gibt es außer den Daten noch andere Grenzen?
Sie erhalten die gleichzeitigen Verbindungen und die Geschwindigkeit der gekauften Stufe. Daten werden nicht gezählt.
Meine Bestellung zeigt "Wird aktiviert".
Die Zahlung ist erfolgt und der Tarif wird vorbereitet. Eine Bestellung, die nicht aktiviert werden kann, wird storniert, und der volle bezahlte Betrag geht zurück auf Ihr Guthaben.
Weitere Anwendungsfälle
$25 aufladen, 73 GB Residential
Registrieren Sie sich per E-Mail oder Token, laden Sie auf und kaufen Sie sofort. Ihr Guthaben verfällt nie.