Automatisierung mit Proxys: Skripte, Bots und No-Code-Tools ohne Stolpersteine

Ein Proxy gilt nicht „für den ganzen Ablauf“, sondern für die Anfragen, die ihn nutzen. Deshalb muss er genau dort eingetragen werden, wo sie starten.

• Skripte (Python, Node.js, cURL): Der Proxy wird an die HTTP-Bibliothek übergeben. Fertige Beispiele in den Anleitungen für Python und Node.js.
• Automatisierte Browser (Playwright, Puppeteer, Selenium): Der Proxy wird beim Start des Browsers übergeben, wie in der Anleitung für Playwright.
• n8n: im HTTP-Request-Node unter Options › Proxy oder für die ganze Instanz mit den Variablen HTTP_PROXY und HTTPS_PROXY. Schritt für Schritt in der Anleitung für n8n.
• Make: Die neueste Version des HTTP-Moduls bietet Proxy-Einstellungen, ältere Versionen nicht. Prüfen Sie, welche Modulversion Sie nutzen.
• Zapier: Webhooks by Zapier hat kein Feld für einen Proxy. Für Anfragen, die über den Proxy laufen sollen, nutzt man meist einen Schritt Code by Zapier in Python, wo die Bibliothek requests einen Proxy akzeptiert.

Automatisierungen gibt es in zwei Arten. Solche, die mit einem Konto arbeiten (Beiträge, Shopverwaltung, Berichte aus einem Dashboard), brauchen Kontinuität: dieselbe IP während der ganzen Sitzung, immer aus demselben Land. Solche, die öffentliche Daten sammeln (Preise, Verfügbarkeit, Ergebnisse), profitieren dagegen vom IP-Wechsel zwischen zwei Durchläufen.

Nutzen Sie für beides denselben Proxy, ändert die Rotation der Datenerhebung die IP des Kontos mitten in der Sitzung. Die Lösung ist einfach: ein stabiler Proxy für Konten und einer mit Rotation für Daten. Warum, erklärt IP-Rotation.

• Rotationslink: eine GET-Anfrage an den Link des Proxys, ohne Schlüssel. Er antwortet mit der neuen IP, sobald der Wechsel abgeschlossen ist, meist nach wenigen Sekunden: Sie können sofort weitermachen.
• API: Mit einem unter Einstellungen → API erstellten Schlüssel wechseln Sie die IP, lesen die aktuelle IP aus, verlängern den Proxy und stellen die automatische Rotation aus Ihren Skripten ein. Dokumentation und Beispiele unter ProxyHub-API.
• Automatische Rotation: Wählen Sie ein Intervall (von 5 Minuten bis 24 Stunden), und die IP wechselt von selbst, ganz ohne Code.

1. Prüfen Sie die IP beim Start: Eine Anfrage an einen Dienst wie api.ipify.org bestätigt vor Beginn, dass der Verkehr über den Proxy läuft. Wie das geht, steht in Proxy testen.
2. Gleichmäßiges Tempo: Pausen zwischen den Anfragen, kleine Gruppen und verteilte Zeiten statt geballter Schübe.
3. Wiederholungen mit wachsender Wartezeit: Bei Timeouts, 429 und 503 nach 5, 10, 20 Sekunden erneut versuchen, nicht sofort. Eine durch einen IP-Wechsel unterbrochene Anfrage wird einfach wiederholt.
4. Großzügige Timeouts: Ein Mobilfunknetz kann Latenzspitzen haben; 30 Sekunden sind ein guter Ausgangswert.
5. Wesentliche Logs: genutzte IP, Antwortcode und Zeiten. Sie zeigen sofort, ob das Problem beim Proxy oder bei der Website liegt.
6. Zugangsdaten schützen: Benutzername, Passwort und API-Schlüssel in Umgebungsvariablen oder im Zugangsdatenspeicher des Tools, nie in geteiltem Code.

Für die Datenerhebung finden Sie die vollständige Methode mit Beispielcode unter Web Scraping mit Proxys. Die Nutzungsbedingungen von Websites und Plattformen gelten auch für automatisierte Abläufe.