Lösung

VPS für Web Scraping und Datenerfassung

Cutter 8 · $34/moCutter 16 · $62/mo
Kurze Antwort

Scraping ist speichergebunden, nicht CPU-gebunden: Ein Headless-Chromium-Tab kostet etwa 300 MB, also planen Sie um die Parallelität herum. Vier Kerne und 8 GB schaffen etwa 20 parallele Browser-Kontexte. Was den Erfolg tatsächlich bestimmt, ist IP-Vielfalt und Gerichtsbarkeit – Sie wollen sauberen Adressraum, mehrere IPv4-Adressen und einen Anbieter, der Konten nicht wegen einer einzigen Beschwerde über die Crawl-Rate kündigt.

Was Sie benötigen

Mindestspezifikation für web scraping & datenerfassung
RessourceWas Sie tatsächlich benötigen
CPU4 Kerne für ~20 parallele Headless-Browser
RAM8 GB Minimum; 16 GB, wenn Sie JavaScript in großem Umfang rendern
Festplatte160 GB NVMe für Caches und Artefakte
IPsZusätzliche IPv4-Adressen, pro Instanz über das Panel hinzugefügt
Transfer10 TB – gerenderte Seiten sind schwerer, als sie aussehen

Empfohlene Tarife

Cutter

Cutter 8

$ 32.3 /month

96,90 $ gesamt · 5% sparen

vCPU
4 × dediziert
RAM
8 GB
Speicher
160 GB NVMe-SSD
Transfer
10 TB
IPv4 / IPv6
1 / /64 routed
Konfigurieren
Cutter

Cutter 16

$ 58.9 /month

176,70 $ gesamt · 5% sparen

vCPU
6 × dediziert
RAM
16 GB
Speicher
320 GB NVMe-SSD
Transfer
15 TB
IPv4 / IPv6
1 / /64 routed
Konfigurieren
Clipper

Clipper 16

$ 87.4 /month

262,20 $ gesamt · 5% sparen

vCPU
8 × dediziert
RAM
16 GB
Speicher
400 GB NVMe Gen4 SSD
Transfer
30 TB
IPv4 / IPv6
1 / /64 routed
Konfigurieren

Empfohlene Standorte

Der Standort ist normalerweise die Entscheidung, die für diese Arbeitslast am wichtigsten ist – entweder weil die Latenz dominiert oder weil die Rechtshoheit entscheidend ist.

Warum OnionVPS dafür

  • Zusätzliche IPv4-Adressen kosten $3 pro Monat, ohne Rechtfertigungsformular.
  • Wir drosseln ausgehendes HTTP nicht und prüfen nicht, was Ihr Crawler anfordert.
  • Offshore-Gerichtsbarkeiten halten das Projekt außerhalb der Reichweite spekulativer zivilrechtlicher Beweisaufnahmen.
  • Sauberer, nicht recycelter Adressraum – eine IP, die nie auf einer Spam-Liste stand, verschafft Ihnen einen Vorsprung.

So richten Sie es ein

  1. Stellen Sie einen Cutter 8 mit Ubuntu 24.04 bereit

    Vier dedizierte Kerne und 8 GB sind der praktische Einstiegspunkt.

  2. Headless-Browser-Stack installieren

    Playwright oder Puppeteer mit dem gebündelten Chromium, ausgeführt in Docker für sauberes Aufräumen.

  3. IP-Adressen hinzufügen und ausgehenden Datenverkehr rotieren

    Binden Sie jeden Worker mit SO_BINDTODEVICE oder einem ausgehenden Proxy an eine andere Quelladresse.

  4. robots.txt und Rate-Limits respektieren

    Höfliche Verzögerungen halten Sie von Blocklisten fern und machen das Projekt nachhaltig.

  5. Ergebnisse vom Server übertragen

    Streamen Sie an Objektspeicher oder eine Hold-Instanz, sodass ein Rebuild nichts kostet.

Häufig gestellte Fragen

Ist Web-Scraping auf Ihren Servern erlaubt?

Ja, für rechtmäßig zugängliche öffentliche Daten, mit Raten, die das Ziel nicht beeinträchtigen. Wir erlauben kein Credential-Stuffing, keine Umgehung von Paywalls oder Authentifizierung und kein Scraping, das unbefugten Zugriff darstellt.

Wie viele IPs kann ich zu einer VPS hinzufügen?

Bis zu acht zusätzliche IPv4-Adressen pro Instanz über das Panel, zusätzlich zu Ihrem gerouteten IPv6-/64.

Welcher Standort ist am besten für Scraping?

Außerhalb der Gerichtsbarkeit des Ziels für rechtliche Trennung und nahe daran für Latenz. Amsterdam, Moldau und Sofia sind der übliche Kompromiss für europäische Ziele.