Solusi

VPS untuk web scraping dan pengumpulan data

Cutter 8 · $34/moCutter 16 · $62/mo
Jawaban singkat

Scraping lebih terikat pada memori daripada CPU: satu tab headless Chromium memakan sekitar 300 MB, jadi rencanakan sesuai konkurensi. Empat inti dan 8 GB menjalankan sekitar 20 konteks browser paralel. Yang benar-benar menentukan keberhasilan adalah variasi dan yurisdiksi IP — Anda menginginkan ruang alamat yang bersih, beberapa alamat IPv4, dan penyedia yang tidak menonaktifkan akun hanya karena satu keluhan tentang kecepatan crawl.

Apa yang Anda butuhkan

Batas bawah spesifikasi untuk web scraping & pengumpulan data
Sumber dayaApa yang sebenarnya Anda butuhkan
CPU4 inti untuk ~20 browser headless yang berjalan serentak
RAMMinimum 8 GB; 16 GB jika Anda merender JavaScript secara massal
Disk160 GB NVMe untuk cache dan artefak
Alamat IPAlamat IPv4 tambahan, ditambahkan per instance dari panel
Transfer10 TB — halaman yang dirender lebih berat daripada yang terlihat

Paket yang direkomendasikan

Cutter

Cutter 8

$ 32.3 /month

US$96,90 total · Hemat 5%

vCPU
4 × khusus
RAM
8 GB
Penyimpanan
160 GB NVMe SSD
Transfer
10 TB
IPv4 / IPv6
1 / /64 routed
Konfigurasi
Cutter

Cutter 16

$ 58.9 /month

US$176,70 total · Hemat 5%

vCPU
6 × khusus
RAM
16 GB
Penyimpanan
320 GB NVMe SSD
Transfer
15 TB
IPv4 / IPv6
1 / /64 routed
Konfigurasi
Clipper

Clipper 16

$ 87.4 /month

US$262,20 total · Hemat 5%

vCPU
8 × khusus
RAM
16 GB
Penyimpanan
400 GB NVMe Gen4 SSD
Transfer
30 TB
IPv4 / IPv6
1 / /64 routed
Konfigurasi

Lokasi yang direkomendasikan

Lokasi biasanya adalah keputusan yang paling menentukan untuk beban kerja ini — baik karena latensi mendominasi, atau karena yurisdiksi yang menentukan.

Mengapa OnionVPS untuk ini

  • Alamat IPv4 tambahan seharga $3 per bulan tanpa formulir justifikasi.
  • Kami tidak membatasi kecepatan HTTP keluar atau memeriksa apa yang diminta crawler Anda.
  • Yurisdiksi luar negeri menjaga proyek di luar jangkauan pengungkapan perdata spekulatif.
  • Ruang alamat yang bersih dan tidak didaur ulang — IP yang tidak pernah masuk daftar spam memberi Anda awal yang baik.

Cara mengaturnya

  1. Terapkan Cutter 8 dengan Ubuntu 24.04

    Empat inti khusus dan 8 GB adalah titik awal yang praktis.

  2. Instal tumpukan browser tanpa kepala

    Playwright atau Puppeteer dengan Chromium yang dibundel, dijalankan di dalam Docker untuk pembersihan yang rapi.

  3. Tambahkan alamat IP dan putar lalu lintas keluar

    Ikat setiap pekerja ke alamat sumber yang berbeda dengan SO_BINDTODEVICE atau proxy keluar.

  4. Hormati robots.txt dan batas kecepatan

    Jeda yang sopan membuat Anda terhindar dari daftar blokir dan menjaga proyek tetap berkelanjutan.

  5. Kirim hasil dari server

    Stream ke penyimpanan objek atau instance Hold sehingga membangun ulang tidak memakan biaya apa pun.

Pertanyaan yang sering diajukan

Apakah scraping web diizinkan di server Anda?

Ya, untuk data publik yang dapat diakses secara sah, dengan kecepatan yang tidak menurunkan target. Kami tidak mengizinkan credential stuffing, melewati paywall atau autentikasi, atau scraping yang merupakan akses tidak sah.

Berapa banyak IP yang dapat saya tambahkan ke satu VPS?

Hingga delapan alamat IPv4 tambahan per instance dari panel, ditambah IPv6 /64 yang dirutekan.

Lokasi mana yang terbaik untuk scraping?

Di suatu tempat di luar yurisdiksi target untuk pemisahan hukum, dan dekat dengannya untuk latensi. Amsterdam, Moldova, dan Sofia adalah kompromi yang biasa untuk target Eropa.