Решение

VPS для SEO-инструментов, трекеров позиций и краулеров

Cutter 16 · $62/moClipper 16 · $92/mo
Краткий ответ

SEO-инструментарий требователен к памяти и чувствителен к IP. Screaming Frog, обходящий 500 000 URL, хочет 16 ГБ; трекеру позиций нужно несколько IPv4-адресов гораздо больше, чем ядер. Четыре выделенных ядра, 16 ГБ и пара дополнительных адресов — это конфигурация, которая действительно работает, а разнообразие регионов позволяет проверять позиции так, как их видит локальный пользователь.

Что вам нужно

Минимальные характеристики для seo-инструменты и отслеживание позиций
РесурсЧто вам нужно на самом деле
CPU4 выделенных ядра
RAM16 ГБ для больших обходов; Screaming Frog прожорлив к памяти
Диск320 ГБ NVMe для баз краулинга
IP-адресаНесколько IPv4-адресов для ротации

Рекомендуемые тарифы

Cutter

Cutter 16

$ 58.9 /month

Итого 176,70 $ · Скидка 5%

vCPU
6 × dedicated
RAM
16 GB
Диск
320 GB NVMe SSD
Трафик
15 TB
IPv4 / IPv6
1 / /64 routed
Настроить
Clipper

Clipper 16

$ 87.4 /month

Итого 262,20 $ · Скидка 5%

vCPU
8 × dedicated
RAM
16 GB
Диск
400 GB NVMe Gen4 SSD
Трафик
30 TB
IPv4 / IPv6
1 / /64 routed
Настроить

Рекомендуемые местоположения

Местоположение обычно является решающим фактором для этой нагрузки — либо из-за задержек, либо из-за юрисдикции.

Почему OnionVPS для этого

  • Дополнительные IPv4-адреса за $3 в месяц, без формы обоснования.
  • Инстансы в 40+ странах позволяют видеть по-настоящему локальные результаты.
  • Без ограничений исходящей скорости и фильтрации протоколов в нашей сети.
  • Чистое адресное пространство, поэтому ваш краулер не стартует с чужой репутации.

Как настроить

  1. Разверните Cutter 16 с 16 ГБ

    На практике именно память ограничивает размер краулинга.

  2. Добавьте IP-адреса для ротации

    Привяжите каждого воркера к отдельному исходному адресу.

  3. Запускайте headless-краулинг в Docker

    У Screaming Frog и Sitebulb есть headless-режимы.

  4. Разверните небольшие пробы в целевых странах

    Один Skiff 1 на страну даёт реальные локальные проверки.

  5. Храните историю краулинга вне сервера

    Базы краулинга быстро растут; архивируйте их на инстанс Hold.

Часто задаваемые вопросы

Сколько RAM нужно Screaming Frog?

Примерно 4 ГБ на 100 000 URL в режиме памяти. Режим хранения в базе данных жертвует скоростью ради гораздо более низкого потолка памяти и подходит, если у вас более 200 000 URL.

Можно ли проверять позиции из разных стран?

Да. Разверните небольшой инстанс в каждой целевой стране и выполняйте запросы оттуда — это единственный способ увидеть по-настоящему локальные результаты.

Разрешаете ли вы автоматический краулинг?

Да, для законно доступных публичных данных с нагрузкой, не приводящей к деградации целевого ресурса.