Kokio serverio reikia duomenų parsinimui ir automatizavimui

Suskaičiuok savo srautus, pasirink operacinę sistemą — ir paleisk savo skriptus per 5 valandų bandomąjį režimą, dar prieš apmokėjimą

Parinkti konfigūraciją
Konfigūracijos parinkimas parsinimui

Serveris parsinimui ir automatizavimui renkamas pagal tris skaičius: lygiagrečių srautų kiekį, kokios operacinės sistemos reikalauja tavo programinė įranga ir kiek duomenų surenki. Praktinis orientyras: viena headless naršyklė užima 0,5–1 GB atminties, todėl 8 GB tempia 6–10 srautų, o 16 GB — 12–20. Python ir Node.js skriptai atminties naudoja gerokai mažiau ir sukasi Linux sistemoje; ZennoPoster, BAS ir CapMonster reikalauja Windows. Žemiau — konfigūracijos tipiniams scenarijams; pasirinkęs užsisakyk VPS automatizavimui.

Kiek kainuoja toks serveris

Standard, Power ir Max — mėnesinis arba pigesnis metinis mokėjimas. 5 valandos bandymo prieš apmokėjimą.

5.49 mėn.

Standard 1

4 vCPU · AMD EPYC
4 GB RAM
50 GB NVMe
Neribotas duomenų srautas
IPv4 · KVM
Pagalba 24/7
6.99 mėn.

Standard 2

4 vCPU · AMD EPYC
6 GB RAM
60 GB NVMe
Neribotas duomenų srautas
IPv4 · KVM
Pagalba 24/7
8.99 mėn.

Standard 3

6 vCPU · AMD EPYC
8 GB RAM
80 GB NVMe
Neribotas duomenų srautas
IPv4 · KVM
Pagalba 24/7

Konfigūracija tipiniam scenarijui

Kiek srautų ir kiek duomenų tempia kiekvienas planas iš mūsų kainoraščio.

Scenarijus Konfigūracija Planas Kaina, €/mėn.
1–2 Python skriptai, paleidžiami per cron 4 vCPU · 4 GB · 50 GB Standard 1 5,49 € Užsisakyti
6–10 headless naršyklės srautų 6 vCPU · 8 GB · 80 GB Standard 3 8,99 € Užsisakyti
ZennoPoster arba BAS Windows aplinkoje 8 vCPU · 8 GB · 100 GB Standard 4 10,99 € Užsisakyti
12–20 srautų, rinkimas per proxy 10 vCPU · 16 GB · 160 GB Power 1 17,99 € Užsisakyti
Dešimtys botų ir dideli eksportai 16 vCPU · 24 GB · 240 GB Power 3 27,99 € Užsisakyti

Orientyrai pagal atminties sąnaudas vienam srautui; tikra apkrova priklauso nuo tikslinių svetainių ir tavo programinės įrangos. Kainos nurodytos mėnesiniam mokėjimui iš mūsų kainoraščio — pusmečiui 10%, metams 18% pigiau.

1

Skaičiuok atmintį vienam srautui

Daugiasrautiniame parsinime atmintis baigiasi gerokai anksčiau nei diskas: 0,5–1 GB vienai headless naršyklei plius atsarga sistemai.

2

Programa lemia OS

Python ir Node.js Linux sistemoje taupesni; ZennoPoster, BAS ir CapMonster veikia tik Windows aplinkoje.

3

Proxy ir savas IPv4

Serveris turi skirtą IPv4 adresą, o išoriniai proxy konfigūruojami tavo paties programoje — mes tam apribojimų netaikome.

Kaip parinkti serverį pagal savo užduotis

Trys žingsniai — nuo srautų suskaičiavimo iki paleidimo su tikrais skriptais.

1

Suskaičiuok srautus

Padaugink vienu metu veikiančių naršyklių skaičių iš 0,5–1 GB ir pridėk 1–2 GB sistemai — tiek atminties ir reikia.

2

Apsispręsk dėl operacinės sistemos

Pasižiūrėk, kokiai OS skirta tavo programinė įranga. Windows reikia tik RPA platformoms; skriptai puikiai sukasi Ubuntu ar Debian.

3

Patikrink bandomuoju laikotarpiu

VPS išduodamas 5 valandų bandomuoju režimu: paleisk savo skriptus su tikra apkrova ir mokėk tik po to.

Konfigūracija parinkta — laikas užsisakyti

Konfigūracija parinkta — laikas užsisakyti

Užsakymo pateikimas, OS atvaizdai ir planai surinkti atskirame puslapyje — VPS automatizavimui. Ten aprašyta ir kaip serveris išduodamas bei kas įeina į planą.

Jei programinė įranga jau žinoma, pradėk nuo jos puslapio: ZennoPoster, CapMonster arba Docker konteinerizuotiems procesams.

Eiti į VPS užsakymo puslapį

Dažniausiai užduodami klausimai

Neradote atsakymo?
Parašykite mums per kontaktų puslapį.

Nuo 0,5 iki 1 GB kiekvienai headless naršyklei. Su 8 GB (Standard 3, 8,99 €/mėn.) realiai sukasi 6–10 srautų, su 16 GB (Power 1, 17,99 €) — 12–20.

Linux, jei skriptai rašyti Python arba Node.js — jis naudoja mažiau atminties. Windows reikia ZennoPoster, BAS ir CapMonster; atvaizdą diegdamas pasirenki pats.

Parsinant per naršyklę pirmiausia baigiasi atmintis, todėl žiūrėk į RAM. Branduoliai svarbesni tada, kai naršyklė nenaudojama, o apkrova yra HTML analizė ir duomenų apdorojimas.

Tekstiniai eksportai maži: milijonas JSON eilučių — keli gigabaitai. Diską planuok logams, ekrano nuotraukoms ir medijai: 50 GB NVMe pradiniame plane, 240 GB Power 3.

Proxy reikia tada, kai tikslinė svetainė riboja užklausų dažnį iš vieno adreso. Serveris turi vieną skirtą IPv4, o išorinius proxy konfigūruoji savo programoje be mūsų apribojimų.

Linux sistemoje su cron arba systemd laikmačiais, Windows — su Task Scheduler. Serveris veikia visą parą, todėl tavo kompiuteris neturi likti įjungtas.

Viešai prieinamų duomenų rinkimas paprastai leidžiamas, tačiau atsakomybė už įstatymus, tikslinės svetainės taisykles ir mūsų paslaugų sąlygas tenka klientui. Mes tavo skriptų turinio netikriname.

Puslapyje VPS automatizavimui: planai, OS atvaizdai ir užsakymo pateikimas. Serveris išduodamas 5 valandų bandomuoju režimu — moki tik patikrinęs.