Flyscrape'i VPS — alates 5,49 €/kuus
Käivita Flyscrape'i skreiper oma serveris — root, oma IP ja cron, 5 tundi prooviaega, sa ei riski millegagi
Käivita Flyscrape
Flyscrape'i VPS on virtuaalserver root-ligipääsuga, kus Flyscrape'i skreiper töötab ööpäev läbi ja käivitub ajakava järgi croni või systemd-taimeritega. Flyscrape loeb HTML-i otse, mistõttu on ta säästlik: konfiguratsioonil Standard 1 (4 vCPU, 4 GB mälu, 50 GB NVMe hinnaga 5,49 €/kuus) töötleb ta kümneid tuhandeid lehti päevas, samas kui peata brauseriga renderdamine vajab 8 GB mälu ja rohkem. Flyscrape'i, Go, brauserimootorid ja proksikliendid paigaldad ise ning oma IP-aadress jääb serveri külge. 5-tunnine prooviaeg enne maksmist lubab läbi mängida sinu enda kogumisstsenaariumi. Botide, RPA ja muu automatiseerimistarkvara jaoks on eraldi leht VPS automatiseerimiseks.
Paketid
VPS Flyscrape'ile
Flyscrape ilma brauserita mahub paketti Standard 1 — 4 vCPU, 4 GB mälu, 50 GB NVMe hinnaga 5,49 €/kuus. Paralleelseks kogumiseks peata brauseritega ja suuremate andmemahtude jaoks võta Standard 3 (6 vCPU, 8 GB) hinnaga 8,99 €/kuus. Enne maksmist on 5 tundi prooviaega.
Võrdle kõiki paketteStandard 1
| 4 vCPU · AMD EPYC |
| 4 GB RAM |
| 50 GB NVMe |
| Piiramatu andmeside |
| 1× IPv4 · KVM |
| Tugi 24/7 |
Standard 2
| 4 vCPU · AMD EPYC |
| 6 GB RAM |
| 60 GB NVMe |
| Piiramatu andmeside |
| 1× IPv4 · KVM |
| Tugi 24/7 |
Püsiv IP ja proksid
Oma IP-aadress ja root-ligipääs lubavad ühendada proksibasseinid ja rotatsiooni, et andmete kogumisel blokeeringuid vähem tuleks.
Kiirus NVMe peal
Pühendatud vCPU ja NVMe-kettad kiirendavad paralleelset kogumist ning kogutud andmete kirjutamist andmebaasi või failidesse.
Automatiseerimine ajakava järgi
Cron ja systemd-taimerid käivitavad Flyscrape'i ja sinu skriptid ajakava järgi, logid aitavad tulemusi jälgida.
Kuidas skreiper käivitada
Vali pakett ja tõmmis
Vali konfiguratsioon — Standard 1 (4 vCPU, 4 GB) tekstipõhiseks kogumiseks kuni Standard 3 (6 vCPU, 8 GB) brauseriga renderdamiseks — ja märgi Ubuntu või Debiani tõmmis.
Paigalda OS ise
Juhtpaneelist ja KVM-konsoolist paigaldad valitud OS-i ise ning saad puhta serveri root-ligipääsuga.
Sea üles Flyscrape ja proksid
SSH kaudu paigaldad Flyscrape'i, Go ja peata brauserid, ühendad oma proksid ning seadistad croniga ajastatud käivitused.
Server pidevaks andmekogumiseks
Server töötab ööpäev läbi: skreiperid koguvad andmeid ajakava järgi, kirjutavad tulemused andmebaasi ja annavad need sinu rakendustele edasi.
Meie insenerid aitavad prokside, ajastaja ja andmehoidlaga sinu projekti mõõtu. Konfiguratsiooni valik andmekogumiseks on lahti kirjutatud juhendis millist serverit automatiseerimine ja andmekogumine vajab; server botidele ja RPA-le tellitakse lehelt VPS automatiseerimiseks; kogutud andmed sobivad hästi andmebaasiserverisse.
Küsi konsultatsiooniKorduma kippuvad küsimused
Ei leidnud vastust?
Kirjuta meile kontaktilehe kaudu.
Jah. Saad root-ligipääsu ning paigaldad Flyscrape'i, Go tööriistad, peata brauserid ja kõik sõltuvused ise.
Jah. Root-ligipääs ja oma IP lubavad ühendada proksibasseinid ja rotatsiooni, et andmete kogumisel blokeeringuid vähem tuleks.
Flyscrape ilma brauserita on säästlik: 4 vCPU ja 4 GB (Standard 1, 5,49 €/kuus) töötlevad kümneid tuhandeid lehti päevas. Brauseriga renderdamine vajab 8 GB ja rohkem.
Vaikimisi ei: paigaldamine võtab paar minutit ja käib juhtpaneelist. Kui soovid võtmed kätte seadistust, on selleks serverihalduse teenus alates 79 €/kuus.
Jah. KVM-konsool annab riistvara tasemel ligipääsu OS-i paigaldamiseks ja uuesti paigaldamiseks ning hädaolukorra halduseks tavalise SSH kõrval.
Rusikareegel on 2–4 paralleelset lõime tuuma kohta tekstipõhisel kogumisel: 4 vCPU peal on see 8–16 tööd. Peata brauser sööb 300–500 MB mälu vahelehe kohta, seega lõimi jäägu tunduvalt vähemaks.
Samasse serverisse — failidesse või andmebaasi skreiperi kõrvale. Suuremate mahtude jaoks võta pakett 160 GB NVMe või rohkemaga.
Jah. Cron ja systemd-taimerid käivitavad skreiperid ajakava järgi ning logid aitavad töid jälgida.