Mixnode

Mixnode

Mixnode er en hurtig, fleksibel, massivt skalerbar platform til at udtrække og analysere data fra nettet.Mixnode giver dig mulighed for at tænke på alle ressourcer på nettet som rækker i en databasetabel;en gigantisk databasetabel med milliarder af rækker, som du kan forespørge ved hjælp af SQL (Structured Query Language).Så i stedet for at køre webcrawlere / -skrapere kan du skrive enkle forespørgsler på et ultra-fleksibelt sprog for at hente alle mulige interessante oplysninger fra nettet.
mixnode

Internet side:

Kategorier

Alternativer til Mixnode til Linux

grab-site

grab-site

grab-site er en crawler til arkivering af websteder til WARC-filer.Det inkluderer et betjeningspanel til overvågning af flere gennemsøgninger og understøtter ændring af URL-ignoreringsmønstre under gennemgangen.