Gigablast

Gigablast

Gigablast er en kraftfuld, open source, ny søgemaskine, der laver indeksering i realtid! Funktioner, der kan klassificeres til tusinder af servere.
Gigablast er en kraftfuld, open source, ny søgemaskine, der foretager realtid indeksering!Funktioner, der kan skaleres til tusinder af servere.Har skaleret til over 12 milliarder websider på over 200 servere.En dual quad core med 32 GB ram og to 160 GB Intel SSD'er, der kører 8 Gigablast-forekomster, kan gøre omkring 8 qps (forespørgsler pr. Sekund) på et indeks på 10 millioner sider.Drevene er tæt på den maksimale lagerkapacitet.Fordobling af indeksstørrelse halverer qps-hastigheden mere eller mindre.(Ydelsesmålinger kan laves cirka ti gange hurtigere, men jeg er ikke klar over det endnu. Brug af drevplads forbliver sandsynligvis det samme, fordi det allerede er temmelig effektivt.) 1 million websider kræver 28,6 GB drevplads.Det inkluderer indekset, metainformationen og den komprimerede HTML på alle websider.Spindelhastighed er ca. 1 side per sekund pr. Kerne.Så en dobbelt quad-kerne kan edderkop og indeksere 8 sider pr. Sekund, hvilket er 691.200 sider pr. Dag.4 GB RAM kræves pr. Gigablast-instans.(instans = proces) Live demo på Written in C / C ++ for optimal ydelse.Over 500.000 linjer med C / C ++.100% brugerdefineret.En enkelt binær.Webserveren, databasen og alt andet findes i denne kildekode på en meget effektiv måde.Gør administration og fejlfinding lettere.Pålidelig.Er blevet testet i live produktion siden 2002 på milliarder af forespørgsler på et indeks på over 12 milliarder unikke websider, 24 milliarder spejlet.Super hurtig og effektiv.En af en lille håndfuld søgemaskiner, der har ramt så store tal.Den eneste open source søgemaskine der har.Understøtter alle sprog.Kan give resultater på specificerede sprog et løft over andre på forespørgselstidspunktet.Bruger UTF-8-repræsentation internt.Historik.Har været brugt af mange klienter.Er med succes brugt i distribueret virksomhedssoftware.Bufrede websider med fremhævning af forespørgselsterm ....

Internet side:

Kategorier

Alternativer til Gigablast til Blackberry 10 med open source-licens