Ny Google-arkitektur: Sådan får du enorm fart på data-analyserne

Google arbejder på ny big data-arkitektur, der vil kunne sprede et dataware-house ud over masser af datacentre.

Artikel top billede

(Foto: Dan Jensen)

Med en ny-udviklet arkitektur i hånden vil Google fremover kunne koble adskillige store datacentre sammen til gigantiske datawarehouses.

Det vil kunne øge både regnekraften og driftsikkerheden ganske betydeligt, og det vil kunne føre til stærkt forbedrede muligheder inden for cloud-baseret data-analyse, som Google har store forventninger til.

På tværs af datacentre

Google kalder den nye teknologi for Mesa.

Ifølge selskabet kan en Mesa-implementation rumme flere petabyte data og opdatere millioner af data-linier i sekundet, ligesom en Mesa-implementation vil kunne håndtere flere milliarder forespørgsler om dagen.

Udviklingen af Mesa har egentlig sigtet mod at udvikle et avanceret analyse-værkøtj til Googles egen annonce-forretning, men anvendelsesmulighederne er mange, lyder det fra selskabets udviklere.

Ifælge Google løser Mesa en række operationelle problemer i de traditionelle datawarehouse-teknologier.

Eksempelvis opdaterer de fleste kommcercielle datawarehouse-løsninger ikke data-pakkerne hele tiden, men kun for eksempel én gang dagligt eller ugentligt.

Her er Mesa bygget til at analysere og behandle data i det øjeblik, de er skabt.

Det gælder også, at Google har brug for ensartethed - såkaldt consistency - i data-behandlingen. Det betyder, at systemerne skal producere nøjagtigt det samme resultat fra samme kilde på en given forespørgsel - uanset hvilket datacenter, der behandler forespørgslen.

Mesa bygger på en række af Googles egne teknologier, der blandt andet tæller fil-systemet Colossus, storagesystemet Big Table (der ligger til grund for Apache Hadoop) og analyse-frameworket MapReduce.

Læses lige nu

    Annonceindlæg fra HP

    En AI-specialist værdsætter dokumenteret ydeevne og lokal computerkraft

    Forsker og ingeniør inden for AI Robert Luciani arbejder med det nyeste i kunstig intelligens.

    AP Pension

    AP Pension søger erfaren Product Owner

    Københavnsområdet

    Politiets Efterretningstjeneste

    ML OPS til udvikling og støtte af Computer Network Exploitation

    Københavnsområdet

    Forsvarsministeriets Materiel- og Indkøbsstyrelse

    Vil du være med til at opbygge og udvikle Forsvarets dronekapacitet?

    Københavnsområdet

    Navnenyt fra it-Danmark

    Oliver Dirks-Steinmoen, softwareudvikler hos Folketingets administration, har pr. 30. juni 2026 fuldført uddannelsen Master i it, linjen i softwarekonstruktion på Aarhus Universitet via It-vest-samarbejdet. Færdiggjort uddannelse

    Oliver Dirks-Steinmoen

    Folketingets administration

    Netip A/S har pr. 1. maj 2026 ansat Morten Thune som Systemkonsulent ved netIP's kontor i Rønnede. Han har tidligere beskæftiget sig med tilsvarende opgaver og har derudover 30 års erfaring med IT i alle afskygninger. Nyt job

    Morten Thune

    Netip A/S

    Netip A/S har pr. 1. juli 2026 ansat Jacob Holm Jensen som Supportkonsulent ved netIP's kontor i Thisted. Han kommer fra en stilling som IT Supporter hos Revisionsselskabet RSM. Han er uddannet Datatekniker hos netIP - Jacob vender dermed hjem igen. Nyt job

    Jacob Holm Jensen

    Netip A/S

    Netip A/S har pr. 1. maj 2026 ansat Ida Hyllested Friis som Key Account Manager ved netIP's kontor i Thisted. Hun kommer fra en stilling som Key Account Manager hos Københavns erhvervshus. Nyt job