Ny Google-arkitektur: Sådan får du enorm fart på data-analyserne

Google arbejder på ny big data-arkitektur, der vil kunne sprede et dataware-house ud over masser af datacentre.

Artikel top billede

(Foto: Dan Jensen)

Med en ny-udviklet arkitektur i hånden vil Google fremover kunne koble adskillige store datacentre sammen til gigantiske datawarehouses.

Det vil kunne øge både regnekraften og driftsikkerheden ganske betydeligt, og det vil kunne føre til stærkt forbedrede muligheder inden for cloud-baseret data-analyse, som Google har store forventninger til.

På tværs af datacentre

Google kalder den nye teknologi for Mesa.

Ifølge selskabet kan en Mesa-implementation rumme flere petabyte data og opdatere millioner af data-linier i sekundet, ligesom en Mesa-implementation vil kunne håndtere flere milliarder forespørgsler om dagen.

Udviklingen af Mesa har egentlig sigtet mod at udvikle et avanceret analyse-værkøtj til Googles egen annonce-forretning, men anvendelsesmulighederne er mange, lyder det fra selskabets udviklere.

Ifælge Google løser Mesa en række operationelle problemer i de traditionelle datawarehouse-teknologier.

Eksempelvis opdaterer de fleste kommcercielle datawarehouse-løsninger ikke data-pakkerne hele tiden, men kun for eksempel én gang dagligt eller ugentligt.

Her er Mesa bygget til at analysere og behandle data i det øjeblik, de er skabt.

Det gælder også, at Google har brug for ensartethed - såkaldt consistency - i data-behandlingen. Det betyder, at systemerne skal producere nøjagtigt det samme resultat fra samme kilde på en given forespørgsel - uanset hvilket datacenter, der behandler forespørgslen.

Mesa bygger på en række af Googles egne teknologier, der blandt andet tæller fil-systemet Colossus, storagesystemet Big Table (der ligger til grund for Apache Hadoop) og analyse-frameworket MapReduce.

Læses lige nu

    Annonce

    HusCompagniet A/S

    Senior data engineer

    Københavnsområdet

    Politiets Efterretningstjeneste

    Netværksspecialist til IT i PET

    Københavnsområdet

    Annonceindlæg fra HP

    Når angrebet slipper igennem, afgør robustheden, om driften fortsætter

    AI gør cyberangreb hurtigere og billigere. HP's sikkerhedsekspert forklarer, hvorfor fokus skal flyttes fra detektion til forebyggelse og robusthed.

    Navnenyt fra it-Danmark

    Systematic A/S har pr. 1. august 2026 ansat Casper Voldstedlund, 52 år,  som Director, Products. Han skal især beskæftige sig med drive produktudvikling inden for national sikkerhed og kritisk infrastruktur (NSI). Han kommer fra en stilling som Senior Director hos Stibo Systems A/S. Nyt job

    Casper Voldstedlund

    Systematic A/S

    Arctic Wolfs Network har pr. 1. september 2026 ansat Victor Dohlmann som Sales Director for Nordics. Nyt job

    Victor Dohlmann

    Arctic Wolfs Network

    Allan Hougaard, der arbejder med softwareudvikling og -arkitektur hos Sparinvest, har pr. 30. juni 2026 fuldført uddannelsen Master i it, linjen i softwarekonstruktion på Aarhus Universitet via It-vest-samarbejdet. Færdiggjort uddannelse

    Allan Hougaard

    Sparinvest

    Netip A/S har pr. 1. august 2026 ansat Thomas B. Steffensen som Seniorkonsulent ved netIP's kontor i Thisted. Han kommer fra en stilling som Senior IT/OT Network Consultant hos Frontmatec. Nyt job