Ny Google-arkitektur: Sådan får du enorm fart på data-analyserne

Google arbejder på ny big data-arkitektur, der vil kunne sprede et dataware-house ud over masser af datacentre.

Artikel top billede

(Foto: Dan Jensen)

Med en ny-udviklet arkitektur i hånden vil Google fremover kunne koble adskillige store datacentre sammen til gigantiske datawarehouses.

Det vil kunne øge både regnekraften og driftsikkerheden ganske betydeligt, og det vil kunne føre til stærkt forbedrede muligheder inden for cloud-baseret data-analyse, som Google har store forventninger til.

På tværs af datacentre

Google kalder den nye teknologi for Mesa.

Ifølge selskabet kan en Mesa-implementation rumme flere petabyte data og opdatere millioner af data-linier i sekundet, ligesom en Mesa-implementation vil kunne håndtere flere milliarder forespørgsler om dagen.

Udviklingen af Mesa har egentlig sigtet mod at udvikle et avanceret analyse-værkøtj til Googles egen annonce-forretning, men anvendelsesmulighederne er mange, lyder det fra selskabets udviklere.

Ifælge Google løser Mesa en række operationelle problemer i de traditionelle datawarehouse-teknologier.

Eksempelvis opdaterer de fleste kommcercielle datawarehouse-løsninger ikke data-pakkerne hele tiden, men kun for eksempel én gang dagligt eller ugentligt.

Her er Mesa bygget til at analysere og behandle data i det øjeblik, de er skabt.

Det gælder også, at Google har brug for ensartethed - såkaldt consistency - i data-behandlingen. Det betyder, at systemerne skal producere nøjagtigt det samme resultat fra samme kilde på en given forespørgsel - uanset hvilket datacenter, der behandler forespørgslen.

Mesa bygger på en række af Googles egne teknologier, der blandt andet tæller fil-systemet Colossus, storagesystemet Big Table (der ligger til grund for Apache Hadoop) og analyse-frameworket MapReduce.

Annonce

Navnenyt fra it-Danmark

Arctic Wolfs Network har pr. 1. september 2026 ansat Victor Dohlmann som Sales Director for Nordics. Nyt job

Victor Dohlmann

Arctic Wolfs Network

Netip A/S har pr. 1. august 2026 ansat Ronni Randrup som Seniorkonsulent ved netIP's kontor i Aalborg. Han kommer fra en stilling som Operations Consultant hos Complea. Nyt job

Ronni Randrup

Netip A/S

Norriq Danmark A/S har pr. 1. april 2026 ansat Sascha Trebbien Klinggaard som Lead Consultant. Hun skal især beskæftige sig med at facilitere tæt partnerskab og strategisk behovsafdækning hos vores kunder. Hun kommer fra en stilling som Senior Business Analytics Consultant hos Twoday Kapacity. Hun er uddannet hos Copenhagen Business School og har en Master's degree,Finance & Strategic Management 2014 - 2016. Nyt job

Sascha Trebbien Klinggaard

Norriq Danmark A/S

Netip A/S har pr. 11. august 2026 ansat Emil Kristoffersen som IT-Supporterelev ved netIP's kontor i Thisted. Han er uddannet Fisker, - Emil har dermed valgt et karriereskifte. Nyt job

Emil Kristoffersen

Netip A/S