Journalistiek

Onpartijdig, onafhankelijk nieuws, uitsluitend in dienst van het branchebelang.

Google Spanner: 10 miljoen servers, 1 systeem

  • Door
  • Arnout Veenman
  • geplaatst op
  • 26 oktober 2009 08:05 uur

GoogleGoogle heeft een nieuw systeem ontwikkeld waarmee het de belasting van haar systemen dynamisch verdeeld en verplaatst tussen verschillende datacentra en miljoenen servers. Dit systeem genaamd Google Spanner maakt het mogelijk om in het geval van hardware of bandbreedte problemen binnen enkele seconden automatisch, zonder menselijke tussenkomst, tussen datacentra te schakelen, meldt The Register.

Door Jeff Dean van Google wordt het platform in een presentatie (pdf) beschreven als een systeem dat “de opslag en rekencapaciteit van alle datacentra automatisch verplaatst en kopieën van data verplaatst op basis van beperkingen en gebruikspatronen”. Het gaat om beperkingen op het gebied van bandbreedte, packet loss, stroom, resources en “failure modes”. Spanner werkt als één grote namespace waarin data in hiërarchische directories is opgeslagen. Een kopie van alle data moet redundant op 5 locaties worden opgeslagen. Op twee schijven in de VS, twee schijven in Europa en één schijf in Azië.

Een voorbeeld van het gebruik van Spanner is het Google Belgium datacentrum. Dit datacentrum draait zonder chillers. Wanneer de buitenlucht te warm wordt om mee te koelen wordt het datacentrum (gedeeltelijk) uitgeschakeld. De processen die in het datacentrum draaien worden automatisch verplaatst naar een ander datacentrum.

Uiteindelijk is het de bedoeling om Spanner op te schalen tot tussen de één en tien miljoen servers, die verspreid staan over tussen de 100 en 1.000 locaties wereldwijd. Deze systemen zullen uiteindelijk één biljoen directories bevatten met één exabyte aan opslag. Verder stelt Dean dat Google werkt met “zones of semi-autonomous control”, waaruit blijkt dat Google haar infrastructuur verdeeld in autonome onderdelen die onafhankelijk van elkaar functioneren.

Design Google Spanner

Nog geen reacties

Feedback!
Fill out my online form.
Laatste reacties

Bedankt voor het succes van ISPam.nl
Koen Stegeman, Editor-in-Chief & founder Hostingjournalist.com: Jammer Arnout, maar je hebt een mooie bijdrage aan de hosting industrie geleverd, en dat jaren lang....

Bedankt voor het succes van ISPam.nl
Dillard Blom: Jammer dat een 'instituut' verdwijnt, en daarmee een bron van informatie over actuele zaken (en opin...

Bedankt voor het succes van ISPam.nl
L.: Uit automatisme kijk ik toch nog steeds elke dag naar ispam.nl, toch de hoop dat er nog een berichtj...

Bedankt voor het succes van ISPam.nl
Toni Donkers: Arnout bedankt! ik ga het missen dat is een feit!

Bedankt voor het succes van ISPam.nl
Marcel Stegeman: Ik zie het nu pas. Inderdaad jammer maar ik kijk nu al uit naar het volgende project.