» »

Microsoftovi podmorski podatkovni centri uspešno prestali dvoletni preizkus

Microsoftovi podmorski podatkovni centri uspešno prestali dvoletni preizkus

Slo-Tech - Microsoft je končal drugo fazo projekta Natick, v sklopu katerega so pokazali, da so podmorski podatkovni centri povsem izvedljiva alternativa običajnim kopenskim. Ker se pri postavitvi centrov v gosto naseljenih področjih pojavlja problem drage zemlje, hlajenja in v končni fazi človeškega faktorja pri vzdrževanju, je Microsoft preizkusil drugačno možnost. V 12 metro dolgo cisterno so zložili računalniško opremo ene omare (12-rack) in jo potopili na dno Severnega morja v bližini škotskega otočja Orkney. Dve leti pozneje se je projekt uspešno zaključil.

Že pred petimi leti so začeli, ko so eksperimentalno plovilo Leona Philpot s strežniki potopili v Pacifiku, približno kilometer od kalifornijske obale. Od avgusta do novembra 2015 je uspešno delovalo, Microsoft pa je navajal številne prednosti: cenejšo postavitev, hitrejšo postavitev, lažje hlajenje itd. Poskus ob škotski obali je trajal dlje, in sicer dobri dve leti v bližini European Marine Energy Centra. Notranjost kapsule so napolnili z dušikom, dobro zatesnili in potopili.

Ugotovili so, da je bilo okvar osemkrat manj v primerjavi s klasičnimi strežniki. To pripisujejo kontrolirani atmosferi, nezanemarljiv razlog pa je tudi odsotnost kakršnega koli človeškega faktorja. Prav tako je bilo ozračje suho in brez tresljajev. Za lokacijo na Škotskem se je Microsoft odločil zaradi poceni obnovljive energije in hladnega morja, ki omogoča enostavno hlajenje.

Projekt Northern Isles je potekal v 12,2 dolgi valjasti kapsuli s premerom 2,8 metra. Poraba električne energije je znašala 240 kW, s čimer so gnali 12 omar z 864 standardnimi Microsoftovimi strežniki. Sistem je možno postaviti v 90 dneh, medtem ko na kopnem v tem času ne dobijo niti gradbenega dovoljenja, pravi Microsoft. To je sicer res, a le če bi želeli povsem novo lokacijo. Na obstoječih je vseeno možno kapacitete dodajati urneje.

29 komentarjev

crystal ::

a bodo sedaj naredili se kaj vecjega?

DexterBoy ::

No, evo, pa imamo krivca za globalno segrevanje; morje! :))
Notranjost kapsule so napolnili z dušikom, dobro zatesnili in potopili.
Ti šment, če je kdo kemik; razlika v uporabi med dušikom in helijem? Slednjega primanjkuje. Se uporablja v diskih; ker je lažji ali pa je še kakšna druga lastnost?
Ko ne gre več, ko se ustavi, RESET Vas spet v ritem spravi.
http://www.avtofil.si/

darkolord ::

Helij ima nižjo gostoto in manj aerodinamičnega upora, predvsem pa kar nekajkrat bolje prevaja toploto od dušika in zraka.
spamtrap@hokej.si
spamtrap@gettymobile.si

DexterBoy ::

našel;
https://www.backblaze.com/blog/helium-f...
aha, hvala, darkolord :)
Ko ne gre več, ko se ustavi, RESET Vas spet v ritem spravi.
http://www.avtofil.si/

mrTwelveTrees ::

A ni tko da diske ki so v okvarah, v podatkovnih centrih, menjajo na hotswap, tukaj pa.... enostavno disk samo pustijo.

Mr.B ::

mrTwelveTrees je izjavil:

A ni tko da diske ki so v okvarah, v podatkovnih centrih, menjajo na hotswap, tukaj pa.... enostavno disk samo pustijo.

ne,
menja se celi kontejner, ko je % dosezen izpad ali pa zadev zastari.
Voljeno telo ogledalo volilnega telesa.

Master_Yoda ::

Koliko hitreje pa se bo antarktika topila potem ko vse serverje prestavijo v morje in ga direktno ogrevajo. Je izmerljivo ?
Dovie'andi se tovya sagain.

gruntfürmich ::

DexterBoy je izjavil:

...ali pa je še kakšna druga lastnost?
cena in uhajanje.
"Namreč, da gre ta družba počasi v norost in da je vse, kar mi gledamo,
visoko organizirana bebavost, do podrobnosti izdelana idiotija."
Psiholog HUBERT POŽARNIK, v Oni, o smiselnosti moderne družbe...

Pobes ::

Glede okvar diskov bi bilo možno dat noter eno robot roko ki se pelje okoli strežnikov in po ukazu zamenja disk. Ne vem pa koliko časa lahko taki diski stojijo v rezervi. Verjamem pa če bi jim bil to problem, bi ga že rešili :)

Izi ::

Najverjetneje bodo ti kontejnerji za vedno ostali v morju. Finančno gledano nima nobenega smisla tole dvigovati na kopno in voziti na odpad po desetletju ali dveh. Če gledamo koliko potopljenih ladij leži na dnu morja, verjetno tudi ti kontejnerji ne bodo imeli kakšnega bistvenega vpliva.

McMallar ::

Pobes je izjavil:

Glede okvar diskov bi bilo možno dat noter eno robot roko ki se pelje okoli strežnikov in po ukazu zamenja disk. Ne vem pa koliko časa lahko taki diski stojijo v rezervi. Verjamem pa če bi jim bil to problem, bi ga že rešili :)


Enostavno imas n diskov v standby. Ko en odpove, ga sistem vrze ven iz polja in avtomatsko nadomesti z tistim v standby. Nic dramaticnega, to se ze sedaj uporablja v diskovnih poljih - se moj 4-bay NAS ima opcijo hot-swap diska...

Potem pa tako, kot je Mr. B napisal - ko imas okvar cez dolocen procent se vsa stvar enostavno zamenja.
Why can't a programmer tell the difference between Halloween and Christmas?
Because OCT31 = DEC25

pegasus ::

Izi je izjavil:

Najverjetneje bodo ti kontejnerji za vedno ostali v morju. Finančno gledano nima nobenega smisla tole dvigovati na kopno in voziti na odpad po desetletju ali dveh.
Eh, v nekaj tonah serverjev je že dovolj zlata, da se kakim indijcem splača to zmleti in izločiti ven zlato. Da drugih zanimivih kovin niti ne omenjam.

bbbbbb2015 ::

mrTwelveTrees je izjavil:

A ni tko da diske ki so v okvarah, v podatkovnih centrih, menjajo na hotswap, tukaj pa.... enostavno disk samo pustijo.


Ne. Recimo da imaš RAID5, s tremi diski. Glede na MTBF (in izkušnje) preračunajo, koliko "spare", t.j. rezervnih diskov morajo dati noter. RAID kontrolerji, pa tudi software (na FreeBSDju, recimo) zna sam porabiti rezervo, če disk odpove. IBMov RAID kontroler zna celo preventivno zamenjati disk, če po SMART parametrih kaže, da bo disk odpovedal.

Tudi v večjih computing centrih dajo recimo v EMC diskovno polje določeno število "spare" diskov. S tem prihranijo pač da niso zdaj servisni posegi za vsako figo, ampak ko je določeno število diskov mrtvih.

Ne morem pa ugotoviti, čigave serverje so dali v racke. Ali pa so to morda custom serverji.

Ta poskus je ekselenten. To je v redu za morje, za deep space in podobno.

Mr.B ::

bbbbbb2015 je izjavil:

mrTwelveTrees je izjavil:

A ni tko da diske ki so v okvarah, v podatkovnih centrih, menjajo na hotswap, tukaj pa.... enostavno disk samo pustijo.


Ne. Recimo da imaš RAID5, s tremi diski. Glede na MTBF (in izkušnje) preračunajo, koliko "spare", t.j. rezervnih diskov morajo dati noter. RAID kontrolerji, pa tudi software (na FreeBSDju, recimo) zna sam porabiti rezervo, če disk odpove. IBMov RAID kontroler zna celo preventivno zamenjati disk, če po SMART parametrih kaže, da bo disk odpovedal.

Tudi v večjih computing centrih dajo recimo v EMC diskovno polje določeno število "spare" diskov. S tem prihranijo pač da niso zdaj servisni posegi za vsako figo, ampak ko je določeno število diskov mrtvih.

Ne morem pa ugotoviti, čigave serverje so dali v racke. Ali pa so to morda custom serverji.

Ta poskus je ekselenten. To je v redu za morje, za deep space in podobno.

Namig : Storage Spaces Direct
Da ogromno je rezerve, če je zadaj cluster z 8 ali več nodi... V glavnem, ko pride do doleočenega %, pridejo z novim kontejnerjem, starega pa odpeljejo.
Realno pa bi se zamsilil v kvaliteti ponudnika hardwera, če v dobi garancije menjaš polovico diskov.
Voljeno telo ogledalo volilnega telesa.

darkolord ::

Master_Yoda je izjavil:

Koliko hitreje pa se bo antarktika topila potem ko vse serverje prestavijo v morje in ga direktno ogrevajo. Je izmerljivo ?
Če bi vse serverje prestavil v morje, bi na vsak server bilo cca. 4 kubične kilometre vode, za kar bi (pri 500 W) rabil milijon let, da jo segreje za 1 stopinjo.
spamtrap@hokej.si
spamtrap@gettymobile.si

chort ::

Izi je izjavil:

Najverjetneje bodo ti kontejnerji za vedno ostali v morju. Finančno gledano nima nobenega smisla tole dvigovati na kopno in voziti na odpad po desetletju ali dveh. Če gledamo koliko potopljenih ladij leži na dnu morja, verjetno tudi ti kontejnerji ne bodo imeli kakšnega bistvenega vpliva.

Ne bo šlo, vsaj pri Škotih (in ostalih ki mejijo na Severno morje) ne. Zakone o decommisioningu imajo precej dobro napisane zaradi offshore naftne industrije, vsak projekt rabi plan in zagotovljeno financiranje od začetka do povrnitve v prvotno stanje.

starfotr ::

Danes veliki playerji naročajo serverje po svojih potrebah, takih sploh ni mogoče kupiti v prosti prodaji, ker so narejeni po meri.

2 leti je v računalništvu lahko dolga doba. Lahko je pa precej kratka, odvisno kako jemljemo. Meni se zdi, da bi morali ta eksperiment imeti vsaj 7 let, pa da vidimo, koliko robe bo takrat še delalo/kako se bodo zadeve obnašale.

Me pa čudi, da se niso spomnili dati kakih kapsul s serverji v rudnike, ki so polni vode.

Mr.B ::

chort je izjavil:

Izi je izjavil:

Najverjetneje bodo ti kontejnerji za vedno ostali v morju. Finančno gledano nima nobenega smisla tole dvigovati na kopno in voziti na odpad po desetletju ali dveh. Če gledamo koliko potopljenih ladij leži na dnu morja, verjetno tudi ti kontejnerji ne bodo imeli kakšnega bistvenega vpliva.

Ne bo šlo, vsaj pri Škotih (in ostalih ki mejijo na Severno morje) ne. Zakone o decommisioningu imajo precej dobro napisane zaradi offshore naftne industrije, vsak projekt rabi plan in zagotovljeno financiranje od začetka do povrnitve v prvotno stanje.

Priznam da morma preveriti, ampak za razmislek vzemi eno kontejnersko ladjo. Koliko sveže vode na minuto gre skozi hladilni sistem ?
Lahko tudi preveriš, koliko so temperature višje ob nuklaerkah ki za medij "hladijo" z morsko vodo.
Voljeno telo ogledalo volilnega telesa.

chort ::

Mr.B je izjavil:

chort je izjavil:

Izi je izjavil:

Najverjetneje bodo ti kontejnerji za vedno ostali v morju. Finančno gledano nima nobenega smisla tole dvigovati na kopno in voziti na odpad po desetletju ali dveh. Če gledamo koliko potopljenih ladij leži na dnu morja, verjetno tudi ti kontejnerji ne bodo imeli kakšnega bistvenega vpliva.

Ne bo šlo, vsaj pri Škotih (in ostalih ki mejijo na Severno morje) ne. Zakone o decommisioningu imajo precej dobro napisane zaradi offshore naftne industrije, vsak projekt rabi plan in zagotovljeno financiranje od začetka do povrnitve v prvotno stanje.

Priznam da morma preveriti, ampak za razmislek vzemi eno kontejnersko ladjo. Koliko sveže vode na minuto gre skozi hladilni sistem ?
Lahko tudi preveriš, koliko so temperature višje ob nuklaerkah ki za medij "hladijo" z morsko vodo.


Ali narobe citiraš, ali narobe razumeš :) Govorim o temu, da kontejnerji nikakor ne bodo ostali v vodi po koncu uporabne dobe, kot razmišlja Izi.
O hlajenju ne bi izgubljal besed, ker je vpliv zanemarljiv.

stara mama ::

Nikjer ne piše nič, kako je zadeva povezana s kopnim, kakšni kabli?

DamijanD ::

Dejansko verjetno pod črto tak kontejner manj segreva morje/okolje kot kopenski ekvivalent, ki potrebuje še klimo/prezračevalni sistem.

chort ::

DamijanD je izjavil:

Dejansko verjetno pod črto tak kontejner manj segreva morje/okolje kot kopenski ekvivalent, ki potrebuje še klimo/prezračevalni sistem.

Ne verjetno, zagotovo :)

darkolord ::

stara mama je izjavil:

Nikjer ne piše nič, kako je zadeva povezana s kopnim, kakšni kabli?
Optika pa štrom.
spamtrap@hokej.si
spamtrap@gettymobile.si

tac ::

Pa še zeleni so (lahko), kako da se s tem niso pobahali ?
Zraven morskih vetrnih elektrarn dodaš še strežnike in maš zelo zeleno energijo zanje (pustimo umazane podrobnosti, ko zmanjka vetra :) )

Sem preveril na njihovi strani in so se pohvalili, da so 100% napajani iz obnovljivih virov, bravo, Zemlja jih ima rada :)

Zgodovina sprememb…

  • spremenil: tac ()

chort ::

tac je izjavil:

Pa še zeleni so (lahko), kako da se s tem niso pobahali ?
Zraven morskih vetrnih elektrarn dodaš še strežnike in maš zelo zeleno energijo zanje (pustimo umazane podrobnosti, ko zmanjka vetra :) )

Sem preveril na njihovi strani in so se pohvalili, da so 100% napajani iz obnovljivih virov, bravo, Zemlja jih ima rada :)

Zakaj vetrne elektrarne, če lahko take na morske tokove (ki so precej napovedljivi) in baterijo? Pol rabiš samo še optični kabel. To verjetno šparajo za naslednji PR stunt ;)

fosil ::

Ker se pri postavitvi centrov v gosto naseljenih področjih pojavlja problem drage zemlje, hlajenja in v končni fazi človeškega faktorja pri vzdrževanju, je Microsoft preizkusil drugačno možnost.

Na škotskem, kjer so zadevo postavili ni nič od tega problem.
Človeški faktor pa lahko izključiš tudi na kopnem, če prepoveš vstop.
Če pa bi tole postavil npr. v zaliv v new yorku, kjer je veliko ladijskega prometa bi pa se pa hitro pojavili novi problemi, tudi z dovoljenji.
Tukaj gre tako predvsem za reklamo.
Tako je!

DexterBoy ::

khm... rabiš štrom da delovanje strežnikov, štrom za pumpe za hladilno tekočino ter štrom za klimaše. Tukaj klimaši odpadejo ker gre hladilna tekočina skozi morje. AMPAK;
v tem primeru pod morjem je hladilno tekočin možno ohladiti le do temperature vode, recimo do 4 stopinje. Če pa hladimo tekočino s klimo, lahko ohladimo medij na NIŽJO temperaturo.
Nižja temperatura pomeni višje frekvence procesorjev, hitrejše delovanje...
Ali pa jaz tukaj ne vidim dreves, go gledam gozd?
Ko ne gre več, ko se ustavi, RESET Vas spet v ritem spravi.
http://www.avtofil.si/

chort ::

Takole preko palca bi rekel, da je važno predvsem kako hitro je sistem sposoben odvajat toploto. To lahko dosežeš z nižjo temperaturo hladilne tekočine ali večanjem pretoka (in seveda dovolj velikim oz učinkovitim izmenjevalcem na hladni strani krogotoka)
Naj me prosim kdo popravi, če bluzim. To je bil dve leti nazaj naš plan, ko smo se še pogovarjali o shipping kontejnerju s 400x RTX2080ti, ki bi ga na ladji hladili s toplotnim izmenjevalcem potopljenim v morsko vodo. Na koncu smo šli v optimizacijo in bolj selektivno procesiranje.

Mr.B ::

DexterBoy je izjavil:

khm... rabiš štrom da delovanje strežnikov, štrom za pumpe za hladilno tekočino ter štrom za klimaše. Tukaj klimaši odpadejo ker gre hladilna tekočina skozi morje. AMPAK;
v tem primeru pod morjem je hladilno tekočin možno ohladiti le do temperature vode, recimo do 4 stopinje. Če pa hladimo tekočino s klimo, lahko ohladimo medij na NIŽJO temperaturo.
Nižja temperatura pomeni višje frekvence procesorjev, hitrejše delovanje...
Ali pa jaz tukaj ne vidim dreves, go gledam gozd?

?
Server CPU ima deklarirano : Moč (W/toplota) in pri kateri frekvenci je to. Tudi desktop CPU na stock ali je to i9 10900k ali i5 10400 ne bo šel višje zaradi nižje temperature. Razen v nasprotenm primeru da je hlajenje glede na deklarirano specifikacijo prešvoh. Za elektroniko je itak rajši da vse ostane na in dela na isti temperaturi. Cloud provider itak meče ven infrastukturo, takoj ko le ta zastari.
Ostalo je bolj ? imaš strežniške sisteme, ki delajo na 45C in več. So narejeni za te temperature in tudi garancija ti ne gre...
Voljeno telo ogledalo volilnega telesa.


Vredno ogleda ...

TemaSporočilaOglediZadnje sporočilo
TemaSporočilaOglediZadnje sporočilo
»

Microsoftovi podmorski podatkovni centri uspešno prestali dvoletni preizkus

Oddelek: Novice / Omrežja / internet
292645 (674) Mr.B
»

Hyperloop (strani: 1 2 3 4 5 6 7 8 9 )

Oddelek: Znanost in tehnologija
42248069 (14805) Magic1
»

Microsoftov projekt Natick gre v drugo fazo

Oddelek: Novice / Znanost in tehnologija
414785 (2494) starfotr
»

Največje računalniške napake v zgodovini

Oddelek: Novice / Znanost in tehnologija
4711940 (8567) MrStein

Več podobnih tem