Novice » Google prežveči petabajt v šestih urah
Google prežveči petabajt v šestih urah
- oznake: N/A
Slashdot - Google se v svojem blogu pohvali, da so najhitrejši na svetu pri razvrščanju podatkov. Z uporabo orodja MapReduce, ki skrbi za poganjanje več procesov hkrati, so presortirali terabajt podatkov, shranjenih v lastnem datotečnem sistemu, z 1.000 računalniki v 68 sekundah, kar je za trikrat boljše od preteklega rekorda, ki ga je držal Yahoo. Terabajt včasih ne zadostuje, pravijo, zato so poskusili še s tisoč terabajti (petabajt) in na 4.000 računalnikih zanje porabili malenkost več kot šest ur. Mimogrede, za toliko podatkov potrebujejo 48.000 diskov, pri takih številkah pa pride do izraza statistika. Tako se je med vsakim poskusom vsaj eden tudi pokvaril.
- Google omogočil javnosti dostop do zbirk fotografij revije LIFE :: 22. nov 2008
- Google napove gripo :: 12. nov 2008
- Google je star deset let! :: 27. sep 2008
- Google izdal lasten brskalnik :: 2. sep 2008
fery :: 24. nov 2008, 08:19:06
V kolikor za en petabyte potrebujejo 48.000 diskov, potem to pomeni, da ima en disk 20,8 gb. To je pa dandanes malo čudno, ali ne?
overlord_tm :: 24. nov 2008, 08:39:01
V kolikor za en petabyte potrebujejo 48.000 diskov, potem to pomeni, da ima en disk 20,8 gb. To je pa dandanes malo čudno, ali ne?
Pa ni en podatek sam na enmu disku ... redundanca. Recimo če je podatek na 5 diskih potem pa prideš do številke 100 ;)
586: The average IQ needed to understand a PC ... or mtosev.
MrStein :: 24. nov 2008, 08:39:21
Mogoče pa je del diskov prazen, ima začasne kopije, niso šli do maksimuma ipd...
Teštiram če delaž
antonija :: 24. nov 2008, 08:40:20
We were writing it to 48,000 hard drives (we did not use the full capacity of these disks, though), and every time we ran our sort, at least one of our disks managed to break (this is not surprising at all given the duration of the test, the number of disks involved, and the expected lifetime of hard disks).
EDIT: Mogoce...
"I know that you believe you understand what you think I said, but I'm not
sure you realize that what you heard is not what I meant"
Richard Milhous Nixon
sure you realize that what you heard is not what I meant"
Richard Milhous Nixon
Zgodovina sprememb…
- spremenilo: antonija (24. nov 2008 ob 08:40:59)
Pyr0Beast :: 24. nov 2008, 08:52:04
Drag poizkus tole [:D]
Control oil and you control nations;
Control food and you control people.
Control food and you control people.
1024 :: 24. nov 2008, 08:55:45
Drag poizkus tole
Saj pride račun za elektriko večji kot stroški crknenih diskov.
Fish knows everything.
Zgodovina sprememb…
- spremenilo: 1024 (24. nov 2008 ob 08:55:58)
Jst :: 24. nov 2008, 10:23:26
Ima mogoče kdo sliko njihove farme računalnikov ter stavbe, kjer jo imajo?
Careful not to overload people by making them listen and think at the same time
-Vain
-Vain
SInDrOoM :: 24. nov 2008, 10:37:45
Saj verjetno rabijo svojo elektrarno da poganjajo vso svojo mašinerijo ![[:D]](http://slike.slo-tech.com/smeski/icon_biggrin.gif)
|Gigabyte MA79X0X-DS4|AMD Phenom 9850 BE 3.0 GHZ|
|Sapphire Radeon HD 4870 512 MB|4 GB GEIL 800|LC 550W GP|
|WD 320 GB, Seagate 500GB|Sound Blaster X-FI Xtreme Audio|
|Sapphire Radeon HD 4870 512 MB|4 GB GEIL 800|LC 550W GP|
|WD 320 GB, Seagate 500GB|Sound Blaster X-FI Xtreme Audio|
PaX_MaN :: 24. nov 2008, 10:55:36
Ja, pa precej ton svinca v UPSih.
"Not with a bang, I'd go with a black hole!"
fery :: 24. nov 2008, 12:18:50
Mimogrede, za toliko podatkov potrebujejo 48.000 diskov, pri takih številkah pa pride do izraza statistika.
Samo komentiram novico. Zakaj nekdo napiše tako, ve on sam. Če naj bo novica uporabna, potem naj pri prepisovanju vsaj napiše neko smiselno celoto, ne pa kar nekaj. Eno je, če zapisujejo na 48.000 diskov, drugo pa je, da jih potrebujejo 48.000.
Ima mogoče kdo sliko njihove farme računalnikov ter stavbe, kjer jo imajo?
Server kot server pač, ne vem kaj naj bi bilo na teh slikah tako posebnega, oz. kaj zanimivega bi lahko videl.
Samo komentiram novico. Zakaj nekdo napiše tako, ve on sam. Če naj bo novica uporabna, potem naj pri prepisovanju vsaj napiše neko smiselno celoto, ne pa kar nekaj. Eno je, če zapisujejo na 48.000 diskov, drugo pa je, da jih potrebujejo 48.000.
Ima mogoče kdo sliko njihove farme računalnikov ter stavbe, kjer jo imajo?
Google server
Še en server pač
Server kot server pač, ne vem kaj naj bi bilo na teh slikah tako posebnega, oz. kaj zanimivega bi lahko videl.
Pyr0Beast :: 24. nov 2008, 12:21:38
Gasilni aparat na koncu :>
Control oil and you control nations;
Control food and you control people.
Control food and you control people.
Sparrow :: 24. nov 2008, 15:24:09
Čist tko za info. Eden od glavnih razvijalcev MapReduce-a je Slovenec - Dominik Roblek.
Tech_man :: 24. nov 2008, 18:53:13
Sparrow-
tudi če je glaven razvijalec Slovenec, je dejstvo da si bodo glavne zasluge prisvojili drugi:) tako je na žalost...
je pa pohvalno da tudi mi lahko uspemo!! vsaj ena informacija za motivacijo:)
ko bom bil velik bol bil geek!!!:)
tudi če je glaven razvijalec Slovenec, je dejstvo da si bodo glavne zasluge prisvojili drugi:) tako je na žalost...
je pa pohvalno da tudi mi lahko uspemo!! vsaj ena informacija za motivacijo:)
ko bom bil velik bol bil geek!!!:)
GupeM :: 25. nov 2008, 10:41:13
Lepo da je slovenc. Še lepše bi blo da bi to razvijal za slovensko podjetje. Tko pa vsi najboljši grejo v tujino.
jype :: 25. nov 2008, 11:04:52
GupeM> Tko pa vsi najboljši grejo v tujino.
Ja, kaj pa naj bi? Ostali tu? Saj niso neumni.
Ja, kaj pa naj bi? Ostali tu? Saj niso neumni.
LuiIII :: 25. nov 2008, 12:13:34
Mi se pa matramo s 1TB na dan![[:|]](http://slike.slo-tech.com/smeski/icon_confused.gif)
. No samo moramo še vse kaj drugega kot sortirati.
. No samo moramo še vse kaj drugega kot sortirati. BC3 :: 25. nov 2008, 17:22:58
,,z 1.000" in ,,s tisoč"
-:| x2 4400+@2˙9GHz, abit ax78, 2gb ocz reaper, hd4850 |:-
antonija :: 25. nov 2008, 17:30:17
,,z 1.000" in ,,s tisoč"
Pred stevilkami (zapisanimi s ciframi) je vedno "z"?
"I know that you believe you understand what you think I said, but I'm not
sure you realize that what you heard is not what I meant"
Richard Milhous Nixon
sure you realize that what you heard is not what I meant"
Richard Milhous Nixon
DJ Beat :: 25. nov 2008, 18:28:34
,,z 1.000" in ,,s tisoč"
Pred stevilkami (zapisanimi s ciframi) je vedno "z"?
Niti slucajno...
overlord_tm :: 25. nov 2008, 21:39:09
Lepo da je slovenc. Še lepše bi blo da bi to razvijal za slovensko podjetje. Tko pa vsi najboljši grejo v tujino.
Spodobna slovenska IT podjetja lahko še mizar na svoje prste prešteje ... ali so vsa tako tajna da noben ne ve o njihovem obstoju?
586: The average IQ needed to understand a PC ... or mtosev.
Zgodovina sprememb…
- spremenilo: overlord_tm (25. nov 2008 ob 21:39:15)
Jst :: 28. nov 2008, 19:53:58
>Server kot server pač, ne vem kaj naj bi bilo na teh slikah tako
>posebnega, oz. kaj zanimivega bi lahko videl.
Prehitro napisal. Mislil sem stavbo/stavbe, kakšen cooling sistem imajo, električno omrežje, blueprinti,... (če je kaj takšnega na voljo, particularly for google)
Omare z racki itak da niso zanimive. :)
Koliko toplote morajo odvajati iz ene farme (ki ima x računalnikov - omenjeni v novici?)? KOliko elektrike za napajanje?
Takšne stvari sem imel v mislih, čeprav sem napisal nekaj drugega.
>posebnega, oz. kaj zanimivega bi lahko videl.
Prehitro napisal. Mislil sem stavbo/stavbe, kakšen cooling sistem imajo, električno omrežje, blueprinti,... (če je kaj takšnega na voljo, particularly for google)
Omare z racki itak da niso zanimive. :)
Koliko toplote morajo odvajati iz ene farme (ki ima x računalnikov - omenjeni v novici?)? KOliko elektrike za napajanje?
Takšne stvari sem imel v mislih, čeprav sem napisal nekaj drugega.
Careful not to overload people by making them listen and think at the same time
-Vain
-Vain
Thomas :: 29. nov 2008, 16:44:20
Zakaj pa penta?
There are just too many smart-looking idiots making crazy claims around.
Jst :: 29. nov 2008, 18:46:52
Hehehehe!!!! Sorry, vem, da so takšni izpadi nezaželjeni, ampak se nisem mogel zadržati...
Careful not to overload people by making them listen and think at the same time
-Vain
-Vain