Forum » Kaj kupiti » Server cluster
Server cluster
Martis ::
V sluzbi smo se odlocili za nakup server clusterja, ki bi ga nasi biomedicinsko-raziskovalni laboratoriji uporabljali za bioinformaticne analize velikih bioloskih baz(preko 2 milijona zapiskov), programiranje z javo in perlom ter (od zacetka) predvsem rocno in algoritmicno (simulacije) 3D modeliranje beljakovin in molekul. take studije so zelo informaticno intenzivne - na Macintoshu dualprocessor G5, na primer, ena simulacija oz threading komparativnega 3D modeliranja molekule na podlagi neke sorodne znane, zahtvea oba procesorja, povezavo na net in traja tudi po 3-4 ure, da se prvi grobi modeli dobijo in ocenijo. Zdaj bi pa cluster moral podpirat 20 takih uporabnikov, ki bodo bolj ali manj socasno delali podobne stvari.
Delovno okolje je univerza na internet2 povezavi, spocetka bo dnevno intenzivnih uporabnikov mogoce kakih 20, obcasnih (tedensko) pa kakih dodatnih 30-40 (ne le 3D simulacije).
Vsi v nasi skupini, ki izbira hardware in software za to novo orodje, smo ze uporabljali clusterje, ampak v rokah drugih laboratorijev ali organizacij. Tudi samo upravljanje streznika bomo, mislim, da znali strokovno izpeljat.
Nihce pa nima ravno obcutka za to, kako izbrat pravilni hardware, se posebej za to, ker bi radi sistem nastavili tako, da bi ga lahko nadgrajevali in razsirjali kakor bodo projektne finance dopuscale.
Nasi sefi so nam dali dobavitelja, ki bi ga mi "morali" uporabit, tule je link do izbire za konfiguracije....
http://www.pssclabs.com/products/
Rada bi slisala vasa mnenja o najboljsi izbiri teh opcij, ki jih to podjetje predlaga, se posebej v tistih delih konfiguracije, ki so najpomembnejsi za tak cluster, glede na opisano uporabo....
Kaj pravite in svetujete glede nakupa?
Delovno okolje je univerza na internet2 povezavi, spocetka bo dnevno intenzivnih uporabnikov mogoce kakih 20, obcasnih (tedensko) pa kakih dodatnih 30-40 (ne le 3D simulacije).
Vsi v nasi skupini, ki izbira hardware in software za to novo orodje, smo ze uporabljali clusterje, ampak v rokah drugih laboratorijev ali organizacij. Tudi samo upravljanje streznika bomo, mislim, da znali strokovno izpeljat.
Nihce pa nima ravno obcutka za to, kako izbrat pravilni hardware, se posebej za to, ker bi radi sistem nastavili tako, da bi ga lahko nadgrajevali in razsirjali kakor bodo projektne finance dopuscale.
Nasi sefi so nam dali dobavitelja, ki bi ga mi "morali" uporabit, tule je link do izbire za konfiguracije....
http://www.pssclabs.com/products/
Rada bi slisala vasa mnenja o najboljsi izbiri teh opcij, ki jih to podjetje predlaga, se posebej v tistih delih konfiguracije, ki so najpomembnejsi za tak cluster, glede na opisano uporabo....
Kaj pravite in svetujete glede nakupa?
The problem with designing something completley foolproof is to underestimate the ingenuity of a complete fool.
- Douglas Adams, In Literature
Jebiveter ::
Po moje s cemerkoli te firme tezko zgresis. Bi pa izpostavil, da je dokaj racionalno uporabit ti. blade streznike. Prednosti je kar nekaj, predvsem pa veliko node-ov na majhnem prostoru, veliko lazja zamenjava okvarjenih node-ov in veliko lazje dodajanje novih node-ov.
Koliksen pa imate budget (ce ne vprasam prevec)?
Koliksen pa imate budget (ce ne vprasam prevec)?
Certainty of death. Small chance of success. What are we waiting for?
Martis ::
$10,000-$15,000 sigurno, lahko bi pa, ob ustrezni utemeljitvi od oddelka dobili tudi do $25,000... problem mojega tima raziskovalcev je, da ne poznamo prednosti in slabosti komponent, ki grejo v tak cluster. In poskusam iskati informacije po netu in pri ljudeh, ki imajo vec izkusenj...
Iz menedzerske plati je seveda vazno, da cimbolj ucinkovito nalozimo denar.. moj interes pa je tudi v temu, da, ce tudi zacnemo z malo konfiguracijo, vseeno kupimo nekaj, kar se bo izkazalo za prijazno kasnejsim upgradeom...
Iz menedzerske plati je seveda vazno, da cimbolj ucinkovito nalozimo denar.. moj interes pa je tudi v temu, da, ce tudi zacnemo z malo konfiguracijo, vseeno kupimo nekaj, kar se bo izkazalo za prijazno kasnejsim upgradeom...
The problem with designing something completley foolproof is to underestimate the ingenuity of a complete fool.
- Douglas Adams, In Literature
Zheegec ::
Vsekakor AMD Opteron procesor, če finance dopuščajo seveda dual-core. Bolje kar se tiče price/performance in nadgrajevanja, sploh za znanstvene namene je Opteron zakon. Vsekakor dual-CPU (vsak rackmount), ker se najbolj splača.
SCSI diski so obvezni, če je treba še veliko prostora pa se naredi en SATA RAID.
Kako velik cluster pa bo to?
SCSI diski so obvezni, če je treba še veliko prostora pa se naredi en SATA RAID.
Kako velik cluster pa bo to?
"božja zapoved pravi; <Spoštuj očeta in mater>,
ne govori pa o spoštovanju sodstva."
Janez Janša, 29.04.2014
ne govori pa o spoštovanju sodstva."
Janez Janša, 29.04.2014
Zgodovina sprememb…
- spremenil: Zheegec ()
MUC ::
Rabš aplikacijo, ki podpira cluster, alpa tako, ki teče na programih middlewaru Condor, Alchemi alpa MPI -ju. Ko veš, kaj zahteva aplikacija, se lažje odločiš + pod katerim OSom teče tvoja aplikacija ... najbolje je da na UNIXu, drugače si prisiljen na Windowsih delat s kompromisi.
Cluster iz 16 p4 3ghz je zlo hitr za računanje matematičnih problemov v matlabu, za vas bi rabl pač več mašin in močnejše mogoče. ..
Cluster iz 16 p4 3ghz je zlo hitr za računanje matematičnih problemov v matlabu, za vas bi rabl pač več mašin in močnejše mogoče. ..
photot ::
Živjo še z moje strani.
Na hitro sem pogledal po Googlu na temo "linux cluster bioinformatics gigabit opteron HPC".
In našel par morda uporabnih opisov in poročil o takih in drugačnih clustrih:
http://genome.cgrb.oregonstate.edu/hard...
http://www.csm.ornl.gov/oscar04/proceed...
http://www.linuxhpc.org/pages.php?page=...
http://goldeneggs.spyderbyte.com/geggs/...
http://www.linuxgeek.net/index.pl/oscar
Na netu kar mrgoli raznih Howto-jev kako skupaj sestavit tak in drugačen cluster
Sem mnenja, da je najbolje sestavit en cluster iz navadnih rack strežnikov z Opteron procesorji. Posamezni gradniki clustra naj bi bili z dvema procesorjema, 2 ali maksimalno 4 GB rama (tukaj sicer ne poznam zahtev po RAMu pri izračunavanjih) in scsi ali sata diskom (v clustru se ne potrebuje raida in velikih diskov, saj služijo večinoma le za operacijski sistem in začasno hrambo podatkov pri "obdelavi"). Gradniki bi bili z glavno kišto ("Head node") povezani kar z gigabitnim Ethernetom. Poleg te glavne kište pa se potrebuje eno diskovno polje za trajno hrambo podatkov (ali pa malo večjo glavno kišto).
V primeru, da imate fizično dovolj prostora in bi čez čas (ko bo še več denarja za popolnoma nov cluster) hoteli ta hardware uporabljat tudi po pisarnah, se je pametno odločiti za navadne "tower" ohišja oziroma računalnike (morda celo enoprocesorske mašine). Tako imajo narejen Linux cluster na Kemijskem inštitutu. Celotni 64 procesorski cluster (po imenu "Vrana 4") jih je prišel precej poceni - v primerjavi z HP (Dell, IBM) rack strežniki.
Glede na zahteve po procesorski moči boste verjetno morali imet vsaj 8 gradnikov po 2 procesorja - za začetek!
18 procesorjev, 18 GB RAMa, kište z platami, diski, gigabit switch, UPS --- hitro bo vsaj 5 milijonov.
Zaenkrat tolk, upam, da sem kej pomagal.
Tadej
Na hitro sem pogledal po Googlu na temo "linux cluster bioinformatics gigabit opteron HPC".
In našel par morda uporabnih opisov in poročil o takih in drugačnih clustrih:
http://genome.cgrb.oregonstate.edu/hard...
http://www.csm.ornl.gov/oscar04/proceed...
http://www.linuxhpc.org/pages.php?page=...
http://goldeneggs.spyderbyte.com/geggs/...
http://www.linuxgeek.net/index.pl/oscar
Na netu kar mrgoli raznih Howto-jev kako skupaj sestavit tak in drugačen cluster
Sem mnenja, da je najbolje sestavit en cluster iz navadnih rack strežnikov z Opteron procesorji. Posamezni gradniki clustra naj bi bili z dvema procesorjema, 2 ali maksimalno 4 GB rama (tukaj sicer ne poznam zahtev po RAMu pri izračunavanjih) in scsi ali sata diskom (v clustru se ne potrebuje raida in velikih diskov, saj služijo večinoma le za operacijski sistem in začasno hrambo podatkov pri "obdelavi"). Gradniki bi bili z glavno kišto ("Head node") povezani kar z gigabitnim Ethernetom. Poleg te glavne kište pa se potrebuje eno diskovno polje za trajno hrambo podatkov (ali pa malo večjo glavno kišto).
V primeru, da imate fizično dovolj prostora in bi čez čas (ko bo še več denarja za popolnoma nov cluster) hoteli ta hardware uporabljat tudi po pisarnah, se je pametno odločiti za navadne "tower" ohišja oziroma računalnike (morda celo enoprocesorske mašine). Tako imajo narejen Linux cluster na Kemijskem inštitutu. Celotni 64 procesorski cluster (po imenu "Vrana 4") jih je prišel precej poceni - v primerjavi z HP (Dell, IBM) rack strežniki.
Glede na zahteve po procesorski moči boste verjetno morali imet vsaj 8 gradnikov po 2 procesorja - za začetek!
18 procesorjev, 18 GB RAMa, kište z platami, diski, gigabit switch, UPS --- hitro bo vsaj 5 milijonov.
Zaenkrat tolk, upam, da sem kej pomagal.
Tadej
Zheegec ::
Pa nujna zahteva za Opterona je dve palčki RAM na procesor, po možnosti seveda 2x1GB ampak ni nujno
"božja zapoved pravi; <Spoštuj očeta in mater>,
ne govori pa o spoštovanju sodstva."
Janez Janša, 29.04.2014
ne govori pa o spoštovanju sodstva."
Janez Janša, 29.04.2014
Vredno ogleda ...
Tema | Ogledi | Zadnje sporočilo | |
---|---|---|---|
Tema | Ogledi | Zadnje sporočilo | |
» | Supercomputer (cluster)Oddelek: Pomoč in nasveti | 4681 (3356) | johnnyyy |
» | Rusija gradi drugi najhitrejši superračunalnik na svetuOddelek: Novice / Znanost in tehnologija | 7726 (5903) | Bistri007 |
» | Nov najhitrejši superračunalnik v Sloveniji (strani: 1 2 3 4 )Oddelek: Novice / Znanost in tehnologija | 44478 (37807) | Thomas |
» | Supercomputing '06 konferencaOddelek: Novice / Omrežja / internet | 2448 (1788) | noraguta |
» | SuperračunalnikOddelek: Strojna oprema | 3080 (2006) | CoolMike |