Non-gaming PC za paralelno procesiranje

Zivjo!

Potrebujem nasvet katere komponente in kje jih kupiti, da si sestavim masino s katero bom kar se le da hitro obdeloval podatke in izvajal simulacije. Vse to želim izvjati kar se da paralelno. Uporabljam programske jezike R, c++ (kadar je R prepocasen) in obcasno Python. Uporabljam Ubuntu 12.04 kjer poganjam VirtualBox vm prav tako z Ubuntu 12.04. Na tej virtualki dejansko tecejo vse obdelave in simualcije. Ne igram igric. Grafika je nepomembna, ce le dela...

V splošnem imam naslednje minimalne zahteve/potrebe:
- procesor z vsaj 8 pravih core-ov (hyperthreading bo izkljucen ker ne potrebujem podpore za multitasking). Tako vidim, da je tu v non server varianti samo AMD FX procesor. Se motim ali ima tudi Intel kaj podobnega? Ce prav razumem i7 tuke ni opcija saj z izkljucenim hyperthreadingom ostanejo stirje fizicni core-i...
- potrebujem vsaj 4GB RAM na core, torej z AMD FX z 8 core-i najmanj 32 GB RAM-a
- SSD 256 GB (dva za RAID 0 ali kaj je ze - se ne razumem na to)
- HD z 10000 rpm in kapaciteto vsaj 1TB (spet dva komada za RAID 0 ali karkoli ze podobnega)

Seveda sem odprt za vse nasvete kaj bi bilo najbolje glede na trade off performance/cena.

Osnovna plosca: ce bi se dalo (pa po mesecu iskanja ne najdem) bi rad za AMD FX dual socket plosco (da bi torej imel 16 core-ov) z moznostjo vsaj 64 GB RAM. Verjetno to ne gre (kdo bi pa potem kupoval serverski hw). Kaj bi bilo glede performans in cene potem najbolje v tem primeru?

O hlajenju, napajalnikih, ohisjih itd. nimam pojma in nobenih posebnih zahtev, da le dela vzemaje v obzir zgornje.

Potrebujem pa vse komponente, da bo zadeva delovala.

Zadevo bi kupil kar na dinokomp.at in bi bil vesel konfiguracije/nasveta v obliki konfiguratorja kot npr tale http://www.dinokomp.si/konfigurator/?mb... (tole sem nasel v eni drugi razpravi in nima zveze z mojimi zahtevami).

V naprej hvala.

Lp,
S.

Edit: Evo, tole sem "nakonfiguriral": http://www.dinokomp.at/konfigurator/?mb...

Kaj se da optimizirat? Kaj je potrebno spremeniti, da bo stvar spilala? Nameec, kot omenjeno, nimam pojma o platah, ohisjih, napajalnikih,...

- procesor z vsaj 8 pravih core-ov (hyperthreading bo izkljucen ker ne potrebujem podpore za multitasking). Tako vidim, da je tu v non server varianti samo AMD FX procesor. Se motim ali ima tudi Intel kaj podobnega?

Ne, samo Intel xeon.
List of Intel Xeon microprocessors @ Wikipedia

Spodaj na prvi strani imaš cene:
http://hardforum.com/showthread.php?t=1...
raid 0 je risky, crkne en disk se zruši celo raid polje, zato raje raid 1.

Za koliko Eur ?


Kakšen poseben razlog, da poganjaš vse skupaj v VM ?

specing je 29. sep 2013 ob 15:00 izjavil:

Vzemi i5-ko, pri AMD-ju boš zelo veliko plačal pri elektriki. Plus intelova integrirana grafika ima uradno opensource podporo.

Če že rabiš virtualizacijo, uporabi LXC (LinuX Containers) -- ni overheada, ali pa Qemu, ki je hitrejši od virtualboxa

Thnx. Hvala za namig glede virtualizacije. Bom pogledal podrobneje.

Glege i5 se mi ne zdi dobra izbira za tip problemov, ki jih resujem. Sedaj tole pocnem na dveh prenosnikih s procesorjema i7... Pa nisem zadovoljen. Rabim cim vec paralelnih procesov. Torej cim vec pravih. (ne navideznih) core-ov...

dope1337 je 29. sep 2013 ob 15:28 izjavil:

Če maš omejen budget in se boš odločil za strežniško rešitev, imaš tudi AMD-je v obliki Opteron-ov:
List of AMD Opteron microprocessors @ Wikipedia

Vendar če ni denar problem, vsekakor priporočam Intelove rešitve.

Opažam pa, da če si omejen na dinokomp, da ti tako ali drugače preostane samo FX ...

Denar vsekakor je omejitev. Do 1500 EUR za masino z 8 pravimi core-i (FX) ali do 2500 za masino s 16 pravimi core-i.

Za dinokomp sem prvic slisal, ko sem zasel na tale forum nekaj ur nazaj, pa se mi je zdelo prikladno. Nikakor pa nisem omejen na dinokomp... Se mi pa dozdeva, da je moj budget rahlo do pretezno omejen za to kar bi rad...

SamH je 29. sep 2013 ob 16:13 izjavil:

specing je 29. sep 2013 ob 15:00 izjavil:

Vzemi i5-ko, pri AMD-ju boš zelo veliko plačal pri elektriki. Plus intelova integrirana grafika ima uradno opensource podporo.

Če že rabiš virtualizacijo, uporabi LXC (LinuX Containers) -- ni overheada, ali pa Qemu, ki je hitrejši od virtualboxa

Thnx. Hvala za namig glede virtualizacije. Bom pogledal podrobneje.

Glede i5 se mi ne zdi dobra izbira za tip problemov, ki jih resujem. Sedaj tole pocnem na dveh prenosnikih s procesorjema i7... Pa nisem zadovoljen. Rabim cim vec paralelnih procesov. Torej cim vec pravih. (ne navideznih) core-ov...

computeruniverse tu maš nekaj

http://www.computeruniverse.net/product...
ali
http://www.computeruniverse.net/product...

Evo opteroni posortirani po ceni:
http://www.computeruniverse.net/groups/...


Tale bi bil recimo ok:
http://www.computeruniverse.net/product...

SamH je 29. sep 2013 ob 16:26 izjavil:

dope1337 je 29. sep 2013 ob 15:28 izjavil:

Če maš omejen budget in se boš odločil za strežniško rešitev, imaš tudi AMD-je v obliki Opteron-ov:
List of AMD Opteron microprocessors @ Wikipedia

Vendar če ni denar problem, vsekakor priporočam Intelove rešitve.

Opažam pa, da če si omejen na dinokomp, da ti tako ali drugače preostane samo FX ...

Denar vsekakor je omejitev. Do 1500 EUR za masino z 8 pravimi core-i (FX) ali do 2500 za masino s 16 pravimi core-i.

Za dinokomp sem prvic slisal, ko sem zasel na tale forum nekaj ur nazaj, pa se mi je zdelo prikladno. Nikakor pa nisem omejen na dinokomp... Se mi pa dozdeva, da je moj budget rahlo do pretezno omejen za to kar bi rad...

Vkolikor maš 2,5k€ budgeta, bi ti mogoče celo zlaufal čez z 2x 16 jedrni Opteron serije 6300 (priporočam Opteron 6378 cca 1,5k€ za oba) sploh ker ti bolj pomembno število jeder, kot pa izkoristek le-teh (vsaj tak sem razbral).

http://www.computeruniverse.net/product...

opteron za 700EUR

ali pa tale

http://www.computeruniverse.net/product...
x2

Menge Produktbezeichnung Stückpreis Betrag

AMD Opteron 6320 Boxed ohne Lüfte x2
529,82 EUR

ASUS KGPE-D16 Sockel G34 E-ATX
415,- EUR

Kingston HyperX 64GB DDR3 Kit
499,90 EUR

Samsung SSD 840 EVO Series 250GB Basic-Edition x2
299,80 EUR

WD VelociRaptor WD1000DHTZ 1TB x2
369,80 EUR

Antec Titan 650-EC Server Gehäuse inkl. 650 Watt Netzteil
187,90 EUR
Warenwert 2.302,22 EUR


16 jedernik



Zdej nisem ravno strokovnjk za to.. ampak mislim, da je vse vredu

Isotropic je 29. sep 2013 ob 17:20 izjavil:

kaksne zadeve pa delas to, lahko das par primerov?

Prvi primer je ko zelim najti optimalne parametre, ki minimizirajo/maksimizirajo neko funkcijo. Problem je, da izracun vrednosti funkcije za nek nabor parametrov traja od nekaj 10 minut do nekaj 10 ur. Tega se lahko lotis tako, da izracunas vrednost funkcije za vsak nabor parametrov znotraj danih omejitev lahko pa uporabis (ker je primer "zloben") optimizacijski algoritem differential evolution na voljo v R paketu DEoptim. Kot primer si lahko ogledas tukaj kaj prinese, ce lahko izvajas zadeve paralelno na zelo enostavnem primeru: http://files.meetup.com/1772780/2012020...

Drug tip problema, ki krici po paralelizaciji pa je Markow chsin Monte Carlo motoda uporabljena v metodah Bayesove statistike. Primer kaj prinasa paralelizacija je tukaj: http://www4.stat.ncsu.edu/~ghosh/TEACHI...

mislil sem bolj, kje apliciras te zadeve oz. cemu so namenjene.
sicer pa ja, za MP rabis opterone, imajo do 16 threadov, so pa primerno dragi tako kot xeoni.
xeone bos tut dobil ~14-jedrne, sam bo pa vsaj ene 2k samo tak procesor.

edit: amd opteron: http://geizhals.at/?cat=cpuamdo64&xf=25...
pasejo do 4 procesorji na maticno se mi zdi

AMD Opteron 6320 Boxed ohne Lüfte x2
529,82 EUR

x2 8 je 16 jeder

FX 8350 je slabši vendar še vseeno hitrejši proc od i7 pri multitaskingu