Kako prenasati > 1 Gbit/s podatkov preko routerja

• tri racunalnike z linuxom z gigabitno mrezno kartico; iz vsakega izmed njih bi rada prenasala cca. 400 MBit podatkov na sekundo


• 10 Gbit-ni router, ki skrbi za casovno sinhronizacijo po protokolu PTP


• prenosnik (ali navadna kista) z okni, na katerega bi rada prenasala podatke iz ostalih treh

mojca je 25. feb 2020 ob 23:17 izjavil:

Zanime me, ce je mogoce doseci zadovoljivo hitrost prenosa podatkov z dvema mreznima kabloma na dveh gigabitnih mreznih karticah

XS!D3 je 26. feb 2020 ob 14:32 izjavil:

Če je budget non-issue, potem pač kupiš še neko preverjeno 10Gb/s mrežno

> Measure-Command {lz4 --fast=1 test.bin test.lz4}
Compressed 3729245696 bytes into 3669923309 bytes ==> 98.41%
...
TotalSeconds      : 6.2323662
---
> Measure-Command {lz4 -2 test.bin test.lz4}
Compressed 3729245696 bytes into 3417672355 bytes ==> 91.65%
...
TotalSeconds      : 12.6096834
---
> Measure-Command {lz4 -9 test.bin test.lz4}
Compressed 3729245696 bytes into 2658809180 bytes ==> 71.30%
...
TotalSeconds      : 104.2179249

pegasus je 26. feb 2020 ob 22:59 izjavil:

Imaš tudi kake realnočasovne zahteve v smislu največje dovoljene zakasnitve?

mojca je 27. feb 2020 ob 00:37 izjavil:

Da se razumemo: trenutno potrebujem izkljucno nekaj opreme za testiranje. Ce od povsod pridejo podatki s pol sekunde zakasnitve (ampak priblizno hkrati), me ta hip ne gane toliko, bo pa v prihodnosti nedvomno kdo zelel sistem uporabljati za kontrolo, tam pa vsaka milisekunda steje.

mojca je 27. feb 2020 ob 00:37 izjavil:

Najresnejsi problem se pojavi, ce iz enega racunalnika pridejo podatki znatno kasneje kot iz drugega (nekaj deset milisekund je manjsi problem, od 100, 200 ms gor pa resnejsi).

XS!D3 je 27. feb 2020 ob 10:01 izjavil:

Vesoljc je 27. feb 2020 ob 08:50 izjavil:

mojca je 26. feb 2020 ob 22:54 izjavil:

Tegale Qnap QNA-T310G1T oz. S imajo kot kaze za dobrih 200 EUR v "vsaki drugi stacuni" na zalogi v Sloveniji, tako da hvala za nasvet (razen ce ima se kdo v mislih kaj boljsega). Uporabniki se sicer obcasno pritozujejo nad glasnostjo, ampak ... vsa ostala elektronika, ki bo priklopljena na mrezo, tudi ni najtisja.

S tem, kaj poceti s podatki, se ukvarjam ze dobro leto, pa bo pocasi cas za kaksen realen stress-test. Vsi se samo strinjamo, da bo se zabavno.

10g mrezna od asusa je 100e na amazon.de

Zunanja Thunderbolt 3 za laptop? Katera? Do tell, kupim takoj, ker ravno iščem nekaj takšnega za doma? Če misliš notranja za PCI-E, pa na žalost za laptop bolj malo pomaga, ker te zunanji TB3 enclosure pride več, kot cela mrežna na TB3.

Drugače je Sonnet Solo10G malenkost dražja ampak je bolj pohvalijo. Imaš pa tudi Base-T (RJ45) verzije teh kartic. Osebno sem namerno gledat SFP+, ker je manj težav z gretjem in switche načeloma dobiš ceneje.

Zdaj če res obstaja Asusova za 100€ je za preverit, ampak nekako dvomim, saj sem pregledal kar nekaj teh zunanjih. Od teh cenejših TB3 variant, imaš pretty much Sonnet, QNAP, CalDigit, OWC (rebrandan Sonnet) pa še par podobnih, za podobno ceno. Na žalost edino nisem našel za normalno ceno nobene, ki bi se jo dalo daisychainat (da bi lahko priklopil na obstoječ dock in chainal naprej na drugi monitor). Sonnetov Twin10G sicer ima tudi 2 TB3 porta, ampak košta 500+ €.

Dobi se tudi Akitio Thunder3 Dock Pro, ki ima že vgrajeno 10GbE mrežno, ampak je Base-T, kar je sicer ok če to rabiš, vendar se pri uporabi 10GbE precej greje, tako da moraš met vklopljen opcijski ventilator, da deluje stabilno. Poleg tega pa podpira polnenje samo s 60W, tako da tudi kot dock ni ravno idealen (spet če ti to zadostuje, je ok).

Spock83 je 27. feb 2020 ob 11:09 izjavil:

Verjetno je bolje kupit en dodaten komp in mu vgraditi 10Gb kartico in se z laptopom povezat samo kot terminal oz remote.

Invictus je 27. feb 2020 ob 09:08 izjavil:

Ker rešitev, ki jo zdaj poskušaš implementirati, je milo rečeno blazno amaterska, in se teh problemov ne rešuje na ta način. Definitivno pa ne z množico podatkov, ki jih pošiljaš na nek laptop.

Vedno gre to na nek server, kjer se podatki zapišejo v bazo ter se podatki potem dostopajo preko neke konzole...

XS!D3 je 27. feb 2020 ob 11:42 izjavil:

Spock83 je 27. feb 2020 ob 11:09 izjavil:

Verjetno je bolje kupit en dodaten komp in mu vgraditi 10Gb kartico in se z laptopom povezat samo kot terminal oz remote.

Se absolutno strinjam. Če gre za nekaj vsaj semi resnega, je verjetno najbol smiselno podatke zbirat na namenskem strežniku, kot je omenil že Invictus.
Samo iz prvega posta mi je delovalo, da gre bolj za neko ekspirimentiranje/igranje.

Invictus je 27. feb 2020 ob 09:08 izjavil:

Kot prvo, se človek ne more odločiti v pol sekunde, kot drugo je pa treba kar nekaj procesiranja za obdelovo 1200 Mbit podatkov na sekundo, da postanejo uporabni.

pegasus je 27. feb 2020 ob 09:33 izjavil:

Če že hočeš vztrajati na ethernetu, išči "converged ethernet" rešitve ter razišči, kako so implementirani protokoli ala FCoE, NVMeoF, RoCE. Pa tudi brskanje bo DPDK bo prišlo prav.

mojca je 28. feb 2020 ob 12:43 izjavil:

Ce so stari strezniki tako poceni: zakaj potem gejmerji mecejo denar stran za pregresno drage kiste, namesto da bi enostavno kupili dva ali tri stare streznike?

mojca je 28. feb 2020 ob 13:58 izjavil:

Gejspodar je 28. feb 2020 ob 12:57 izjavil:

"Če so rabljeni traktorji tako poceni, zakaj profesionalni vozniki kupujejo dirkalnike?"

Cemu potem na vprasanje, kje kupiti kljuko in nosilec za 200-litrski zalogovnik goriva, ki bi ga za prvi test namontirala na obstojec dirkalni avto, da bi s sicer malo pocasnejso, a avtonomnejso voznjo zmagali na hitrostni dirki, vsi odgovarjajo, da je to amaterstvo, da so traktorji primernejsi za prenos tovora, in naj raje odstejem goro denarja za enega rabljenega, ki bo imel prikljucek za prikolico ze montiran?

SeMiNeSanja je 28. feb 2020 ob 15:25 izjavil:

Kaj je to res tako zelo 'top secret' projekt?