Geli Hardware mind. 700MByte/sec

[lockdoc]

Hallo,

ich wuerde gerne 700MByte/sec read/write intern (spaeter ueber Infinibad) erreichen.

Dazu wird erstens der ZFS Pool auf 6 Mirror (also insgesamt 12x 1TB HDD) erweitert.
Da alle Festplatten geli AES verschluesselt sind, suche ich nach mehr CPU Power.
Hierzu habe ich folgendes ins Auge geworfen:

ASUS KGPE-D16 SSI EEB 3.61
mit 2x AMD OPTERON 6212 (8 Core, 2.6Ghz) und 64GB RAM

Meint ihr dass die beiden Bolliden das schaffen werden oder brauche ich dazu ganz andere Hardware?

 

[cla]

Hmm..ich würde mich wohl eher bei Servermainboards von Supermicro oder Tyan umsehen. Asus war meiner Ansicht nach bisher nicht sonderlich präsent/stark im Servermarkt. Wobei ich jetzt nicht sagen will, das das genannte Mainboard schlecht wäre.

(Offtopic: So langsam werde ich mehr und mehr Neugierig, was du da eigentlich für nen Projekt grad am laufen hast; wenn man deine ganzen Posts in den letzten Wochen betrachtet. Vielleicht willst du dem ganzen ja mal einen eigenen Beitrag spendieren, wenn es möglich ist?)

 

[lockdoc]

na eigentlich soll es eine serverseitige virtualisierung mit 3d support werden, media station, fileserver, etc alles virtualisiert und mit passthrough direkt-zugriff auf devices. Das ganze dann fluessig zu den Clients gestreamed

Aber ich bin jetzt auch schon wieder am Wanken, da man auf diesen AMD Server Boards nichts uebertackten kann.

 

[Yamagi]

Naja, übertakten kann man professionelle Hardware nie... Alternativ wäre da Intels Desktop Sockel 2011 für Desktops zu nennen. Ich mag die Plattform nicht, da es sich um aussortierte und teildeaktivierte Xeon-Chips handelt, die zu schlecht waren, aber sie ist im Moment so ziemlich das Schnellste, was es für den Desktop gibt...

 

[Fusselbär]

Naja, übertakten kann man professionelle Hardware nie... Alternativ wäre da Intels Desktop Sockel 2011 für Desktops zu nennen. Ich mag die Plattform nicht, da es sich um aussortierte und teildeaktivierte Xeon-Chips handelt, die zu schlecht waren, aber sie ist im Moment so ziemlich das Schnellste, was es für den Desktop gibt...

Fällt mir ein, das bei den CPUs wohl auch die Intel® Virtualization Technology for Directed I/O (VT-d) ausgefallen war.
Intel weist inzwischen relativ unauffällig darauf hin:

This product includes VT-d support only on the C2 stepping. Stepping information can be viewed via the menu on the left.

Hier:
http://ark.intel.com/products/63697/Intel-Core-i7-3930K-Processor-(12M-Cache-3_20-GHz)

 

[s-tlk]

Wie sehen denn bei dir typische User-Szenarien aus?
Wenn du viele konkurrierende Zugriffe auf das Storage hast und dabei die Datenraten konstant bleiben sollen, wuerde ich eher auf die Kinderhardware verzichten und eine bluearc, oder netapp kaufen.
Wir haben beide Systeme im Einsatz, wobei die bluearc sich besonders resistent gegenueber parallelen Zugriffen zeigt. Teile des NFS-Stacks wurden in FPGAs implementiert (was sicher nicht gerade wenig Arbeit war) und sind daher besonders gut parallelisiert. Ich kann gleichzeitig von allen Knoten unseres Clusters die Daten aus dem scratch Verzeichnis einsammeln, ohne Einbrueche in der Gesamtdatenrate. Die netapp geht da schneller in die Knie, dafuer bietet die aber mehr Platz. Die Bluarc hat auch einige nette Featueres wie zB Metadaten des FS auf besonders schnelle SSDs, oder 15k Platten auszulagen. Das beschleunigt Metadaten-Zugriffe ungemein.

Der einzige 'Nachteil' daran ist, das man schon etwa Geld in die Pfote nehmen muss.

 

[lockdoc]

Die user typischen Szenarien sind so, dass der Fileserver via Infiniband mit dem Virtualisierungsserver verbunden werden soll (p2p). Da wuerde ich auch gerne ueber SRP machen, was ne ganze Menge overhead wegnimmt die Samba und NFS so verbreiten, aber es scheint derzeit noch nicht in FreeBSD implementiert zu sein.
Vorteil beim Infiniband mit nur einer p2p Verbindung ist dass es sehr guenstig ist und man seine 700Mbyte/sec schaffen kann

Es wuerden dann ca. 8 VM's laufen, welche vom VM-Server via Gbit Ethernet und einem schicken Protocol (derzeit les ich mich grad dafuer in HDX, RemoteFX und PCoIP ein) verbreitet werden.


Edit: sorry fuer den komischen PCoIP link, aber ich konnte auf der normalen wikipedia nichts finden.