家庭实验室中的快速网络或我与InfiniBand的联系方式

让网络工程师在大型集成商中嘲笑我,这些集成商可以用几千美元购买高端设备。我想谈一谈如何使您的家庭电网快速而又不会破产。

tl; dr如果有人感兴趣,现在的情况是可以将几个台式机与一个56Gb网格连接,价格低于$ 100 +各州的运费。如果要购买更多计算机,则12端口40Gb交换机的价格为<$ 100,台式机的价格​​为<$ 60,另加运费。但这都是二手零担保。

我事先表示歉意,但是会有很多缩写。而且这并不是广告-所有这些设备已经存在了多年,不再受到制造商的支持,并且与制造商提供的新价格相比,可以很便宜地在eBay上搜索使用,价格非常便宜。但是我必须说,新的(快于2020年底宣布)快了一个数量级。因此,这都是关于家庭实验和自学的。

铜时代

, 2013, - , Ethernet 1Gb - , . , . 10GbE , Mellanox. Ethernet, InfiniBand ( ). Wiki, , - IB IP over IB, , . , / eBay - ($20-30). ( ) Mellanox- MHEH28-XTC, InfiniBand SDR Ethernet 10GbE, CX4. 3 ( 0.5, - ).

, 600-700MB/s . RAM , SSD 250-300MB/s . 

, - , . , , . . , .

, , . MHGH28-XTC, InfiniBand DDR, 16Gbps. , , , . , 8 , , Cat 5/6. 1600MB/s, . , - .

, , MHJH29-XTC, QDR - 32Gbps. , Firmware - . , Win . , Linux . QDR , QDR - .

- , . . Enterprise , , . - . , - . .

, 2018. , - ( ) , eBay / . ConnectX-3, , . , .

SIDENOTE: , - 10/40GbE 25/50/100+GbE. , .

, . , Mellanox', HP/Dell/IBM, . Win, Linux, . QDR/FDR10/FDR14, 40/56Gbps. 4700+MB/sec . NVMe (PCI 3 -), .

- (<$100 8/12 32/40Gb). IS5022, - QDR, - , 8 , - , .

, Noctua, , , . 26074-84 8486-86.

WARNING: - - , . - , !

SX6005 - FDR10 12 , , . . DIY, -.

, - (Brocade ICX ). 

- , - InfiniBand . Ethernet, IPoIB. - Win/Linux , . - - , IB level 3 (, , ). , (SR-IOV VF ), , .

不幸的是,目前eBay上没有便宜的40 / 56GbE以太网交换机(如果您有兴趣可以搜索SX1012)进行实验。我们将不得不再等几年。在那里,您可以看到多达25 / 100GbE的数据进入家庭实验室。

PS:使用IB时,仍然存在各种各样的细微差别,例如,如果开关不受管理,则需要在某个地方使用OpenSM,但这仍然不是有关设置IB的文章。




All Articles