10G дома: IB performance

[alextutubalin]

Кросспост из блога автора. Комментировать лучше там, но можно и тут

На всплывавший ранее вопрос "а потянет ли PCIe 1.0 8x два порта Infiniband" ответить не могу, ибо кабель на руках пока один. Один порт тянет:
RDMA_Read Bidirectional BW Test

Comments

[alextutubalin]

У меня текущий набор винтов в NAS выдает 200+ и, собственно, все и затеяно, чтобы ходить к ним хотя бы на этой скорости, а не на 100-120.

[_slw]

ну один и должен потянуть, по ссылкам же получается 13Гбит у 8x (в одну сторону, в обе 26).

[alextutubalin]

матерщиной и разборкой-сборкой разъемов поднял линк по второму (ранее дохлому) кабелю.

При одновременном тесте получается 1670 на каждом линке (на удивление, одинаково). 26720Mbit/s payload. Наверное, где-то в этих мегабитах зарыты 1000 вместо 1024, но все едино - чуть больше 26.
И судя по загрузке процессоров, 50% на 4core, оно уперлось именно в CPU на более слабой машине.

Насколько я помню, эти самые 26 посчитаны из очень пессимистичного размера транзакции PCIe?

[_slw]

в моем pdf (ссылок не было) наоборот, из очень оптимистичного -- 64К.

ну "чуть" в размере 720К наверное не считается, поскольку и 6.5 могли округленными быть -- я расчета-то не видел. а погрешность получается 3%. а, магические 3% -- погрешность измерений в реальном мире!