>>> Например у меланокса есть 40Г infiniband уже давно.
>> Infiniband и ethernet - очень разные технологии. И люди берут 10GE вместо
>> 40G IB по той же цене потому, что им нужен именно
>> ethernet.
> а может скажете это меланоксу? Conect-2 - умеет одно и другое на
> одной железке :) и сверху выглядит одинаково OFED стеком.
>а может скажете это меланоксу? Conect-2 - умеет одно и другое на одной железке :) и сверху выглядит одинаково OFED стеком.

Я говорю про то, что выглядят эти стеки протоколов сильно по-разному для пользователей. Большинству пользователей, которым нужен ethernet, фичи IB нфиг не сдались.

> полторы? вы шутите.. OFED альянс далеко больше :-) да и производителей железо
> как мне помнится около 5.

Я знаю полторы компании: mellanox и qlogic (эта за половину сойдет). Остальные, типа, производители, делают железо на основе технологий этих двух. А в альянсе может хоть моя собака состоять, но пилить из-за этого IB она не начнет. И, даже если принять аргумент о количестве членов IBTA, вендоров ethernet-технологий все равно больше, и распространены они шире (что дает преимущество в цене при массовом производстве), и база лояльных пользователей, заинтересованных в развитии, просто огромна. И все равно IB обскакал ethernet, поскольку не надрачивал на совместимость с ним.

>>> отсутствие принятия этого чуда, как стандарта везде и вся
>> У IB стандарт есть. А если ты про распространенность, то IB очень
>> распространен в HPC.
> IB распространен там где нужны маленькие задержки - в iSCSI, в стойках
> от netup/emc и тп..
> это даже не HPC :-)

iSCSI поверх iPoIB - это извращение. Хоть iSER для приличия упомянул бы.

>>> Особенно это ощущается, когда приобретаешь такой свич без сабнет менеджера. Тут-то ты и начинаешь его собирать сам, держать под это серверы и мучаться
>> Сабнет менеджер в свитче не нужен (тем более, один единственный). OpenSM есть
>> во многих дистрибутивах и выделить пару серверов (для отказоустойчивости) под него
>> не проблема, тем более, что настраивается он до состояния "взлетел" очень
>> просто. И, потом, на этих же серверах можно заодно и инфраструктурные
>> сервисы, вроде DHCP и DNS, держать.
> вы OpenSM настраивали? тестировали с большой нагрузкой (ну.. хотя бы тысячи 2-3
> нод) ?
> там такие чудеса :-)

OpenSM настраивал. Он, конечно, заковыристый местами, но для быстрого взлета настройки почти не требует.
С тысячами нод не работал, но с сотнями имел дело. Чудеса с OpenSM были, но с производительностью не связаные.