Mikrotik CHR ESXi и intel x520-da2

Обсуждение ПО и его настройки
Inner
Сообщения: 248
Зарегистрирован: 01 июл 2020, 16:02

В подключаемой сетевухе, выбирайте е1000. Другие микротик не поймет


igorwhite
Сообщения: 10
Зарегистрирован: 07 фев 2023, 22:23

Больше спасибо за подсказки. Кстати если в настройках сетевой карты выбрать vmxnet3 все работает.


igorwhite
Сообщения: 10
Зарегистрирован: 07 фев 2023, 22:23

Коллеги я вернулся:)
Оказывается не всё не так просто...
У меня не было ещё оптики и я тестил на sfp eth 45. Всё работало.
Стал пробовать на sfp оптическом сразу на карте отваливается порт. Ну покурил информацию... типа sfp не интел, нашел как разлочить - сделал это и ничего не поменялось порт также отваливается. Попробовал поставить линь всё завелось линк карта получает.
Теперь не могу понять куда нужно копать в сам esxi или дело в микротике chr...

P.S. модуль sfp SNR-SFP-SX


Inner
Сообщения: 248
Зарегистрирован: 01 июл 2020, 16:02

igorwhite писал(а): 13 фев 2023, 19:54 Коллеги я вернулся:)
Оказывается не всё не так просто...
У меня не было ещё оптики и я тестил на sfp eth 45. Всё работало.
Стал пробовать на sfp оптическом сразу на карте отваливается порт. Ну покурил информацию... типа sfp не интел, нашел как разлочить - сделал это и ничего не поменялось порт также отваливается. Попробовал поставить линь всё завелось линк карта получает.
Теперь не могу понять куда нужно копать в сам esxi или дело в микротике chr...

P.S. модуль sfp SNR-SFP-SX
В сам ESXi копайте. Беда в том, что микротик не ест все дрова по умолчанию. И новые не так-то уж и просто впихнуть. С другой стороны сам ESXi не ест всё подряд. Но в него впихнуть доп дрова уже проще (особенно во всё что до 6.7 включительно). Ваша задача:
1. ESXi должен однозначно увидеть оптику и прогнать через неё пакеты без потерь (можно воспользовоться стандартными услугами консоли, если подключиться через ssh)
2. Как только удостоверяемся, что ESXi видит сетевуху и в логах нет никаких проблем, и оборудование не помечено желтым/красным, подрубаем всё это к chr. Обязательно учитываем, что vmxnet3, e1000 и им подобные - эмуляция Ethernet. Потому добавлять сетевуху нужно не как простую, а как "золотую". В этом уже на помощь придёт комьюнити vmWare. Ну или ютуб.
3. Если всё сделано верно на предыдущих этапах, то CHR увидит Вашу оптику. В остальном всё как обычно.

CHR по большей части расчитан на облака. Там мало кто из хостеров согласится воткнуть оптику. С другой стороны, между CHR и интернетом есть прослойка в виде ESXi. А он капризный на сетевухи. Но за счет комьюнити сможете "впилить" молотком нужные дрова (но это не точно). Чисто теоретически, можно в ESXi поиграться с vSwitch и т.п. возможно получится через него провернуть (суть идеи в том, что если ESXi определил оптику, то её можно подать на vSwitch. И на него же посадить микрот. vSwitch выступит в роли трансивера). Но ничего не обещаю. В моей практике подобных задач небывало ещё


igorwhite
Сообщения: 10
Зарегистрирован: 07 фев 2023, 22:23

Inner писал(а): 14 фев 2023, 01:14 Спасибо. Посмотрю ESXi, что там в логах.


igorwhite
Сообщения: 10
Зарегистрирован: 07 фев 2023, 22:23

В общем проблема в ESXi
В логаха ESXi:
2023-02-14T06:50:30.457Z cpu5:65971)<3>ixgbe 0000:01:00.0: failed to initialize because an unsupported SFP+ module type was detected.
2023-02-14T06:50:30.457Z cpu5:65971)<3>ixgbe 0000:01:00.0: Reload the driver after installing a supported module.
2023-02-14T06:50:30.457Z cpu5:65971)<6>ixgbe 0000:01:00.0: vmnic2: closing vmnic2 due to unsupported SFP+
Что собственно говорит о неподдерживаемом SFP и порт отключается.
Разлочка по этой инструкции https://forums.servethehome.com/index.p ... ers.24634/ не работает в ESXi
Не смотря на то, что в ESXi есть поддержка "ethtool"

Пришлось купить SFP intel и все заработало.


Inner
Сообщения: 248
Зарегистрирован: 01 июл 2020, 16:02

igorwhite писал(а): 15 фев 2023, 16:04 В общем проблема в ESXi
В логаха ESXi:
2023-02-14T06:50:30.457Z cpu5:65971)<3>ixgbe 0000:01:00.0: failed to initialize because an unsupported SFP+ module type was detected.
2023-02-14T06:50:30.457Z cpu5:65971)<3>ixgbe 0000:01:00.0: Reload the driver after installing a supported module.
2023-02-14T06:50:30.457Z cpu5:65971)<6>ixgbe 0000:01:00.0: vmnic2: closing vmnic2 due to unsupported SFP+
Что собственно говорит о неподдерживаемом SFP и порт отключается.
Разлочка по этой инструкции https://forums.servethehome.com/index.p ... ers.24634/ не работает в ESXi
Не смотря на то, что в ESXi есть поддержка "ethtool"

Пришлось купить SFP intel и все заработало.
У меня подобная беда часто встречается на тестовых машинках. А для тестов, с целью экономии средств, используются мощные стационарники. Так вот. В обычных материнках используют карточки реалтек. И ESXi 6.0 и выше умеет с ними работать. Но только если в дистрибутив до установки вшить эти дрова. Думал, у вас будет нечто похожее


igorwhite
Сообщения: 10
Зарегистрирован: 07 фев 2023, 22:23

Inner писал(а): 15 фев 2023, 21:15 У меня подобная беда часто встречается на тестовых машинках. А для тестов, с целью экономии средств, используются мощные стационарники. Так вот. В обычных материнках используют карточки реалтек. И ESXi 6.0 и выше умеет с ними работать. Но только если в дистрибутив до установки вшить эти дрова. Думал, у вас будет нечто похожее
Тут думаю так не получиться. Нужен патченный драйвер ixgbe, что скорее всего не получиться сделать в ESXi
Что то подобное можно сделать в линуксе https://medium.com/@pepijnvissers/patch ... a44f6daed1


Inner
Сообщения: 248
Зарегистрирован: 01 июл 2020, 16:02

igorwhite писал(а): 16 фев 2023, 09:29
Inner писал(а): 15 фев 2023, 21:15 У меня подобная беда часто встречается на тестовых машинках. А для тестов, с целью экономии средств, используются мощные стационарники. Так вот. В обычных материнках используют карточки реалтек. И ESXi 6.0 и выше умеет с ними работать. Но только если в дистрибутив до установки вшить эти дрова. Думал, у вас будет нечто похожее
Тут думаю так не получиться. Нужен патченный драйвер ixgbe, что скорее всего не получиться сделать в ESXi
Что то подобное можно сделать в линуксе https://medium.com/@pepijnvissers/patch ... a44f6daed1
ESXi и есть линукс. Ждем полноценного выхода 8 версии. Там обещают переработать проблему с совместимостью


kems
Сообщения: 1
Зарегистрирован: 30 авг 2023, 23:36

Не нашел более подходящей темы, а новые не охота плодить
есть - esxi 7.0 Update 2
Сетевая карта в сервере Ethernet Controller XL710-TM4
Cloud Hosted Route на ВМ
Synology с сетевой картой 10 гб


Не удается пробросить сетевую карту в микротик, в параметрах ВМ она видна, даже включается с ней микротик, но вот интерфейса нет.
Подскажите плиз, как заставить их дружить, всю голову сломал уже


upd. Сетевая работает корректно, в виндовую машину прокидывается норм, поставил Kerio Control для теста, в нём тоже определилась и работает
Предполагаю проблемы с совместимостью с микротиком.

upd2. Пробовал использовать не проброс, а vSwitch - там есть вариант использоввать его как "медиаконвектор" и вот в случае с керио, всё работает как надо, а в случае с CHR - не получает IP и даже по статике не работает


ПОМОГИТЕ, ОТПРАВЛЮ ПИВО!!!
Ну или подтвердите, что не заведётся - пойду думать огород с керио


Ответить