Включение RDMA

Включение RDMA#

Кибер Инфраструктура поддерживает удаленный прямой доступ к памяти (RDMA) по протоколам Converged Ethernet (RoCE) и InfiniBand (IB) для внутренней сети хранения данных. Технология RDMA позволяет серверам в этой сети обмениваться данными в основной памяти без задействования процессоров, кэша или операционных систем, высвобождая тем самым ресурсы и улучшая пропускную способность и производительность.

По умолчанию RDMA выключен. Включить RDMA можно в панели администратора.

Ограничения

  • Включить RDMA можно только до создания кластера хранения данных.

  • Рекомендуется использовать сетевые адаптеры Mellanox ConnectX-4, Mellanox ConnectX-5, Broadcom NetXtreme-E, Intel E810. Если вы хотите использовать другие адаптеры, обратитесь в службу технической поддержки.

    Предупреждение

    Поддержка сетевых адаптеров Broadcom и Intel находится в экспериментальной стадии. Перед их использованием настоятельно рекомендуется протестировать работу основного хранилища при максимальной нагрузке. Инструкцию по тестированию см. в статье Проверка производительности кластера Кибер Инфраструктуры.

  • Для использования RDMA агрегация может быть сконфигурирована только путем объединения портов одной и той же сетевой карты.

  • RDMA не поддерживается для вычислительного кластера. Таким образом, сеть с вычислительным кластером и сеть хранилища (сеть с типом трафика Хранилище) должны использовать разные сетевые адаптеры. Рекомендуется использовать одну сетевую карту с двумя агрегированными сетевыми интерфейсами для сети с вычислительным кластером и одну сетевую карту с двумя агрегированными сетевыми интерфейсами для сети хранилища. Про использование магистральных (транковых) интерфейсов см. раздел Подключение виртуальных коммутаторов к магистральным интерфейсам.

  • Включение или выключение RDMA может временно повлиять на доступность кластера.

Предварительные требования

  • Сетевая инфраструктура RDMA должна быть готова перед установкой продукта Кибер Инфраструктура.

  • Каждый сетевой адаптер, подсоединенный к сети с типом трафика Хранилище, должен поддерживать RDMA. Если какой-либо сервер кластера хранилища данных не поддерживает RDMA, весь кластер необходимо переключить на TCP.

  • Устройства InfiniBand и RoCE на всех серверах должны быть настроены, как описано в разделах Настройка устройств InfiniBand и Настройка устройств RoCE.

В этом разделе: