PowerFlex. Частые отключения PowerFlex MDM

Симптомы

Журналы событий MDM, показывающие частое отключение и повторное подключение компонента MDM:
 

2023-xx-xx 00:00:21.316 MDM_CLUSTER_LOST_CONNECTION WARNING        The MDM,  (ID ), has lost connection to the cluster.
2023-xx-xx 00:00:21.419 MDM_CLUSTER_CONNECTED     INFO             The MDM,  (ID ), connected after 100ms
2023-xx-xx 00:00:23.480 MDM_CLUSTER_LOST_CONNECTION WARNING        The MDM,  (ID ), has lost connection to the cluster.
2023-xx-xx 00:00:23.584 MDM_CLUSTER_CONNECTED     INFO             The MDM,  (ID ), connected after 110ms

Вывод Sar от сервера MDM, который отключает, отображая высокие повторные передачи TCP:
 

sar -n ETCP 1 -t -f sar.0
                 atmptf/s  estres/s retrans/s  isegerr/s orsts/s
00:00:27 AM      0.00      0.00     62.00      0.00      0.00
00:00:28 AM      0.00      0.00     88.12      0.00      0.00
00:00:29 AM      0.00      3.00    100.00      0.00      0.00
00:00:30 AM      0.00      0.00     71.29      0.00      0.00
00:00:31 AM      0.00      0.00     71.00      0.00      0.00
...
00:01:02 AM      0.00      0.00     48.51      0.00      0.00
00:01:03 AM      0.00      0.00     15.00      0.00      0.00
00:01:04 AM      0.00      0.00    207.00      0.00      0.00
00:01:05 AM      0.00      0.00     36.00      0.00      0.00
00:01:06 AM      0.00      0.99    105.94      0.00      0.00

Воздействие

Краткие события ограниченной функциональности кластера MDM

Снижение производительности
 

Основная причина

Сервер MDM был исправлен, а ядро Linux обновлено с 3.x до 5.x. Это обновление ядра изменяет многие параметры ОС по умолчанию на разные значения. В этом случае параметр TCP «net.ipv4.tcp_fack» в частности был отключен, но это привело к высокой повторной передаче TCP.

SDS RPM предоставляет файл конфигурации под названием emc.conf в каталоге /opt/emc/scaleio/sds/cfg/. Этот файл содержит множество рекомендуемых параметров ОС от Dell EMC.

Если это среда PowerFlex Rack/Appliance, PowerFlex Manager автоматически скопируйте файл emc.conf из «/opt/emc/scaleio/sds/cfg» в каждый файл systcl.conf сервера и применит его. Это происходит только при первоначальном развертывании узла. Существует вероятность того, что файл sysctl.conf был обновлен неправильно. Если файл sysctl.conf не существует с правильными значениями, после обновления ядра до версии 5.x некоторые важные параметры могут измениться.

Временное решение

Если в среде PowerFlex Rack/Appliance файл sysctl.conf не включает все параметры, которые есть в emc.conf, рекомендуется скопировать файл emc.conf в каждый файл /etc/sysctl.conf. Чтобы применить изменения на сервере,  Сервер можно перезагрузить или выполнить команду «sysctl -p», чтобы применить изменения из /etc/sysctl.conf. При внесении этих изменений убедитесь в том, что при внесении этих изменений соблюдаются передовые практики обслуживания.

В среде Software Only Dell EMC рекомендует применять эти параметры Linux к каждому из серверов, но в конечном итоге все за бизнесом. Обратитесь к поставщику ОС за передовыми практиками или по любым вопросам.
 

Затронутые версии

Все версии PowerFlex