PowerVault ME5: 관리 인터페이스에 액세스할 수 없거나 응답하지 않음

MC(Management Controller) 및 SC(Storage Controller)는 ME Series 어레이의 별도 하위 시스템입니다. 어레이는 I/O를 계속 제공하지만, 모든 관리 인터페이스(UI, SSH, 직렬, SNMP 또는 REST API)가 응답하지 않습니다.

일반적인 증상:

• PowerVault Manager UI에 액세스할 수 없습니다.
• 하나 또는 두 관리 인터페이스에 대한 SSH 세션을 열 수 없습니다.
• 직렬 세션 CLI 포트에 로그인할 수 없습니다.
• 어레이가 응답하지 않거나 외부 관리 애플리케이션(SNMP 또는 REST API)에서 사라졌습니다.

나중에 이벤트 로그를 검토할 때 아래의 해결 단계를 참조하십시오. 진행 중인 펌웨어 업그레이드가 없더라도 관리자는 이벤트 기록 로그에서 다음 항목을 볼 수 있습니다.

...
B849       2023-08-08 01:08:16  152   WARNING        The Storage Controller is not receiving data from the Management Controller. (This is normal during firmware update.)
...

메모리 부족 상태로 인해 관리 애플리케이션 프로세스가 종료됩니다. 외부 관리 애플리케이션이 SNMP 또는 REST API를 사용하여 관리 인터페이스를 폴링하는 환경에서는 인시던트가 더 자주 발생할 수 있습니다.

ME5 릴리스 노트:
FMW-65056은 CLI와 사용자 인터페이스가 응답하지 않을 수 있는 문제를 해결했습니다.

영향을 받을 수 있는 시스템은 무엇입니까?

1. 가능한 경우 각 컨트롤러 관리 인터페이스에 대한 SSH 세션 또는 USB 직렬 연결을 열고 관리 컨트롤러 서비스를 다시 시작해 보십시오. 이 작업이 성공하면 컨트롤러 펌웨어를 업그레이드합니다.
2. SSH 또는 USB 직렬을 사용하여 로그인할 수 없는 경우 영향을 받는 컨트롤러 모듈 중 하나를 물리적으로 재장착하고, 이 컨트롤러에서 관리 제어가 회복되면 피어 컨트롤러를 재시작합니다. 단일 컨트롤러 모듈이 있는 어레이 또는 경로 이중화가 없는 호스트가 있는 구성에서는 유지 보수 기간을 설정하고 호스트를 종료한 다음 어레이의 전원을 꺼야 합니다.
3. 두 컨트롤러 모듈에 대한 관리 액세스가 다시 설정되면 컨트롤러 모듈 펌웨어를 버전 ME5.1.2.1.0 이상으로 업그레이드합니다.

절차:

1단계: 두 컨트롤러 모두에서 관리 서비스를 재시작하려고 시도합니다.

• 이 단계는 일부 상황에서는 지원되지 않을 수 있습니다. 관리 컨트롤러를 재시작해도 운영에는 영향을 주지 않습니다.
• 이 단계에서는 관리 세션을 종료하고 서비스가 재시작될 때 약 2~3분 후에 관리 액세스가 복원됩니다.
• 두 컨트롤러 모듈에서 관리 서비스를 성공적으로 재시작하면 3단계로 이동합니다. 컨트롤러 모듈 펌웨어를 ME5.1.2.1.0 이상으로 업그레이드합니다.

1. 각 컨트롤러의 관리 인터페이스에 대한 SSH 세션을 열고 관리 또는 관리자 수준 사용자로 로그인합니다. 아니면 관리자가 각 컨트롤러에 대한 USB 직렬 연결을 시도할 수 있습니다. SSH 또는 직렬 연결을 사용하여 로그인할 수 없는 경우 2단계로 이동합니다. 1개의 컨트롤러 모듈을 물리적으로 재장착하거나 어레이의 전원을 끕니다.

2. 로그인에 성공하면 다음 명령을 사용하여 각각의 관리 컨트롤러를 재시작합니다.

   restart mc full
   
   # restart mc full
   During the restart process you will briefly lose communication with the specified Management Controller(s).
   Do you want to continue? (y/n) y
   
   Info: Restarting the local MC (A)...
   Success: Command completed successfully. (2023-08-24 05:34:01)
   # Killed

2단계: 1개의 컨트롤러 모듈을 물리적으로 재장착하거나 어레이의 전원을 끕니다.

시나리오 1: 이중화 경로가 있는 이중 컨트롤러 호스트 구성
이러한 단계는 유지 보수 기간 없이도 구현할 수 있습니다.

다음과 같은 조건이 참이어야 합니다.

• 호스트에 컨트롤러 A 및 B에 대한 연결 경로가 있어야 합니다.
• 호스트에 다중 경로 지원이 구성되고 활성화되어 있어야 합니다.
• 모든 호스트 이니시에이터는 볼륨에 매핑되어야 합니다.

자세한 정보는 Dell PowerVault ME5 Series 스토리지 시스템 소유자 설명서의 모듈 제거 및 교체 > 고객이 교체 가능한 부품 섹션을 참조하십시오.

1. 슬롯에서 컨트롤러 모듈 B를 물리적으로 약 5cm 정도 앞쪽으로 당긴 다음 30초 후에 컨트롤러 모듈을 재장착합니다.

2. 컨트롤러 B가 부팅 및 펌웨어 로드를 완료할 때까지 약 2~3분 정도 기다립니다.

3. 컨트롤러 B 관리 IP 주소에 대한 SSH 세션을 열고 관리 또는 관리자 수준 사용자로 로그인합니다.

4. 피어 스토리지 컨트롤러 A를 재시작합니다. 다음 명령을 입력합니다.

   restart sc a
   
   # restart sc a  While a Storage Controller is restarting, communication will temporarily be lost with the corresponding Management Controller, and also may cause a temporary loss of data availability. Do you want to continue? (y/n) y Success: Command completed successfully. - The command to restart SC A completed successfully. The controller will restart in approximately 30 seconds. (2023-08-24 07:08:39)

5. 피어 컨트롤러가 온라인 상태일 때는 PowerVault Manager에 로그인하고 3단계로 이동합니다. 컨트롤러 모듈 펌웨어를 ME5.1.2.1.0 이상으로 업그레이드합니다.

시나리오 2: 단일 컨트롤러 모듈 또는 비중복 호스트 경로 구성
유지 보수 기간이 필요합니다. 데이터에 대한 단일 경로를 예기치 않게 제거하면 호스트가 데이터에 액세스할 수 없게 되고 응답이 중지됩니다.

자세한 정보는 Dell PowerVault ME5 Series 스토리지 시스템 소유자 설명서의 모듈 제거 및 교체 > 고객이 교체 가능한 부품 섹션을 참조하십시오.

1. 사용자에게 운영이 중단되었음을 알리고, 호스트 운영 체제 사용자 가이드에 따라 연결된 호스트를 유지 보수 모드로 전환하거나 호스트를 종료합니다.

2. 어레이 후면에서 약 60초간 양쪽 전원 공급 장치를 모두 껐다가 다시 켭니다.

3. 컨트롤러가 부팅을 완료하고 펌웨어를 로드할 때까지 약 3분 정도 기다립니다.

4. PowerVault Manager에 로그인하여 3단계로 이동합니다. 컨트롤러 모듈 펌웨어를 ME5.1.2.1.0 이상으로 업그레이드합니다.

3단계: 컨트롤러 모듈 펌웨어를 ME5.1.2.1.0 이상으로 업그레이드합니다.

Dell PowerVault ME5 Series 관리자 가이드의 시스템 펌웨어 업데이트 섹션을 참조하십시오.

• 컨트롤러 펌웨어 업데이트를 다운로드합니다. 웹 브라우저에서 Dell 지원을 엽니다.
• PowerVault ME 서비스 태그를 입력하거나 PowerVault ME 모델을 선택합니다.
• 설명서에서 Dell PowerVault ME5 스토리지 시스템 릴리스 노트를 선택합니다.
• 드라이브 및 다운로드 탭에서 Dell PowerVault ME5 Series 스토리지 컨트롤러 펌웨어를 다운로드합니다.
• .zip 파일에서 펌웨어 바이너리를 추출합니다.
• Dell PowerVault Manager를 사용합니다. Maintenance > Firmware > System으로 이동하여 펌웨어 바이너리 파일을 업로드합니다.
• Maintenance > Firmware > System으로 이동하고 Activate this Version 링크를 클릭하여 대화 상자를 표시합니다.
• 화면의 지시에 따라 활성화를 시작합니다.

업그레이드 후 동작:

ME5 컨트롤러 펌웨어 버전 ME5.1.2.0.1 이상을 사용하는 경우 관리자는 때때로 다음과 같은 정보 알림을 받을 수 있습니다.

그림 1: 정보 알림

The Management Controller entered a memory exhaustion state and will reboot to recover. Data access will not be interrupted.

MC(Management Controller)는 시스템을 모니터링하고 구성할 수 있는 관리 UI 및 CLI 인터페이스를 제공합니다. 관리 서비스를 재시작해도 컨트롤러가 재부팅되거나 I/O가 중단되지 않습니다. 재시작하면 2분간 관리 인터페이스에 액세스할 수 없게 됩니다. 이 정보 알림을 자주 받는 경우 원인을 파악하기 위해 더 많이 조사해야 할 수 있습니다.