PowerVault ME5: Auf die Managementschnittstelle kann nicht zugegriffen werden oder sie reagiert nicht

Management Controller (MC) und Storage Controller (SC) sind separate Subsysteme auf Arrays der ME-Serie. Das Array stellt weiterhin I/O bereit, jedoch reagieren alle Managementschnittstellen (UI, SSH, seriell, SNMP oder REST API) nicht.

Typische Symptome:

• Auf die PowerVault Manager-Benutzeroberfläche kann nicht zugegriffen werden.
• Eine SSH-Sitzung kann für eine oder beide Managementschnittstellen nicht geöffnet werden.
• Anmeldung am CLI-Port für serielle Sitzungen nicht möglich
• Das Array reagiert nicht auf externe Managementanwendungen (SNMP oder REST API) oder ist aus diesen verschwunden.

Wenn die Ereignisprotokolle anschließend überprüft werden, finden Sie weitere Informationen in den folgenden Lösungsschritten. Administratoren wird möglicherweise der folgende Eintrag im Ereignisverlaufsprotokoll angezeigt, obwohl kein Firmwareupgrade durchgeführt wird.

...
B849       2023-08-08 01:08:16  152   WARNING        The Storage Controller is not receiving data from the Management Controller. (This is normal during firmware update.)
...

Wenn nicht genügend Arbeitsspeicher vorhanden ist, werden die Managementanwendungsprozesse beendet. Vorfälle treten möglicherweise häufiger in Umgebungen auf, in denen externe Managementanwendungen die Managementschnittstellen mithilfe von SNMP oder REST API abfragen.

ME5 – Versionshinweise:
FMW-65056: Behebt eine Bedingung, die dazu führen kann, dass CLI und Benutzeroberfläche nicht reagieren.

Welche Systeme können betroffen sein?

1. Versuchen Sie, wenn möglich, eine SSH-Sitzung oder alternativ eine serielle USB-Verbindung zu jeder Controller-Managementschnittstelle zu öffnen und die Management-Controller-Services erneut zu starten. Wenn dies erfolgreich ist, aktualisieren Sie die Controller-Firmware.
2. In Fällen, in denen es nicht möglich ist, sich über SSH oder serielle USB anzumelden, ist es erforderlich, eines der betroffenen Controller-Module physisch neu einzusetzen und den Peer-Controller neu zu starten, sobald die Managementsteuerung auf diesem Controller wiedererlangt wurde. Bei einem Array mit einem einzelnen Controller-Modul oder Konfigurationen mit Hosts ohne Pfadredundanz ist es erforderlich, ein Wartungsfenster einzurichten, die Hosts herunterzufahren und dann das Array auszuschalten.
3. Sobald der Managementzugriff auf beide Controller-Module wiederhergestellt ist, aktualisieren Sie die Firmware des Controller-Moduls auf Version ME5.1.2.1.0 oder höher.

Verfahren:

Schritt 1: Versuchen Sie, die Managementservices auf beiden Controllern neu zu starten.

• Dieser Schritt ist möglicherweise nicht unter allen Umständen möglich. Der Neustart des Management-Controllers hat keine Auswirkungen auf die Produktion.
• Mit diesem Schritt wird die Managementsitzung beendet und der Managementzugriff wird nach etwa zwei oder drei Minuten wiederhergestellt, wenn die Services neu gestartet werden.
• Wenn die Managementservices auf beiden Controller-Modulen erfolgreich neu gestartet werden können, fahren Sie mit Schritt 3 fort: Aktualisieren Sie die Firmware des Controller-Moduls auf ME5.1.2.1.0 oder höher.

1. Öffnen Sie eine SSH-Sitzung zu den Managementschnittstellen jedes Controllers und melden Sie sich als Nutzer auf Management- oder Administratorebene an. Alternativ kann ein Administrator es mit einer seriellen USB-Verbindung zu jedem Controller versuchen. Wenn es nicht möglich ist, sich über SSH oder eine serielle Verbindung anzumelden, fahren Sie mit Schritt 2 fort: Setzen Sie ein Controller-Modul physisch neu ein oder schalten Sie das Array aus.

2. Wenn die Anmeldung erfolgreich ist, starten Sie den Management-Controller auf jedem mit dem folgenden Befehl neu:

   restart mc full
   
   # restart mc full
   During the restart process you will briefly lose communication with the specified Management Controller(s).
   Do you want to continue? (y/n) y
   
   Info: Restarting the local MC (A)...
   Success: Command completed successfully. (2023-08-24 05:34:01)
   # Killed

Schritt 2: Setzen Sie ein Controller-Modul physisch neu ein oder schalten Sie das Array aus.

Szenario 1: Dual-Controller mit redundanter Pfad-Hostkonfiguration
Diese Schritte können ohne die Notwendigkeit eines Wartungsfensters implementiert werden.

Die folgenden Bedingungen müssen erfüllt sein:

• Hosts müssen über einen Verbindungspfad zu Controller A und B verfügen
• Auf Hosts muss Multipath-Unterstützung konfiguriert und aktiviert sein.
• Alle Hostinitiatoren müssen Volumes zugeordnet sein.

Weitere Informationen finden Sie im Abschnitt Entfernen und Austauschen>von Modulen – vom Kunden austauschbare Einheiten im Benutzerhandbuch für Speichersysteme der Dell PowerVault ME5-Serie.

1. Ziehen Sie das Controllermodul B in seinem Steckplatz physisch um etwa fünf Zentimeter nach vorne und setzen Sie das Controllermodul nach 30 Sekunden wieder ein.

2. Warten Sie etwa zwei bis drei Minuten, bis Controller B den Startvorgang und das Laden der Firmware abgeschlossen hat.

3. Öffnen Sie eine SSH-Sitzung zur Management-IP-Adresse von Controller B und melden Sie sich als Nutzer auf Management- oder Administratorebene an.

4. Starten Sie Peer-Speicher-Controller A neu. Geben Sie den folgenden Befehl ein:

   restart sc a
   
   # restart sc a  While a Storage Controller is restarting, communication will temporarily be lost with the corresponding Management Controller, and also may cause a temporary loss of data availability. Do you want to continue? (y/n) y Success: Command completed successfully. - The command to restart SC A completed successfully. The controller will restart in approximately 30 seconds. (2023-08-24 07:08:39)

5. Wenn der Peer-Controller online ist, melden Sie sich beim PowerVault Manager an und fahren Sie mit Schritt 3 fort: Aktualisieren Sie die Firmware des Controller-Moduls auf ME5.1.2.1.0 oder höher.

Szenario 2: Konfiguration mit einem einzelnen Controller-Modul oder nicht redundanten Hostpfaden
Ein Wartungsfenster ist erforderlich. Das unerwartete Entfernen des einzigen Pfads zu Daten bedeutet, dass der Host den Zugriff auf Daten verliert und nicht mehr reagiert.

Weitere Informationen finden Sie im Abschnitt Entfernen und Austauschen>von Modulen – vom Kunden austauschbare Einheiten im Benutzerhandbuch für Speichersysteme der Dell PowerVault ME5-Serie.

1. Benachrichtigen Sie die Nutzer über den Ausfall und befolgen Sie das Benutzerhandbuch des Hostbetriebssystems, um den verbundenen Host in den Wartungsmodus zu versetzen oder Hosts herunterzufahren.

2. Schalten Sie an der Arrayrückseite beide Netzteile ca. 60 Sekunden lang aus, bevor Sie sie wieder einschalten.

3. Warten Sie etwa drei Minuten, bis die Controller den Startvorgang abgeschlossen und die Firmware geladen hat.

4. Melden Sie sich beim PowerVault Manager an und fahren Sie mit Schritt 3 fort: Aktualisieren Sie die Firmware des Controller-Moduls auf ME5.1.2.1.0 oder höher.

Schritt 3: Aktualisieren Sie die Firmware des Controller-Moduls auf ME5.1.2.1.0 oder höher.

Weitere Informationen finden Sie im Abschnitt Aktualisieren der Systemfirmware im Administratorhandbuch für die Dell PowerVault ME5-Serie.

• Laden Sie das Controller-Firmwareupdate herunter. Öffnen Sie Dell Support in einem Webbrowser.
• Geben Sie die PowerVault ME-Service-Tag-Nummer ein oder wählen Sie das PowerVault ME-Modell aus.
• Wählen Sie unter Dokumentation die Versionshinweise für das Dell PowerVault ME5-Speichersystem aus.
• Laden Sie auf der Registerkarte Laufwerke und Downloads die Storage-Controller-Firmware der Dell PowerVault ME5-Serie herunter
• Extrahieren Sie die Firmware-Binärdatei aus der .zip Datei.
• Mit Dell PowerVault Manager. Gehen Sie zu Wartung>Firmwaresystem> und laden Sie die Firmware-Binärdatei hoch.
• Gehen Sie zu Wartung>Firmwaresystem> und klicken Sie auf den Link Diese Version aktivieren, um das Dialogfeld anzuzeigen.
• Folgen Sie den Bildschirmanweisungen, um die Aktivierung zu starten.

Verhalten nach dem Upgrade:

Mit der ME5-Controller-Firmware-Version ME5.1.2.0.1 oder höher erhalten Administratoren gelegentlich die folgende Informationswarnmeldung.

Abbildung 1: Informationswarnmeldung

The Management Controller entered a memory exhaustion state and will reboot to recover. Data access will not be interrupted.

Der Management-Controller (MC) stellt die Management-UI und die CLI-Schnittstelle zur Überwachung und Konfiguration des Systems bereit. Durch das Neustarten der Managementservices werden die Controller nicht neu gestartet oder die I/O unterbrochen. Der Neustart hat zur Folge, dass zwei Minuten lang nicht auf die Managementschnittstelle zugegriffen werden kann. Wenn Sie diese Informationswarnmeldung häufig erhalten, sind möglicherweise weitere Untersuchungen erforderlich, um die Ursache zu ermitteln.