Symptoms
Data Domain Virtual Edition (DDVE) ist eine reine Software-Storage-Appliance, die entweder On-Premise oder in der Cloud bereitgestellt werden kann. Active Tier on Object Storage (ATOS) ist ein anderer Name für in der Cloud bereitgestellte DDVE.
Lokal unterstützt DDVE VMware, Hyper-V, KVM und VxRail.
In der Cloud wird Data Domain Virtual Edition wie folgt ausgeführt:
- Amazon Web Services (AWS) (Cloud und Gov-Cloud)
- Azure (Cloud und Gov-Cloud)
- VMware Cloud auf AWS-Cloud-Plattformen
- Google Cloud-Plattform (GCP)
DDVE in der Cloud ist nicht identisch mit einem Cloud-Tier. Cloud Tier ist ein anderes Produkt, das nur auf On-Premise-Hardware-DDs und DDVEs bereitgestellt werden kann.
Wenn eine in der Cloud bereitgestellte DDVE den lokalen Metadatenspeicher belegt, wird die folgende Warnmeldung ausgegeben:
EVT-SPACE-00004: Space usage in metadata storage has exceeded 100% threshold.
Cause
In der Cloud (ATOS) bereitgestellte DDVE unterstützt zwei Arten von Daten-Storage:
- Blockspeicher (wird für Daten und Metadaten oder Metadaten auf Objektspeicher-fähigen DDVEs verwendet, auch bekannt als ATOS).
- Hot Blob Storage wird auch als Objektspeicher bezeichnet (wird nur für Daten verwendet)
Metadatenfestplatten auf einer mit ATOS bereitgestellten DDVE werden wie folgt bestückt: Index, LP-Segmentreferenzen, CMETA-Container (Metadaten) und DM-Daten
(Directory Manager)Die meisten Bereitstellungen verwenden (Hot Blob oder Objektspeicher), da dies die aktuelle Empfehlung für Cloud-Bereitstellungen ist. Alle Daten werden mithilfe von Objektspeicher geschrieben, aber 10 % des Speicherplatzes sind als Blockspeicher für die Metadaten des DD-Dateisystems definiert. Die Größe der lokalen Metadaten ist eine Spekulation basierend auf der Größe der lizenzierten Kapazität. Zum Zeitpunkt der Bereitstellung wird die Metadatennutzung bei einem 10-fachen Deduplizierungsfaktor auf 10 % geschätzt. Eine DDVE mit einer Auslastung von 100 % Metadatenspeicher kann keine Backups aufnehmen.
In den folgenden Szenarien kann es vorkommen, dass auf der DDVE nicht mehr genügend Speicherplatz für lokale Metadaten vorhanden ist:
- Die Deduplizierung ist höher als 10x, daher sind die Metadatenanforderungen höher als das, was an Metadatengröße bereitgestellt wurde (Standard 10%).
- Eine große Anzahl alter Snapshots kann die Metadatengröße erhöhen
Eine größere Menge an Metadaten kann in ATOS DDVEs festgestellt werden, die als Ziele für die Dateireplikation fungieren (Controlled Clone Replication CCR/Managed File Replication MFR):
- Wenn nicht alle Basisdateien repliziert werden, hat die Ziel-ATOS-DDVE eine höhere Auslastung an Metadaten.
- In diesem Szenario nutzt die Replikation die Virtual Synthetics-Optimierungen NICHT voll aus, da mehr Speicherplatz zum Speichern von Metadaten benötigt wird.
- Diese Art von Problem wurde in NW CCR festgestellt, wo anscheinend nicht alle Basisdateien repliziert wurden. Dies führt dazu, dass das Ziel eine höhere Metadatennutzung aufweist.
Resolution
Die Lösung für dieses Problem besteht darin, weitere Festplatten als lokalen Metadatenspeicher hinzuzufügen.
Nur AWS und Azure erlauben die Erweiterung der Metadatenfestplattengröße, wenn die maximal zulässige Anzahl von Festplatten bereits zugewiesen wurde. Die Metadatenkapazität für vorhandene Metadatenfestplatten kann in Schritten von 1 TiB erhöht werden. Dies gilt nicht für die erste Metadatenfestplatte. Weitere Informationen finden Sie im Abschnitt "Erweitern des Metadatenspeichers" im Handbuch.
WICHTIGE INFORMATIONEN BEIM HINZUFÜGEN VON FESTPLATTEN FÜR METADATEN:
- Durch die Verwendung von Metadatenfestplatten unterschiedlicher Größe entsteht ein Indexungleichgewicht.
- Jede Metadatenfestplatte, die dem aktiven Tier hinzugefügt wird, sollte über eine eigene Spindelgruppe verfügen. Die Software tut dies automatisch. Die maximal bekannte Anzahl von Spindelgruppen ist 16.
- Wenn die maximale Anzahl von Spindelgruppen (16) überschritten wird, haben die Metadatenfestplatten dieselbe Spindelgruppe. I/O-Vorgänge für Festplatten auf denselben Spindelgruppen sind sequenziell.
- Die empfohlenen Größen finden Sie im Handbuch. Die meisten empfehlen ein Inkrement von 1 TiB, höhere Größen sind je nach Cloud-Anbieter möglich.
- Erweitern Sie nur Metadatenfestplatten für AWS und Azure. Das Erweitern von Metadatenfestplatten in einem beliebigen Provider macht die DDVE aufgrund einer Beschädigung unbrauchbar, oder der erweiterte Speicherplatz bleibt ungenutzt.
-
Überprüfen Sie die Metadatennutzung. Wenn sie 100 % erreicht hat, müssen mehr Festplatten zugewiesen werden.
- Im folgenden Beispiel sehen Sie, einige Ausgaben können je nach Cloud-Anbieter variieren, siehe Installations- und Administratorhandbuch:
- Zeigen Sie die Metadatennutzung an.
# filesys show space tier active local-metadata
--------------------------
Active Tier: local-metadata usage
Size GiB Used GiB Avail GiB Use%
-------- -------- --------- ------
1293.0 1291.5 1.5 100.0% -> We can see Metadata space is full.
-------- -------- --------- ------
-
Der Prozess zum Hinzufügen weiterer Metadatenfestplatten variiert je nach Cloud-Anbieter. Weitere Informationen finden Sie unten in den Handbüchern zu den einzelnen Cloud-Anbietern.
- Zeigt an, welche Laufwerke verwendet werden.
# disk show hardware
------------------
Disk Slot Manufacturer/Model Firmware Serial No. Capacity Type
(pci/idx)
---- --------- -------------------- -------- ---------- --------- -----
dev1 -/a Virtual BLOCK Device n/a (unknown) 250.0 GiB BLOCK -> DDOS Disk
dev2 -/b Virtual BLOCK Device n/a (unknown) 10.0 GiB BLOCK -> NVRAM disk
dev3 -/c Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata
dev4 -/d Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata
---- --------- -------------------- -------- ---------- --------- -----
4 drives present.
- Navigieren Sie zur AWS/GCP/AZURE-Konsole und fügen Sie DDVE Speicher hinzu. In diesem Fall wird eine 1-TiB-Festplatte hinzugefügt. Es wird als dev5 angesehen und denken Sie daran, keine der anderen vorhandenen Festplatten zu erweitern oder zu berühren.
HANDBÜCHER für DDVE in der Cloud (nur unten veröffentlichter Artikel für DDVE V4)
DDVEV4 auf Microsoft Azure – Installations- und Administratorhandbuch
https://support.emc.com/docu91981_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Azure-Installation-and-Administration-Guide.pdf?language=en_US DDVEV4 auf Google Cloud Platform(GC)
https://support.emc.com/docu91982_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Google-Cloud-Platform-(GCP)-Installation-and-Administration-Guide.pdf?language=en_US
DDVE4 auf Amazon Web Services(AWS), Installations- und Administratorhandbuch
https://support.emc.com/docu91980_Data_Domain_Virtual_Edition_4.0_with_DD_OS_6.2.0.10_in_Amazon_Web_Services_(AWS)_Installation_and_Administration_Guide.pdf?language=en_US
ACHTUNG: Zum Zeitpunkt des Lesens dieses Artikels können neue und aktualisierte Installations- oder Administratorhandbücher vorhanden sein.
- Zu diesem Zeitpunkt wird unter der Annahme, dass eine neue 1-TiB-Festplatte hinzugefügt wurde, dies in der Ausgabe als Festplatte dev5 angezeigt.
# disk show hardware
------------------
Disk Slot Manufacturer/Model Firmware Serial No. Capacity Type
(pci/idx)
---- --------- -------------------- -------- ---------- --------- -----
dev1 -/a Virtual BLOCK Device n/a (unknown) 250.0 GiB BLOCK -> DDOS Disk
dev2 -/b Virtual BLOCK Device n/a (unknown) 10.0 GiB BLOCK -> NVRAM disk
dev3 -/c Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata
dev4 -/d Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata
dev5 -/e Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Newly added disk for metadata, unused.
---- --------- -------------------- -------- ---------- --------- -----
- Fügen Sie die neue Festplatte zum aktiven Tier hinzu. dev5 für dieses Beispiel:
# storage add tier active dev5
- Erweitern Sie das Dateisystem.
# filesys expand
-
Vergewissern Sie sich, dass auf das FS, das aufgrund fehlenden Metadatenspeicherplatzes schreibgeschützt war, jetzt geschrieben werden kann.
- Überprüfen Sie, ob Backups jetzt einwandfrei funktionieren
- Überprüfen Sie, ob die eingehende Replikation wieder aufgenommen wurde und möglicherweise Datenverkehr angezeigt wird.
Diese Inhalte werden in andere Sprachen übersetzt:
- https://downloads.dell.com/TranslatedPDF/PT-BR_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/ZH-CN_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/ES_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/DE_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/FR_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/IT_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/JA_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/NL_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/KO_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/RU_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/PT_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/SV_KB537488.pdf
- Die Erweiterung des Dateisystems kann online durchgeführt werden.
- Die Metadatennutzung ist direkt proportional zum Deduplizierungsfaktor. Workloads mit hohen Deduplizierungsfaktoren erstellen größere Indizes, sodass die Metadatenanforderungen höher sind.
- Alte und große Snapshots enthalten Daten, erhöhen außerdem den Deduplizierungsfaktor und führen dazu, dass dem System früher die Metadaten ausgehen.
- Es gibt nur Richtlinien für Metadatenanforderungen für die Bereitstellung, diese sind 10 % der Kapazität in Metadatenfestplatten und setzen einen 10-fachen Deduplizierungsfaktor voraus. Höhere Deduplizierungsraten erfordern mehr Metadatenfestplatten.
- Die DD-Unterstützung verfügt nicht über Richtlinien für Speicheranforderungen für lokale Metadaten mit höheren Deduplizierungsfaktoren als 10x. Es wird empfohlen, Metadatenfestplatten in Schritten von 1 TiB hinzuzufügen, bis ein ausgewogenes Verhältnis zwischen Dateisystemnutzung und Metadatennutzung erreicht ist.
- Es gibt keine bekannte Methode zur Vorhersage der zukünftigen Metadatennutzung basierend auf potenziellen Deduplizierungsfaktoren.
- Ein Indexungleichgewicht kann auch auf Festplatten derselben Größe auftreten. Der häufigste Grund ist, dass neue Festplatten inkrementiert wurden, nachdem die Metadaten fast voll waren. Die älteren Festplatten enthalten immer noch die meisten Metadatenstrukturen, wobei mehr I/O angefordert werden. Da ältere Daten abgelaufen sind, sollten sich die Metadaten zwischen den Festplatten ausgleichen.
Affected Products
Data Domain, Data Domain Virtual Edition