Symptoms
Data Domain Virtual Edition (DDVE) on vain ohjelmiston tallennuslaite, joka voi olla joko paikallinen tai pilvikäyttöönotossa. Active Tier on Object Storage (ATOS) on toinen nimi pilvikäyttöönotetulle DDVE:lle.
DDVE tukee paikallisesti VMwarea, Hyper-V:tä, KVM:ää ja VxRailia.
Pilvipalvelussa Data Domain Virtual Edition on käynnissä:
- Amazon Web Services (AWS) (pilvi ja gov-pilvi)
- Azure (pilvi ja gov-pilvi)
- VMware Cloud AWS-pilviympäristöissä
- Google Cloud Platform (GCP)
Pilven DDVE ei ole sama asia kuin pilvitaso. Cloud Tier on eri tuote, joka voidaan ottaa käyttöön vain paikallisissa DD:issä ja DDVE:issä.
Jos pilvessä käyttöön otettu DDVE täyttää paikallisen metatietovarastonsa, annetaan seuraava hälytys:
EVT-SPACE-00004: Space usage in metadata storage has exceeded 100% threshold.
Cause
Pilvipalvelussa (ATOS) käyttöön otettu DDVE tukee kahdenlaista tietojen tallennusta:
- Lohkotallennus (käytetään tiedoille ja metatiedoille tai objektitallennuksen metatiedoille, jotka ovat käytössä DDVE:t eli ATOS).
- Kuuma blob-tallennus tunnetaan myös objektitallennustilana (käytetään vain tiedoille)
ATOS-järjestelmään liitetyn DDVE:n metatietolevyillä on: Indeksi, LP-segmenttiviittaukset, CMETA (metatiedot) -säilöt ja hakemistonhallinnan (DM) tiedot
Useimmissa käyttöönotoissa käytetään (Hot Blob tai Object Storage), koska se on nykyinen pilvikäyttöönottoja koskeva suositus. Kaikki tiedot kirjoitetaan objektitallennuksella, mutta 10 % tilasta määritetään lohkotallennukseksi DD-tiedostojärjestelmän metatiedoille. Paikallisen metadatan koko on lisensoidun kapasiteetin kokoon perustuva spekulaatio. Käyttöönottohetkellä 10 %:n metatietojen käytön arvioidaan poistavan deduplikoinnin kymmenkertaisesti. DDVE, jonka metatietotallennustila on 100 %, ei voi käsitellä varmuuskopioita.
Seuraavista tilanteista johtuen DDVE:n paikallinen metatietojen tallennustila saattaa loppua:
- Deduplikointi on suurempi kuin 10x, joten metatietovaatimukset ovat korkeammat kuin metatietojen koossa (oletus 10%).
- Suuri määrä tai vanhoja tilannevedoksia voi suurentaa metatietojen kokoa
Suurempi määrä metatietoja voidaan havaita ATOS DDVE:issä, jotka toimivat tiedostojen replikoinnin kohteina (Controlled Clone Replication CCR / Managed File Replication MFR):
- Jos kaikkia perustiedostoja ei replikoida, ATOS DDVE:n kohdemetatiedot ovat suuremmat.
- Tässä skenaariossa replikointi EI hyödynnä täysin virtuaalisynteettisten materiaalien optimointeja, joten se tarvitsee enemmän tilaa metatietojen tallentamiseen.
- Tämän tyyppinen ongelma havaittiin NW CCR:ssä, jossa kaikkia perustiedostoja ei ilmeisesti toistettu. Tämä aiheuttaa kohteelle suuremman metatietojen käytön.
Resolution
Ratkaisu tähän ongelmaan olisi lisätä lisää levyjä paikallisena metatietojen tallennustilana.
Vain AWS ja Azure sallivat metatietolevyn koon laajentamisen, kun suurin sallittu määrä levyjä on jo varattu. Olemassa olevien metatietolevyjen metatietokapasiteettia voidaan lisätä 1 TiB:n välein. Tämä ei koske ensimmäistä metatietolevyä. Katso lisätietoja opasasiakirjan kohdasta "Laajenna metatietojen tallennustila".
TÄRKEÄÄ TIETOANO LISÄTTÄESSÄ LEVYJÄ METATIETOJA VARTEN:
- Erikokoisten metatietolevyjen käyttäminen luo indeksiepätasapainon.
- Jokaisella aktiiviseen tasoon lisätyllä metatietolevyllä pitäisi olla oma kararyhmä, ohjelmisto tekee tämän automaattisesti. Suurin tunnettu kararyhmien lukumäärä on 16.
- Jos ylitetään kararyhmien enimmäismäärä (16), metatietolevyt muodostavat saman kararyhmän. Samojen kararyhmien levyihin kohdistuva I/O-toiminto on peräkkäinen.
- Katso oppaasta suositellut koot, useimmat suosittelevat 1 TiB: n lisäystä, suuremmat koot ovat mahdollisia pilvipalveluntarjoajasta riippuen.
- Laajenna vain AWS:n ja Azuren metatietolevyt. Metatietolevyjen laajentaminen missä tahansa palvelussa tekee DDVE:stä käyttökelvottoman, koska se on vioittunut tai laajennettu tila on käyttämättä.
-
Tarkista metatietojen käyttö, jos se saavutti 100 %, sille on määritettävä lisää levyjä.
- Alla olevassa esimerkissä jotkin tulokset voivat vaihdella pilvipalveluntarjoajan mukaan. Katso asennus- ja hallintaoppaasta:
- Näytä metatietojen käyttö.
# filesys show space tier active local-metadata
--------------------------
Active Tier: local-metadata usage
Size GiB Used GiB Avail GiB Use%
-------- -------- --------- ------
1293.0 1291.5 1.5 100.0% -> We can see Metadata space is full.
-------- -------- --------- ------
-
Metatietolevyjen lisäämisprosessi vaihtelee pilvipalveluntarjoajan mukaan. Katso alla olevat pilvipalvelujen tarjoajien käyttöoppaat.
# disk show hardware
------------------
Disk Slot Manufacturer/Model Firmware Serial No. Capacity Type
(pci/idx)
---- --------- -------------------- -------- ---------- --------- -----
dev1 -/a Virtual BLOCK Device n/a (unknown) 250.0 GiB BLOCK -> DDOS Disk
dev2 -/b Virtual BLOCK Device n/a (unknown) 10.0 GiB BLOCK -> NVRAM disk
dev3 -/c Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata
dev4 -/d Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata
---- --------- -------------------- -------- ---------- --------- -----
4 drives present.
- Siirry AWS/GCP/AZURE-konsoliin ja lisää tallennustila DDVE:hen. Tässä tapauksessa lisätään 1TiB-levy. Se näkyy nimellä dev5, äläkä laajenna tai kosketa muita olemassa olevia levyjä.
KÄYTTÖOPPAAT, DDVE ON CLOUD (VAIN ALLA OLEVA JULKAISU, DDVE V4)
DDVEV4 Microsoft Azuren asennus- ja hallintaoppaassa.
https://support.emc.com/docu91981_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Azure-Installation-and-Administration-Guide.pdf?language=en_US DDVEV4 Google Cloud Platformissahttps
://support.emc.com/docu91982_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Google-Cloud-Platform-(GCP)-Installation-and-Administration-Guide.pdf?language=en_US
DDVE4 Amazon-verkkopalveluissa (AWS), asennus- ja hallintaopas
https://support.emc.com/docu91980_Data_Domain_Virtual_Edition_4.0_with_DD_OS_6.2.0.10_in_Amazon_Web_Services_(AWS)_Installation_and_Administration_Guide.pdf?language=en_US
HUOMAUTUS: Tämän artikkelin lukemishetkellä saattaa olla olemassa uusia ja päivitettyjä asennus- tai hallintaoppaita.
- Tässä vaiheessa olettaen, että uusi 1 TiB:n levy lisättiin, tämä näkyy tuloksessa levynä dev5.
# disk show hardware
------------------
Disk Slot Manufacturer/Model Firmware Serial No. Capacity Type
(pci/idx)
---- --------- -------------------- -------- ---------- --------- -----
dev1 -/a Virtual BLOCK Device n/a (unknown) 250.0 GiB BLOCK -> DDOS Disk
dev2 -/b Virtual BLOCK Device n/a (unknown) 10.0 GiB BLOCK -> NVRAM disk
dev3 -/c Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata
dev4 -/d Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata
dev5 -/e Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Newly added disk for metadata, unused.
---- --------- -------------------- -------- ---------- --------- -----
- Lisää uusi levy aktiiviselle tasolle. dev5 tässä esimerkissä:
# storage add tier active dev5
- Laajenna tiedostojärjestelmä.
# filesys expand
-
Varmista, että FS, joka oli vain luku -tilassa metatietotilan puutteen vuoksi, voidaan nyt kirjoittaa.
- Tarkista, että varmuuskopiointi toimii nyt kunnolla
- Tarkista, että saapuvan replikoinnin jatkuminen jatkuu ja liikennettä näkyy.
Tämä sisältö on käännetty muille kielille:
- https://downloads.dell.com/TranslatedPDF/PT-BR_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/ZH-CN_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/ES_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/DE_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/FR_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/IT_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/JA_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/NL_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/KO_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/RU_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/PT_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/SV_KB537488.pdf
- Tiedostojärjestelmän laajennus voidaan tehdä verkossa.
- Metatietojen käyttö on suoraan verrannollinen deduplikointikertoimeen. Kuormitukset, joissa on korkeat deduplikointikertoimet, luovat suurempia indeksejä, joten metatietojen tarve on suurempi.
- Vanhat ja suuret tilannevedokset sisältävät tietoja, lisäävät myös deduplikointikerrointa ja aiheuttavat sen, että järjestelmän metatiedot loppuvat nopeammin.
- Käyttöönottoa varten on vain metatietojen vaatimusohjeet, jotka ovat 10 % metatietolevyjen kapasiteetista ja joissa oletetaan 10x deduplikointikertoimet. Suuremmat deduplikointisuhteet vaativat enemmän metatietolevyjä.
- DD-tuella ei ole paikallisia metatietojen tallennusvaatimuksia koskevia ohjeita suuremmille deduplikointikertoimille kuin 10x. Metatietolevyjä suositellaan lisättäväksi 1 TiB:n välein, kunnes tiedostojärjestelmän käytön ja metatietojen käytön välillä on saavutettu tasapaino.
- Ei ole tunnettua menetelmää ennustaa tulevaa metatietojen käyttöä mahdollisten deduplikointitekijöiden perusteella.
- Indeksin epätasapainoa voi esiintyä myös samankokoisilla levyillä. Yleisin syy on se, että uusia levyjä on lisätty sen jälkeen, kun metatiedot ovat lähes täynnä. Vanhemmilla levyillä on edelleen suurin osa metatietorakenteista, ja lisää I/O:ta pyydetään. Kun vanhemmat tiedot ovat vanhentuneet, metatietojen pitäisi tasapainottaa itsensä levyjen välillä.
Affected Products
Data Domain, Data Domain Virtual Edition