Skip to main content
  • Place orders quickly and easily
  • View orders and track your shipping status
  • Enjoy members-only rewards and discounts
  • Create and access a list of your products

Data Domain:云部署 (ATOS) 的 Data Domain Virtual Edition (DDVE) 可能会耗尽本地元数据存储

Summary: Data Domain:云部署 (ATOS) 的 Data Domain Virtual Edition (DDVE) 可能会耗尽本地元数据存储。

This article applies to   This article does not apply to 

Symptoms

Data Domain Virtual Edition (DDVE) 是一种纯软件存储设备,可以在本地部署或云部署。在云上部署的 DDVE 也称为 ATOS(对象存储上的活动层)。  
在本地,DDVE 支持 VMware、Hyper-V、KVM 和 VxRail。在云中,DD VE 还在 Amazon Web Services (AWS)(云和 gov cloud)、Azure(云和 gov cloud)、VMware Cloud on AWS 云平台和 Google Cloud Platform (GCP) 中运行。
请注意,DDVE on Cloud 与 Cloud Tier 不同。Cloud Tier 是一种不同的产品,只能部署在本地硬件 DD 和 DDVE 上。
如果部署在云上的 DDVE 填满了其本地元数据存储,则会发出以下警报:
EVT-SPACE-00004: Space usage in metadata storage has exceeded 100% threshold.

Cause

部署在云端的 DDVE (ATOS) 支持两种类型的数据存储:
- 数据块存储(用于数据和元数据,或仅用于启用了对象存储的元数据 DDVE,又名 ATOS)。
- Hot Blob 存储也称为对象存储(仅用于数据)
在 ATOS 部署的 DDVE 上的元数据磁盘将填充: 索引、LP 段引用、CMETA(元数据)容器和 DM(目录管理器)数据。
大多数部署都在使用(Hot Blob 或对象存储),因为这是云部署的当前建议。这意味着我们使用对象存储写入所有数据,但我们必须将 10% 的空间定义为 DD 文件系统元数据的数据块存储。本地元数据的大小是基于许可容量大小的推测,在部署时,对于 10 倍重复数据消除,假定元数据使用率为 10%。  元数据存储使用率为 100% 的 DDVE 无法接收备份。
由于以下情形,DDVE 可能会耗尽本地元数据存储空间:
- 重复数据消除高于 10 倍,因此 元数据 要求高于在元数据大小中部署的要求(默认为 10%)。  
- 大量快照或旧快照可能会增加 元数据大小
在充当文件目标的 ATOS DDVE 中可能会注意到元数据量较大 复制 (Controlled Clone Replication CCR/Managed File Replication MFR): 
- 如果未复制所有基本文件,则目标 ATOS DDVE 在元数据中的使用率更高。
- 在这种情况下,复制没有充分利用虚拟合成优化,因此需要更多空间来存储元数据。 
- 在 NW CCR 中注意到这种类型的问题,似乎没有复制所有基本文件,导致目标具有更高的元数据使用率。 

Resolution

此问题的解决方案是将更多磁盘添加为本地元数据存储。对于 Azure,仅当 Azure VM 已分配到允许的最大磁盘数时,才有可能通过以 1 TiB 为增量使现有元数据磁盘(第一个磁盘除外)更大来扩展元数据容量。请参阅”Azure Cloud 中的 PowerProtect DD Virtual Edition 7.x 安装和管理指南》文档中的“扩展元数据存储”部分,了解详细信息。
为元数据添加磁盘时的重要信息: 

。使用不同大小的元数据磁盘可能会造成索引不平衡;因此,引导 DDVE IO 绑定在最大的磁盘上,因为这些磁盘保存了大部分元数据。
。添加到活动层的每个元数据磁盘都应具有自己的磁盘轴组,这应由软件自动完成。已知的最大磁盘轴组数为 16。 
。如果超过最大磁盘轴组数 16),则最终会有共享同一磁盘轴组的元数据磁盘。针对相同磁盘轴组上磁盘的 IO 是顺序的。 
。有关建议的大小,请参阅手册,大多数建议以 1 TiB 为增量,也可能有更高的大小,具体取决于云提供商。
。无法扩展现有磁盘,您只能添加磁盘,请勿扩展任何现有磁盘,因为这可能会导致 DDVE 因损坏而无法使用,或者扩展的空间未使用。
1 - 查看元数据使用情况,如果达到 100%,则需要分配更多磁盘。
- 提供了以下示例,一些输出可能因云提供商而异,请参阅安装和管理手册:
- 显示元数据使用情况
# filesys show space tier active local-metadata
--------------------------
Active Tier: local-metadata usage
Size GiB   Used GiB   Avail GiB     Use%
--------   --------   ---------   ------
  1293.0     1291.5         1.5   100.0%             -> We can see Metadata space is full.
--------   --------   ---------   ------
2 - 添加更多元数据磁盘的过程因云提供商而异,请参阅底部的每个云提供商手册。
- 显示使用了哪些磁盘
# disk show hardware
------------------
Disk   Slot        Manufacturer/Model     Firmware   Serial No.   Capacity    Type
       (pci/idx)                                                                  
----   ---------   --------------------   --------   ----------   ---------   -----
dev1   -/a         Virtual BLOCK Device   n/a        (unknown)    250.0 GiB   BLOCK  -> DDOS Disk
dev2   -/b         Virtual BLOCK Device   n/a        (unknown)    10.0 GiB    BLOCK  -> NVRAM disk
dev3   -/c         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
dev4   -/d         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
----   ---------   --------------------   --------   ----------   ---------   -----
4 drives present.
2.1 — 转至 AWS/GCP/AZURE 控制台并将存储添加到 DDVE,在本例中,我们添加了一个 1 TiB 磁盘,然后它应被视为 dev5,请记住不要扩展或接触任何其他现有磁盘。 
                云上的 DDVE 手册(仅针对 DDVE V4 在下面发布)
Microsoft Azure 上的 DDVEV4 安装和管理手册
                                Google Cloud Platform (GC)
上的 DDVEV4https://support.emc.com/docu91982_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Google-Cloud-Platform-(GCP)-Installation-and-Administration-Guide.pdf?language=en_US                               
Amazon web Services (AWS) 上的 DDVE4、安装和管理手册https://support.emc.com/docu91980_Data_Domain_Virtual_Edition_4.0_with_DD_OS_6.2.0.10_in_Amazon_Web_Services_(AWS)_Installation_and_Administration_Guide.pdf?language=en_US          

注意:阅读本文时,可能存在新的和更新的安装/管理员手册。
2.2 - 在此阶段,假设添加了新的 1 TiB 磁盘,在输出中会显示为磁盘 dev5。
# disk show hardware
------------------
Disk   Slot        Manufacturer/Model     Firmware   Serial No.   Capacity    Type
       (pci/idx)                                                                  
----   ---------   --------------------   --------   ----------   ---------   -----
dev1   -/a         Virtual BLOCK Device   n/a        (unknown)    250.0 GiB   BLOCK  -> DDOS Disk
dev2   -/b         Virtual BLOCK Device   n/a        (unknown)    10.0 GiB    BLOCK  -> NVRAM disk
dev3   -/c         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
dev4   -/d         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
dev5   -/e         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Newly added disk for metadata, unused.
----   ---------   --------------------   --------   ----------   ---------   -----
2.3 - 将新磁盘添加到活动层。在本例中为 dev5
# storage add tier active dev5
  注意:如果从 CLI 将更多磁盘添加到 DDVE ATOS 本地元数据时,会收到消息“Local storage size exceeds the maximum required metadata capacity for this configuration”,如下所示:
** Local storage size exceeds the maximum required metadata capacity for this configuration.
Do you want to continue? (yes|no) [no]:
2.4 - 扩展文件系统
# filesys expand
3.确认由于缺少元数据空间而处于只读状态的文件系统现在可以写入
这可以通过多种方式实现,从确保备份现在正常工作,到检查传入复制是否恢复并可能会看到流量。

Additional Information

本内容以其他语言翻译: 
https://downloads.dell.com/TranslatedPDF/PT-BR_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/ZH-CN_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/ES_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/DE_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/FR_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/IT_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/JA_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/NL_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/KO_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/RU_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/PT_KB537488.pdf
https://downloads.dell.com/TranslatedPDF/SV_KB537488.pdf

- 文件系统扩展可以在线完成。
- 元数据使用量与重复数据消除系数成正比。如果备份工作负载很好地消除了重复数据,则 DDVE 索引越大,因此对元数据的需求就越高。
- 旧的和大的快照,不仅会保存数据,还会增加重复数据,从而导致系统更快地耗尽元数据。
- 部署仅有元数据要求指导准则,这些要求将占元数据磁盘中容量的 10%,并假定重复数据消除率为 10 倍。更高的重复数据消除率最终将需要更多的元数据磁盘。
- DD Support 没有针对超过 10 倍重复数据消除的本地元数据存储要求原则。建议以 1 TiB 为增量添加元数据磁盘,直至文件系统使用量和元数据使用量之间达到平衡。
- 目前没有已知的方法来根据潜在的重复数据消除因素来预测未来的元数据使用情况。

- 指数失衡也可能发生 在磁盘上 对于相同大小,最常见的原因是在元数据接近满后新磁盘已增加,因此较旧的磁盘仍将保留大部分元数据结构,并请求更多 IO。当较旧的数据到期时,元数据应在磁盘之间平衡自身。

Affected Products

Data Domain, Data Domain Virtual Edition