NetBackup™ 重复数据删除指南
- NetBackup Media Server Deduplication Option 简介
- 快速入门
- 规划部署
- 规划 MSDP 部署
- NetBackup 命名约定
- 关于 MSDP 重复数据删除节点
- 关于 NetBackup 重复数据删除目标
- 关于 MSDP 存储容量
- 关于 MSDP 存储和连接要求
- 关于 NetBackup 介质服务器重复数据删除
- 关于 NetBackup Client Direct 重复数据删除
- 关于 MSDP 远程办公客户端重复数据删除
- 关于 NetBackup Deduplication Engine 凭据
- 关于 MSDP 的网络接口
- 关于 MSDP 端口用法
- 关于 MSDP 优化合成备份
- 关于 MSDP 和 SAN 客户端
- 关于 MSDP 优化复制和主从复制
- 关于 MSDP 性能
- 关于 MSDP 流处理程序
- MSDP 部署最佳做法
- 置备存储
- 重复数据删除的授权
- 配置重复数据删除
- 配置 MSDP 服务器端重复数据删除
- 配置 MSDP 客户端重复数据删除
- 关于 MSDP 重复数据删除多线程代理
- 配置重复数据删除多线程代理行为
- 配置重复数据删除插件与多线程代理的交互
- 关于 MSDP 指纹识别
- 关于 MSDP 指纹缓存
- 配置 MSDP 指纹缓存行为
- 关于将远程客户端重复数据删除的 MSDP 指纹缓存设定为种子
- 在客户端上配置 MSDP 指纹缓存种子设定
- 在存储服务器上配置 MSDP 指纹缓存种子设定
- 关于采样和预测缓存
- 启用对 400 TB MSDP 的支持
- 关于使用 NetBackup KMS 服务的 MSDP 加密
- 关于使用外部 KMS 服务器的 MSDP 加密
- 为介质服务器重复数据删除池配置存储服务器
- 关于 NetBackup 重复数据删除的磁盘池
- 配置用于重复数据删除的磁盘池
- 创建数据目录以实现 400 TB MSDP 支持
- 向 400 TB 的介质服务器重复数据删除池添加卷
- 配置介质服务器重复数据删除池存储单元
- 为 MSDP 客户端重复数据删除配置客户端属性
- 禁用客户端的 MSDP 客户端重复数据删除
- 关于 MSDP 压缩
- 关于 MSDP 加密
- MSDP 压缩和加密设置表
- 为 MSDP 备份配置加密
- 为 MSDP 优化复制配置加密
- 关于 MSDP 的滚动数据转换机制
- 滚动数据转换模式
- MSDP 加密行为和兼容性
- 为 MSDP 配置优化合成备份
- 关于用于 MSDP 重复和复制的单独网络路径
- 为 MSDP 复制配置单独的网络路径
- 关于同一域内的 MSDP 优化复制
- 在同一 NetBackup 域内配置 MSDP 优化复制
- 关于到其他域的 MSDP 复制
- 配置以不同 NetBackup 域为目标的 MSDP 复制
- 关于配置 MSDP 优化复制和复制带宽
- 关于 MSDP 云优化复制和主从复制的性能优化
- 关于存储生命周期策略
- 关于自动映像复制所需的存储生命周期策略
- 创建存储生命周期策略
- 关于 MSDP 备份策略配置
- 创建备份策略
- “弹性网络”属性
- 指定弹性连接
- 添加 MSDP 负载平衡服务器
- 关于 NetBackup 客户端上的可变长度重复数据删除
- 关于 MSDP pd.conf 配置文件
- 编辑 MSDP pd.conf 文件
- 关于 MSDP contentrouter.cfg 文件
- 关于保存 MSDP 存储服务器配置
- 保存 MSDP 存储服务器配置
- 编辑 MSDP 存储服务器配置文件
- 设置 MSDP 存储服务器配置
- 关于 MSDP 主机配置文件
- 删除 MSDP 主机配置文件
- 重置 MSDP 注册表
- 关于保护 MSDP 目录库
- 更改 MSDP 卷影目录库路径
- 更改 MSDP 卷影目录库日程表
- 更改 MSDP 目录卷影副本数
- 配置 MSDP 目录库备份
- 更新 MSDP 目录库备份策略
- 关于 MSDP FIPS 遵从性
- 配置 NetBackup 客户端重复数据删除以支持 MSDP 的多个接口
- 关于 MSDP 多域支持
- 关于 MSDP 应用程序用户支持
- 关于 MSDP 多域 VLAN 支持
- 关于 NetBackup WORM 存储对不可变和不可删除数据的支持
- MSDP 云支持
- 关于 MSDP 云支持
- 在 NetBackup Web UI 中创建介质服务器重复数据删除池 (MSDP) 存储服务器
- 创建云存储单元
- 更新云 LSU 的云凭据
- 更新云 LSU 的加密配置
- 删除云 LSU
- 使用云 LSU 将数据备份到云
- 使用云 LSU 将数据复制到云
- 将 AIR 配置为使用云 LSU
- 关于向后兼容性支持
- 关于 cloud.json、contentrouter.cfg 和 spa.cfg 中的配置项
- 云空间回收
- 关于为实现云支持而进行的工具更新
- 关于云 LSU 的灾难恢复
- 关于使用 MSDP 云的映像共享
- 关于从 Microsoft Azure 存档中的备份还原
- 关于 MSDP 云不可篡改的 (WORM) 存储支持
- 关于 MSDP 云管理工具
- 关于对 AWS S3 的不可篡改对象支持
- 关于对 AWS S3 兼容平台的不可篡改对象支持
- 为 S3 兼容平台创建云不可篡改存储单元
- 使用 msdpcldutil 工具管理 HCP for Cloud Scale
- 使用 msdpcldutil 工具管理 Cloudian HyperStore
- 使用 msdpcldutil 工具管理 Seagate Lyve Cloud
- 使用 msdpcldutil 工具管理 Veritas Access Cloud
- 使用 msdpcldutil 工具管理 Wasabi 云存储
- 使用 msdpcldutil 工具管理 Scality RING – LAN
- 使用 msdpcldutil 工具管理 EMC-ECS
- 使用 msdpcldutil 工具管理 Quantum ActiveScale
- 使用 msdpcldutil 工具管理 NetApp StorageGRID Webscale – WAN
- 关于对 Azure blob 存储的不可篡改存储支持
- 关于在群集环境中使用云不可篡改的存储
- 在不使用 msdpcldutil 的情况下创建存储桶时对错误进行故障排除
- 使用治理模式删除不可篡改映像
- 在 Web UI 中刷新不可篡改的云卷保留范围值
- 永久删除 S3 对象
- 关于云中对象存储的即时访问
- MSDP S3 接口
- 监视重复数据删除活动
- 管理重复数据删除
- 恢复 MSDP
- 替换 MSDP 主机
- 卸载 MSDP
- 重复数据删除体系结构
- 配置和使用通用共享
- 配置隔离恢复环境 (IRE)
- 使用 NetBackup Deduplication Shell
- 关于 NetBackup Deduplication Shell
- 从重复数据删除 shell 管理用户
- 从重复数据删除 shell 管理 VLAN 接口
- 管理 WORM 存储服务器上的保留策略
- 管理 WORM 存储服务器上具有保留锁定的映像
- 审核 WORM 保留更改
- 从重复数据删除 shell 管理证书
- 从重复数据删除 shell 管理 FIPS 模式
- 从重复数据删除 shell 加密备份
- 从重复数据删除 shell 调整 MSDP 配置
- 从重复数据删除 shell 设置 MSDP 日志级别
- 从重复数据删除 shell 管理 NetBackup 服务
- 从重复数据删除 shell 监控 NetBackup 服务并对其进行故障排除
- 故障排除
- 附录 A. 迁移到 MSDP 存储
- 附录 B. 从 Cloud Catalyst 迁移到 MSDP 直接云分层
- 附录 C. Encryption Crawler
- 索引
调整选项
要使“宽松”模式的运行速度更快,用户可以利用 CheckSysLoad、BatchSize 和 SleepSeconds 选项来调整“宽松”模式的行为和性能。
BatchSize 的数字越大且 SleepSeconds 的数字越小,“宽松”模式将会运行得越久。如果您关闭 CheckSysLoad,则在备份、还原、复制、主从复制、压缩或 CRQP 作业处于活动状态时,“宽松”模式保持运行。此类更改可以使“宽松”模式更加主动,但是其主动程度不及“主动”模式。这样的好处是对于备份、还原、复制和主从复制作业,调整后的“宽松”模式比“主动”模式对系统性能的影响要小。其影响甚至比最低级别 2 的“主动”模式还要小。代价就是它会变成半主动模式(尤其是当 CheckSysLoad 关闭时)。这可能会影响活动作业的系统性能,并使 CRC 检查、CRQP 处理或压缩的运行和完成时间更长。
“主动”模式有三个级别 (2-4)。级别越高,Encryption Crawler 越主动,其性能通常越好。这也意味着对备份、还原、复制、主从复制作业的系统性能影响会更大。
要使 Encryption Crawler 获得最佳性能,请根据每日系统负载使用级别 2-4,即“主动”模式。否则,请使用级别 1,即“宽松”模式。请注意,级别更高的“主动”模式不会为 Encryption Crawler 和活动作业提供更好的总体系统性能。这并不意味着“主动”模式的性能优于“宽松”模式。您可能需要监控 Encryption Crawler 的进度和活动作业的系统影响,才能找到最合适的选择。
您可以考虑在半天到多天的时间内在“主动”模式和“宽松”模式之间动态切换。根据每日系统负载和活动作业的情况进行更改。动态切换有助于发现哪种模式适用于您的环境。
“主动”模式会影响备份、还原、复制和主从复制作业的性能。调整后的“宽松”模式也会产生这种影响,但没有“主动”模式那么严重。为了减少系统影响,用户可以有选择地同时为部分 MSDP 分区开启 Encryption Crawler。
“主动”模式会影响备份、还原、复制和主从复制作业的性能。调整后的“宽松”模式也会产生这种影响,但没有“主动”模式那么严重。要减少系统影响,您可以有选择地禁用正在运行 Encryption Crawler 的 MSDP 分区的 DataStore 写入功能。可以使用 BYO 设置的 crcontrol --dswriteoff 命令完成此操作。对于 NetBackup Appliance,应通过 CLISH 执行该命令。否则,NetBackup Appliance 会在很短的时间后自动重置状态。
进程完成后,必须重置 DataStore 写入状态,以允许分区获取新的备份数据。
表:调整建议
操作 | 解释 |
|---|---|
在“宽松”模式下使用默认设置开启 Encryption Crawler。 |
Veritas 建议您在执行任何备份操作或开启 Encryption Crawler 之前等待指纹缓存加载完成。通过监控 Encryption Crawler 在启动时默认处于“宽松”模式。启动 Encryption Crawler 后,您可以在此模式下运行正常备份、复制和主从复制作业 24 小时到 48 小时。之后,可以使用 crcontrol --encconvertstate 命令检查 Encryption Crawler 进程的进度。 检查 Encryption Crawler 进程后,请查看以下内容:首先,检查“进度”项并确认 Encryption Crawler 进度。如果没有进度或未按预期速度进行,则需要进行更改以加快进程速度。使用“进度”项可推断 Encryption Crawler 预计需要多长时间。例如,如果 3.3% 的池在 24 小时内完成,则该过程可能需要大约 30 天才能完成。 如果速度比所需速度要慢,请按此进程中所示进行调整,以使 Encryption Crawler 加速。请注意,Encryption Crawler 将按从新到旧的反向顺序处理数据容器。在强制执行加密后但在开启 Encryption Crawler 之前,可能会备份新数据。如果发生这种情况,开始时新数据容器的“转换比”可能低于 99%。在进程处于活动状态时,“转换比”值会更高,因为较旧的数据容器可能拥有更多的未加密数据。在这种情况下,“转换比”、“转换的容器数”和“估计容器数”可以给出更多提示来确定这些数据容器的速度。监控“转换比”的变化可以指示 Encryption Crawler 处于活动状态时未加密数据的比例。 |
调整“宽松”模式以使运行速度更快。 |
您可以使用调整“宽松”模式中的信息来加快“宽松”模式。初始调整后,您可能需要偶尔检查活动作业的进度和系统影响。如果需要,可以在此进程期间的任意时间点进行进一步的调整。如果调整后的“宽松”模式对活动作业的系统性能产生负面影响,则可以考虑关闭某些 MSDP 分区的 Encryption Crawler。您可以按照为部分 MSDP 分区开启 Encryption Crawler 以减少系统影响中的建议,继续在其他分区运行此模式,以减少系统影响。您还可以考虑按照有选择地禁用 MSDP 分区的 DataStore 写入功能以减少系统影响中的建议,关闭某些正在运行 Encryption Crawler 的 MSDP 分区的 DataStore 写入权限。如果处理速度不符合预期,可以对您的环境使用“主动”模式。 |
开启“主动”模式。 |
您可以使用调整“主动”模式中的信息为 Encryption Crawler 提供最佳性能。Veritas 建议从最低级别 2 开始,然后逐渐增加到更高的级别。您可能需要偶尔检查活动作业的进度和系统影响。如果需要,可以在此进程期间的任意时间点进行进一步的调整。 |
寻找进程速度和系统影响之间达到最佳平衡的调整点。 |
Encryption Crawler 的速度越快,对所有活动作业的系统影响通常就越大。组合使用调整选项可能会使两者之间实现良好的平衡。 |