Veritas NetBackup™ Deduplication 指南

Last Published:
Product(s): NetBackup & Alta Data Protection (9.0)
  1. NetBackup Media Server Deduplication Option 简介
    1.  
      关于 NetBackup Deduplication Option
  2. 快速入门
    1.  
      关于客户端重复数据删除
    2.  
      关于介质服务器重复数据删除 (MSDP) 节点云层
  3. 规划部署
    1.  
      规划 MSDP 部署
    2.  
      NetBackup 命名约定
    3.  
      关于 MSDP 重复数据删除节点
    4.  
      关于 NetBackup 重复数据删除目标
    5.  
      关于 MSDP 存储容量
    6. 关于 MSDP 存储和连接要求
      1.  
        MSDP 的光纤通道和 iSCSI 比较
    7. 关于 NetBackup 介质服务器重复数据删除
      1.  
        关于 MSDP 存储服务器
      2.  
        关于 MSDP 负载平衡服务器
      3.  
        关于 MSDP 服务器要求
      4.  
        关于 MSDP 不支持的配置
    8. 关于 NetBackup Client Direct 重复数据删除
      1.  
        关于 MSDP 客户端重复数据删除要求和限制
    9. 关于 MSDP 远程办公客户端重复数据删除
      1.  
        关于 MSDP 远程客户端数据安全性
      2.  
        关于远程客户端备份预定
    10.  
      关于 NetBackup Deduplication Engine 凭据
    11.  
      关于 MSDP 的网络接口
    12.  
      关于 MSDP 端口用法
    13.  
      关于 MSDP 优化合成备份
    14.  
      关于 MSDP 和 SAN 客户端
    15.  
      关于 MSDP 优化复制和主从复制
    16. 关于 MSDP 性能
      1.  
        文件大小如何影响 MSDP 重复数据删除率
    17. 关于 MSDP 流处理程序
      1.  
        Oracle 流处理程序
      2.  
        Microsoft SQL Server 流处理程序
    18. MSDP 部署最佳做法
      1.  
        使用完全限定的域名
      2.  
        关于扩展 MSDP
      3.  
        将初始完全备份发送到存储服务器
      4.  
        逐渐增加 MSDP 作业数
      5.  
        逐渐引入 MSDP 负载平衡服务器
      6.  
        逐渐实现 MSDP 客户端重复数据删除
      7.  
        使用 MSDP 压缩和加密
      8.  
        关于 MSDP 的备份流的最佳数量
      9.  
        关于 MSDP 的存储单元组
      10.  
        关于保护 MSDP 数据
      11.  
        保存 MSDP 存储服务器配置
      12.  
        规划磁盘写入缓存
  4. 置备存储
    1.  
      关于置备 MSDP 存储
    2.  
      不要修改 MSDP 存储目录和文件
    3.  
      关于 NetBackup MSDP 的卷管理
  5. 重复数据删除的授权
    1.  
      关于 MSDP 许可证
    2.  
      授权 NetBackup MSDP
  6. 配置重复数据删除
    1.  
      配置 MSDP 服务器端重复数据删除
    2.  
      配置 MSDP 客户端重复数据删除
    3.  
      关于 MSDP 重复数据删除多线程代理
    4. 配置重复数据删除多线程代理行为
      1.  
        MSDP mtstrm.conf 文件参数
    5.  
      配置重复数据删除插件与多线程代理的交互
    6.  
      关于 MSDP 指纹识别
    7.  
      关于 MSDP 指纹缓存
    8. 配置 MSDP 指纹缓存行为
      1.  
        MSDP 指纹缓存行为选项
    9.  
      关于将远程客户端重复数据删除的 MSDP 指纹缓存设定为种子
    10.  
      在客户端上配置 MSDP 指纹缓存种子设定
    11. 在存储服务器上配置 MSDP 指纹缓存种子设定
      1.  
        NetBackup seedutil 选项
    12.  
      启用对 250 TB MSDP 的支持
    13. 关于使用 NetBackup KMS 服务的 MSDP 加密
      1.  
        升级 MSDP KMS
      2.  
        已为本地 LSU 启用 KMS 加密
    14.  
      关于使用外部 KMS 服务器的 MSDP 加密
    15. 为介质服务器重复数据删除池配置存储服务器
      1.  
        MSDP 存储路径属性
      2.  
        MSDP 网络接口属性
    16.  
      配置 PureDisk 重复数据删除池的存储服务器
    17.  
      关于 NetBackup 重复数据删除的磁盘池
    18. 配置用于重复数据删除的磁盘池
      1.  
        介质服务器重复数据删除池属性
    19.  
      为 250 TB MSDP 支持创建数据目录
    20.  
      向 250 TB 的介质服务器重复数据删除池添加卷
    21. 配置介质服务器重复数据删除池存储单元
      1.  
        介质服务器重复数据删除池存储单元属性
      2.  
        MSDP 存储单元建议
    22.  
      为 MSDP 客户端重复数据删除配置客户端属性
    23.  
      禁用客户端的 MSDP 客户端重复数据删除
    24.  
      关于 MSDP 压缩
    25.  
      关于 MSDP 加密
    26.  
      MSDP 压缩和加密设置表
    27.  
      为 MSDP 备份配置加密
    28.  
      为 MSDP 优化复制配置加密
    29.  
      关于 MSDP 的滚动数据转换机制
    30.  
      滚动数据转换模式
    31.  
      MSDP 加密行为和兼容性
    32.  
      为 MSDP 配置优化合成备份
    33.  
      关于用于 MSDP 重复和复制的单独网络路径
    34.  
      为 MSDP 复制配置单独的网络路径
    35. 关于同一域内的 MSDP 优化复制
      1. 关于同一域内 MSDP 优化复制的介质服务器
        1.  
          关于同一域内的 MSDP 推送复制
        2.  
          关于同一域内的 MSDP 提取复制
    36. 在同一 NetBackup 域内配置 MSDP 优化复制
      1. 配置 NetBackup 优化复制行为
        1.  
          使用命令行设置 NetBackup 配置选项
    37.  
      关于到其他域的 MSDP 复制
    38. 配置以不同 NetBackup 域为目标的 MSDP 复制
      1. 关于 NetBackup 自动映像复制
        1.  
          一对多自动映像复制模型
        2.  
          对自动映像复制进行级联的模型
        3.  
          关于复制的域关系
        4.  
          关于自动映像复制的复制拓扑结构
        5. 查看自动映像复制的复制拓扑结构
          1.  
            MSDP 复制的卷属性输出示例
      2.  
        关于自动映像复制的可信主服务器
      3.  
        关于添加可信主服务器要使用的证书
      4.  
        使用 NetBackup CA 签名(基于主机 ID)证书添加可信主服务器
      5.  
        使用外部 CA 签名证书添加可信主服务器
      6.  
        删除可信主服务器
      7.  
        启用 NetBackup 群集主服务器节点间身份验证
      8.  
        配置 NetBackup CA 和 NetBackup 基于主机 ID 的证书,以在源和目标 MSDP 存储服务器之间进行安全通信
      9.  
        配置外部 CA 以在源 MSDP 存储服务器和目标 MSDP 存储服务器之间进行安全通信
      10. 将 MSDP 复制的目标配置为远程域
        1.  
          MSDP 复制的目标选项
        2.  
          为 NetBackup Deduplication Engine 用户配置只能进行自动映像复制操作的权限
    39.  
      关于配置 MSDP 优化复制和复制带宽
    40.  
      关于 MSDP 云优化复制和主从复制的性能优化
    41.  
      关于存储生命周期策略
    42.  
      关于自动映像复制所需的存储生命周期策略
    43. 创建存储生命周期策略
      1.  
        “存储生命周期策略”对话框设置
    44.  
      关于 MSDP 备份策略配置
    45.  
      创建备份策略
    46. “弹性网络”属性
      1.  
        弹性连接资源使用
    47.  
      指定弹性连接
    48.  
      添加 MSDP 负载平衡服务器
    49.  
      关于 NetBackup 客户端上的可变长度重复数据删除
    50.  
      关于 MSDP pd.conf 配置文件
    51. 编辑 MSDP pd.conf 文件
      1.  
        MSDP pd.conf 文件参数
    52.  
      关于 MSDP contentrouter.cfg 文件
    53.  
      关于保存 MSDP 存储服务器配置
    54.  
      保存 MSDP 存储服务器配置
    55.  
      编辑 MSDP 存储服务器配置文件
    56.  
      设置 MSDP 存储服务器配置
    57.  
      关于 MSDP 主机配置文件
    58.  
      删除 MSDP 主机配置文件
    59.  
      重置 MSDP 注册表
    60. 关于保护 MSDP 目录库
      1.  
        关于 MSDP 卷影目录库
      2.  
        关于 MSDP 目录库备份策略
    61.  
      更改 MSDP 卷影目录库路径
    62.  
      更改 MSDP 卷影目录库日程表
    63.  
      更改 MSDP 目录卷影副本数
    64. 配置 MSDP 目录库备份
      1.  
        MSDP drcontrol 选项
    65.  
      更新 MSDP 目录库备份策略
    66.  
      关于 MSDP FIPS 遵从性
    67.  
      配置 NetBackup 客户端重复数据删除以支持 MSDP 的多个接口
    68.  
      关于 MSDP 多域支持
    69.  
      关于 MSDP 多域 VLAN 支持
    70. 关于 NetBackup WORM 存储对不可变和不可删除数据的支持
      1.  
        关于用于配置不可变和不可删除数据的 NetBackup 命令行选项
  7. 使用 NetBackup Cloud Catalyst 配置云的重复数据删除
    1. 使用 NetBackup Cloud Catalyst 将经过重复数据删除的数据上载到云
      1. 优化复制用于将数据从 MSDP 存储服务器复制到 Cloud Catalyst 存储服务器(首选用例)
        1.  
          将 MSDP 存储服务器扇入到单个 Cloud Catalyst 存储服务器
      2.  
        备份直接转到 Cloud Catalyst 存储服务器
    2.  
      Cloud Catalyst 要求和限制
    3.  
      将 Linux 介质服务器配置为 Cloud Catalyst 存储服务器
    4. 配置用于云的重复数据删除的 Cloud Catalyst 存储服务器
      1.  
        如何配置 NetBackup Cloud Catalyst Appliance
      2.  
        如何将 Linux 介质服务器配置为 Cloud Catalyst 存储服务器
      3.  
        将 Cloud Catalyst 存储服务器配置为 MSDP 存储服务器的重复数据删除的目标
      4.  
        使用在线证书状态协议 (OCSP) 验证证书
      5.  
        管理使用 IAM 角色或 CREDS_CAPS 凭据代理类型的 Cloud Catalyst 存储服务器
      6.  
        配置用于 NetBackup Cloud Catalyst 的存储生命周期策略
    5.  
      关于 Cloud Catalyst esfs.json 配置文件
    6.  
      关于 Cloud Catalyst 缓存
    7.  
      控制使用 Cloud Catalyst 时流向云的数据流量
    8.  
      配置 Cloud Catalyst 源控制或目标控制优化复制
    9.  
      将 Cloud Catalyst 存储服务器配置为优化复制的源
    10.  
      淘汰 Cloud Catalyst 云存储
    11.  
      NetBackup Cloud Catalyst 工作流程
    12.  
      Cloud Catalyst 的灾难恢复
  8. MSDP 云支持
    1. 关于 MSDP 云支持
      1.  
        配置的操作系统要求
      2.  
        限制
    2.  
      创建云存储单元
    3.  
      更新云 LSU 的云凭据
    4.  
      更新云 LSU 的加密配置
    5.  
      删除云 LSU
    6.  
      使用云 LSU 将数据备份到云
    7.  
      使用云 LSU 将数据复制到云
    8.  
      将 AIR 配置为使用云 LSU
    9.  
      关于向后兼容性支持
    10.  
      关于 cloud.json、contentrouter.cfg 和 spa.cfg 中的配置项
    11.  
      关于为实现云支持而进行的工具更新
    12.  
      关于云 LSU 的灾难恢复
    13.  
      关于使用 MSDP 云的映像共享
    14.  
      关于从 Microsoft Azure 存档中的备份还原
  9. 监视重复数据删除活动
    1.  
      监视 MSDP 重复数据删除率和压缩率
    2. 查看 MSDP 作业详细信息
      1.  
        MSDP 作业详细信息
    3.  
      关于 MSDP 存储容量和使用情况报告
    4.  
      关于 MSDP 容器文件
    5.  
      查看 MSDP 容器文件中的存储使用情况
    6.  
      查看 MSDP 磁盘报告
    7.  
      关于监视 MSDP 进程
    8.  
      对自动映像复制作业的报告
  10. 管理重复数据删除
    1. 管理 MSDP 服务器
      1.  
        查看 MSDP 存储服务器
      2.  
        确定 MSDP 存储服务器状态
      3.  
        查看 MSDP 存储服务器属性
      4.  
        设置 MSDP 存储服务器属性
      5.  
        更改 MSDP 存储服务器属性
      6.  
        清除 MSDP 存储服务器属性
      7.  
        关于更改 MSDP 存储服务器名称或存储路径
      8.  
        更改 MSDP 存储服务器名称或存储路径
      9.  
        删除 MSDP 负载平衡服务器
      10.  
        删除 MSDP 存储服务器
      11.  
        删除 MSDP 存储服务器配置
    2. 管理 NetBackup Deduplication Engine 凭据
      1.  
        确定具有重复数据删除凭据的介质服务器
      2.  
        添加 NetBackup Deduplication Engine 凭据
      3.  
        更改 NetBackup Deduplication Engine 凭据
      4.  
        从负载平衡服务器上删除凭据
    3. 管理介质服务器重复数据删除池
      1.  
        查看介质服务器重复数据删除池
      2.  
        确定介质服务器重复数据删除池状态
      3.  
        更改介质服务器重复数据删除池状态
      4.  
        查看介质服务器重复数据删除池属性
      5.  
        设置“介质服务器重复数据删除池”属性
      6. 更改介质服务器重复数据删除池属性
        1.  
          如何解决自动映像复制的卷更改
      7.  
        清除“介质服务器重复数据删除池”属性
      8.  
        确定 MSDP 磁盘卷状态
      9.  
        更改 MSDP 磁盘卷状态
      10.  
        清点 NetBackup 磁盘池
      11.  
        删除介质服务器重复数据删除池
    4.  
      删除备份映像
    5.  
      关于 MSDP 队列处理
    6.  
      手动处理 MSDP 事务队列
    7.  
      关于 MSDP 数据完整性检查
    8. 配置 MSDP 数据完整性检查行为
      1.  
        MSDP 数据完整性检查配置参数
    9.  
      关于管理 MSDP 存储读取性能
    10. 关于 MSDP 存储基址重置
      1.  
        MSDP 服务器端基址重置参数
    11.  
      关于 MSDP 数据删除过程
    12.  
      调整 MSDP 存储分区的大小
    13.  
      MSDP 还原的工作原理
    14.  
      配置 MSDP 直接还原到客户端
    15.  
      关于还原远程站点上的文件
    16.  
      关于从目标主服务器域上的备份进行还原
    17.  
      指定还原服务器
  11. 恢复 MSDP
    1.  
      关于恢复 MSDP 目录库
    2.  
      从卷影副本还原 MSDP 目录库
    3.  
      从 MSDP 存储服务器磁盘故障中恢复
    4.  
      从 MSDP 存储服务器故障中恢复
    5.  
      在执行 NetBackup 目录库恢复后恢复 MSDP 存储服务器
  12. 替换 MSDP 主机
    1.  
      替换 MSDP 存储服务器主机计算机
  13. 卸载 MSDP
    1.  
      关于卸载 MSDP
    2.  
      停用 MSDP
  14. 重复数据删除体系结构
    1.  
      MSDP 服务器组件
    2.  
      介质服务器重复数据删除备份进程
    3.  
      MSDP 客户端组件
    4.  
      MSDP 客户端重复数据删除备份过程
  15. 配置和使用通用共享
    1.  
      关于通用共享
    2.  
      为通用共享配置和使用 MSDP 自建 (BYO) 服务器
    3.  
      配置通用共享的 MSDP 自建 (BYO) 服务器前提条件和硬件要求
    4.  
      装入通过 NetBackup Web UI 创建的通用共享
    5.  
      为通用共享创建保护点
  16. 故障排除
    1. 关于统一日志记录
      1.  
        关于使用 vxlogview 命令查看统一日志
      2.  
        使用 vxlogview 查看统一日志示例
    2. 关于旧式日志记录
      1.  
        为 MSDP 创建 NetBackup 日志文件目录
    3.  
      NetBackup MSDP 日志文件
    4. 对 MSDP 安装问题进行故障排除
      1.  
        在 SUSE Linux 上进行 MSDP 安装失败
    5. 对 MSDP 配置问题进行故障排除
      1.  
        MSDP 存储服务器配置失败
      2.  
        MSDP 数据库系统错误 (220)
      3.  
        “找不到 MSDP 服务器”错误
      4.  
        MSDP 配置期间许可证信息失败
      5.  
        磁盘池向导不显示 MSDP 卷
    6. 对 MSDP 操作问题进行故障排除
      1.  
        验证 MSDP 服务器是否具有足够内存
      2.  
        MSDP 备份或复制作业失败
      3.  
        MSDP 客户端重复数据删除失败
      4.  
        卸载 MSDP 卷后,该卷的状态将更改为“关闭”
      5.  
        MSDP 错误、延迟响应和挂起
      6.  
        无法删除 MSDP 磁盘池
      7.  
        MSDP 介质打开错误 (83)
      8.  
        MSDP 介质写入错误 (84)
      9.  
        MSDP 未成功处理任何映像 (191)
      10.  
        MSDP 存储已满情况
      11.  
        MSDP 目录库备份故障排除
      12.  
        存储平台 Web 服务 (spws) 未启动
      13.  
        磁盘卷 API 或命令行选项不起作用
    7.  
      查看 MSDP 磁盘错误和事件
    8.  
      MSDP 事件代码和消息
    9. 对 Cloud Catalyst 问题进行故障排除
      1. Cloud Catalyst 日志
        1.  
          esfs_filesystem 中的错误消息
      2. 使用云存储服务器配置向导时遇到的问题
        1.  
          无法选择所需的介质服务器
        2.  
          无法选择“重复数据删除”选项
        3. 存储服务器创建状态错误
          1.  
            登录凭据或证书失败消息
          2.  
            无法添加凭据
      3. 磁盘池问题
        1.  
          由于超时问题导致的磁盘池创建问题
        2.  
          每个 Cloud Catalyst 存储服务器有一个磁盘池
      4. 云存储服务器配置期间出现的问题
        1.  
          “介质服务器”选项卡中没有可用于添加凭据的介质服务器
        2.  
          介质服务器添加凭据失败消息
      5.  
        状态码 191:未成功处理任何映像
      6.  
        由于本地缓存目录已满导致的介质写入错误 (84)
      7.  
        针对在 Cloud Catalyst 存储服务器关闭后重新启动 ESFS 进行故障排除
      8.  
        重新启动 vxesfsd 进程
      9.  
        重新启动 vxesfsd 时出现问题
      10.  
        无法使用版本低于 8.2 的介质服务器创建 CloudCatalyst
      11. Cloud Catalyst 疑难解答工具
        1.  
          esfs_cleanup.sh 脚本
        2.  
          esfs_check 一致性检查工具
        3.  
          setlsu_ioctl 工具
        4.  
          cred_ioctl 工具
    10.  
      无法获取管理员密码,因此无法使用运行 Windows 操作系统的 AWS EC2 实例
    11. 对多域问题进行故障排除
      1.  
        无法从其他域配置 OpenStorage 服务器
      2.  
        配置 OpenStorage 服务器时,MSDP 存储服务器已关闭
      3.  
        MSDP 服务器由多个 NetBackup 域使用时过载
  17. 附录 A. 迁移到 MSDP 存储
    1.  
      从 PureDisk 迁移到 NetBackup MSDP
    2.  
      从其他存储类型迁移到 MSDP
  18.  
    索引

MSDP 服务器组件

图:MSDP 服务器组件 是存储服务器组件的示意图。

图:MSDP 服务器组件

MSDP 服务器组件

表:NetBackup MSDP 服务器组件 介绍了 MSDP 服务器组件。

表:NetBackup MSDP 服务器组件

组件

描述

重复数据删除插件

重复数据删除插件可执行以下操作:

  • 从文件内容中分离文件的元数据。

  • 对内容进行重复数据删除(将文件分割成片段)。

  • 如果需要,压缩数据进行备份,并解压缩备份进行还原。

  • 如果需要,加密数据进行备份,并解密备份进行还原。

  • 如果需要,压缩数据进行复制和主从复制传输。

  • 如果需要,加密数据进行复制和主从复制传输。

该插件在重复数据删除存储服务器和负载平衡服务器上运行。

多线程代理

NetBackup 重复数据删除多线程代理使用多个线程进行异步网络 I/O 和 CPU 核心计算。该代理在存储服务器、负载平衡服务器以及对其自身数据进行重复数据删除的客户端上运行。

请参见关于 MSDP 重复数据删除多线程代理

NetBackup Deduplication Engine

NetBackup Deduplication Engine 是存储服务器核心组件之一。它提供许多重复数据删除功能,如表:NetBackup Deduplication Engine 组件和功能 中所述。

二进制文件的名称是 spoold,该名称是存储池后台驻留程序的简称;请勿将该名称与打印 spooler 后台驻留程序混淆。spoold 进程在 NetBackup 管理控制台中显示为 NetBackup Deduplication Engine。

NetBackup Deduplication Manager

重复数据删除管理器是存储服务器核心组件之一。重复数据删除管理器可维护配置,并控制内部进程、优化复制、安全和事件升级。

重复数据删除管理器二进制文件名为 spadspad 进程在 NetBackup 管理控制台中显示为 NetBackup Deduplication Manager。

代理插件

代理插件可管理与备份其自身数据的客户端之间的控制通信。它可与客户端上的 OpenStorage 代理服务器 (nbostpxy) 通信。

引用数据库

引用数据库可存储指向组成文件的每个数据段的引用。唯一指纹可标识数据段。引用数据库划分为多个小引用数据库文件,从而提高可伸缩性和性能。

引用数据库与 NetBackup 目录库是分开的。NetBackup 目录库可维护常规 NetBackup 备份映像信息。

表:NetBackup Deduplication Engine 组件和功能 介绍了 NetBackup Deduplication Engine 中的组件和功能。

表:NetBackup Deduplication Engine 组件和功能

组件

描述

连接和任务管理器

连接和任务管理器管理所有来自负载平衡服务器的连接和对自身数据进行重复数据删除的客户端。连接和任务管理器是一组执行以下操作的功能和线程:

  • 提供服务所有客户端的线程池。

  • 维护每个客户端连接的任务。

  • 基于操作管理 Deduplication Engine 的模式。操作为备份、还原、队列处理等等。

数据完整性检查

NetBackup Deduplication Engine 检查数据的完整性,并解决完整性问题。

请参见关于 MSDP 数据完整性检查

DataStore 管理器

DataStore 管理器管理所有的数据容器文件。DataStore 管理器是一组提供以下内容的功能和线程:

  • 将数据备份到 DataStore 的事务机制。

  • 从 DataStore 读取数据的机制。

  • 回收 DataStore 中空间的事务机制(即,压缩容器和删除容器)。

    容器 ID 是唯一的。每创建一个新的容器,DataStore 管理器将递增容器编号。容器中的数据从不重写,并且容器 ID 从不重复使用。

请参见关于 MSDP 容器文件

索引缓存管理器

索引缓存管理器管理指纹缓存。缓存提高了指纹查找速度。

请参见关于 MSDP 指纹缓存

队列处理

NetBackup Deduplication Engine 处理事务队列。

请参见关于 MSDP 队列处理

引用数据库引擎

引用数据库引擎存储指向数据段的引用(如读取或写入引用)。它每次操纵单个数据库文件。

引用数据库管理器

引用数据库管理器管理所有的容器引用。它提供用于操纵单个数据库文件的事务机制。