Veritas NetBackup™ Deduplication 指南

Last Published:
Product(s): NetBackup (8.1)
  1. 介绍 NetBackup Media Server Deduplication Option
    1.  
      关于 NetBackup Deduplication Optionpacteracontextmathced
    2.  
      NetBackup 8.1 的新增 MSDP 功能
  2. 规划部署
    1.  
      规划 MSDP 部署
    2.  
      NetBackup 命名约定
    3.  
      关于 MSDP 重复数据删除节点
    4.  
      关于 NetBackup 重复数据删除目标
    5.  
      关于 MSDP 存储容量
    6. 关于 MSDP 存储和连接要求
      1.  
        MSDP 的光纤通道和 iSCSI 比较
    7. 关于 NetBackup 介质服务器重复数据删除
      1.  
        关于 MSDP 存储服务器
      2.  
        关于 MSDP 负载平衡服务器
      3.  
        关于 MSDP 服务器要求
      4.  
        关于 MSDP 不支持的配置
    8. 关于 NetBackup Client Direct 重复数据删除
      1.  
        关于 MSDP 客户端重复数据删除要求和限制
    9. 关于 MSDP 远程办公客户端重复数据删除
      1.  
        关于 MSDP 远程客户端数据安全性
      2.  
        关于远程客户端备份预定
    10.  
      关于 NetBackup Deduplication Engine 凭据
    11.  
      关于 MSDP 的网络接口
    12.  
      关于 MSDP 端口用法
    13.  
      关于 MSDP 优化合成备份
    14.  
      关于 MSDP 和 SAN 客户端
    15.  
      关于 MSDP 优化复制和主从复制
    16. 关于 MSDP 性能
      1.  
        文件大小如何影响 MSDP 重复数据删除率
    17.  
      关于 MSDP 流处理程序
    18. MSDP 部署最佳做法
      1.  
        使用完全限定的域名
      2.  
        关于扩展 MSDP
      3.  
        将初始完全备份发送到存储服务器
      4.  
        逐渐增加 MSDP 作业数
      5.  
        逐渐引入 MSDP 负载平衡服务器
      6.  
        逐渐实现 MSDP 客户端重复数据删除
      7.  
        使用 MSDP 压缩和加密
      8.  
        关于 MSDP 的备份流的最佳数量
      9.  
        关于 MSDP 的存储单元组
      10.  
        关于保护 MSDP 数据
      11.  
        保存 MSDP 存储服务器配置
      12.  
        规划磁盘写入缓存
  3. 置备存储
    1.  
      关于置备 MSDP 存储
    2.  
      不要修改 MSDP 存储目录和文件
    3.  
      关于添加更多 MSDP 存储
    4.  
      关于 NetBackup MSDP 的卷管理
  4. 重复数据删除的授权
    1.  
      关于 MSDP 许可证
    2.  
      授权 NetBackup MSDP
  5. 配置重复数据删除
    1.  
      配置 MSDP 服务器端重复数据删除
    2.  
      配置 MSDP 客户端重复数据删除
    3.  
      关于 MSDP 重复数据删除多线程代理
    4. 配置重复数据删除多线程代理行为
      1.  
        MSDP mtstrm.conf 文件参数
    5.  
      配置重复数据删除插件与多线程代理的交互
    6.  
      关于 MSDP 指纹识别
    7.  
      关于 MSDP 指纹缓存
    8. 配置 MSDP 指纹缓存行为
      1.  
        MSDP 指纹缓存行为选项
    9.  
      关于将远程客户端重复数据删除的 MSDP 指纹缓存设定为种子
    10.  
      在客户端上配置 MSDP 指纹缓存种子设定
    11. 在存储服务器上配置 MSDP 指纹缓存种子设定
      1.  
        NetBackup seedutil 选项
    12.  
      启用对 96 TB MSDP 的支持
    13. 为介质服务器重复数据删除池配置存储服务器
      1.  
        MSDP 存储路径属性
      2.  
        MSDP 网络接口属性
    14.  
      配置 PureDisk 重复数据删除池的存储服务器
    15.  
      关于 NetBackup 重复数据删除的磁盘池
    16. 配置用于重复数据删除的磁盘池
      1.  
        介质服务器重复数据删除池属性
    17.  
      为 96 TB MSDP 支持创建数据目录
    18.  
      向 96 TB 的介质服务器重复数据删除池添加卷
    19. 配置介质服务器重复数据删除池存储单元
      1.  
        介质服务器重复数据删除池存储单元属性
      2.  
        MSDP 存储单元建议
    20.  
      为 MSDP 客户端重复数据删除配置客户端属性
    21.  
      禁用客户端的 MSDP 客户端重复数据删除
    22.  
      关于 MSDP 压缩
    23.  
      关于 MSDP 加密
    24.  
      MSDP 压缩和加密设置表
    25.  
      为 MSDP 备份配置加密
    26.  
      为 MSDP 优化复制配置加密
    27.  
      关于 MSDP 的滚动数据转换机制
    28.  
      滚动数据转换模式
    29.  
      MSDP 加密行为和兼容性
    30.  
      为 MSDP 配置优化合成备份
    31.  
      关于用于 MSDP 重复和复制的单独网络路径
    32.  
      为 MSDP 复制配置单独的网络路径
    33. 关于同一域内的 MSDP 优化复制
      1. 关于同一域内 MSDP 优化复制的介质服务器
        1.  
          关于同一域内的 MSDP 推送复制
        2.  
          关于同一域内的 MSDP 提取复制
    34. 在同一 NetBackup 域内配置 MSDP 优化复制
      1. 配置 NetBackup 优化复制行为
        1.  
          使用命令行设置 NetBackup 配置选项
    35.  
      关于到其他域的 MSDP 复制
    36. 配置以不同 NetBackup 域为目标的 MSDP 复制
      1. 关于 NetBackup 自动映像复制
        1.  
          一对多自动映像复制模型
        2.  
          对自动映像复制进行级联的模型
        3.  
          关于复制的域关系
        4.  
          关于自动映像复制的复制拓扑结构
        5. 查看自动映像复制的复制拓扑结构
          1.  
            MSDP 复制的卷属性输出示例
      2.  
        关于自动映像复制的可信主服务器
      3.  
        添加可信的主服务器
      4.  
        删除可信主服务器
      5.  
        启用 NetBackup 群集主服务器节点间身份验证
      6. 将 MSDP 复制的目标配置为远程域
        1.  
          MSDP 复制的目标选项
    37.  
      关于配置 MSDP 优化复制和复制带宽
    38.  
      关于存储生命周期策略
    39.  
      关于自动映像复制所需的存储生命周期策略
    40. 创建存储生命周期策略
      1.  
        “存储生命周期策略”对话框设置
    41.  
      关于 MSDP 备份策略配置
    42.  
      创建备份策略
    43. “弹性网络”属性
      1.  
        弹性连接资源使用
    44.  
      指定弹性连接
    45.  
      添加 MSDP 负载平衡服务器
    46.  
      关于 MSDP pd.conf 配置文件
    47. 编辑 MSDP pd.conf 文件
      1.  
        MSDP pd.conf 文件参数
    48.  
      关于 MSDP contentrouter.cfg 文件
    49.  
      关于保存 MSDP 存储服务器配置
    50.  
      保存 MSDP 存储服务器配置
    51.  
      编辑 MSDP 存储服务器配置文件
    52.  
      设置 MSDP 存储服务器配置
    53.  
      关于 MSDP 主机配置文件pacteracontextmathced
    54.  
      删除 MSDP 主机配置文件
    55.  
      重置 MSDP 注册表
    56. 关于保护 MSDP 目录库
      1.  
        关于 MSDP 卷影目录库
      2.  
        关于 MSDP 目录库备份策略
    57.  
      更改 MSDP 卷影目录库路径
    58.  
      更改 MSDP 卷影目录库日程表
    59.  
      更改 MSDP 目录卷影副本数
    60. 配置 MSDP 目录库备份
      1.  
        MSDP drcontrol 选项
    61.  
      更新 MSDP 目录库备份策略
  6. 使用 NetBackup CloudCatalyst 配置云的重复数据删除
    1. 使用 NetBackup CloudCatalyst 将经过重复数据删除的数据上载到云
      1.  
        在 MSDP 存储服务器上对数据进行重复数据删除并稍后将其复制到 CloudCatalyst 存储服务器
      2.  
        将 MSDP 存储服务器扇入到单个 CloudCatalyst 存储服务器
      3.  
        在 CloudCatalyst 存储服务器上对数据进行重复数据删除
    2.  
      CloudCatalyst 要求和限制
    3.  
      将 Linux 介质服务器配置为 CloudCatalyst 存储服务器
    4. 配置用于云的重复数据删除的 CloudCatalyst 存储服务器
      1.  
        配置 NetBackup CloudCatalyst Appliance
      2.  
        将 Linux 介质服务器配置为 CloudCatalyst 存储服务器
      3.  
        将 CloudCatalyst 存储服务器配置为 MSDP 存储服务器的重复数据删除的目标
      4.  
        为 NetBackup CloudCatalyst 配置存储生命周期策略
    5.  
      关于 CloudCatalyst esfs.json 配置文件
    6.  
      关于 CloudCatalyst 缓存
    7.  
      控制使用 CloudCatalyst 时流向云的数据流量
    8.  
      配置 CloudCatalyst 推送或提取优化复制
    9.  
      淘汰 CloudCatalyst 云存储
    10.  
      NetBackup CloudCatalyst 工作流程
    11.  
      CloudCatalyst 的灾难恢复
  7. 监视重复数据删除活动
    1.  
      监视 MSDP 重复数据删除率
    2. 查看 MSDP 作业详细信息
      1.  
        MSDP 作业详细信息
    3.  
      关于 MSDP 存储容量和使用情况报告
    4.  
      关于 MSDP 容器文件
    5.  
      查看 MSDP 容器文件中的存储使用情况
    6.  
      查看 MSDP 磁盘报告
    7.  
      关于监视 MSDP 进程
    8.  
      对自动映像复制作业的报告
  8. 管理重复数据删除
    1. 管理 MSDP 服务器
      1.  
        查看 MSDP 存储服务器
      2.  
        确定 MSDP 存储服务器状态
      3.  
        查看 MSDP 存储服务器属性
      4.  
        设置 MSDP 存储服务器属性
      5.  
        更改 MSDP 存储服务器属性
      6.  
        清除 MSDP 存储服务器属性
      7.  
        关于更改 MSDP 存储服务器名称或存储路径
      8.  
        更改 MSDP 存储服务器名称或存储路径
      9.  
        删除 MSDP 负载平衡服务器
      10.  
        删除 MSDP 存储服务器
      11.  
        删除 MSDP 存储服务器配置
    2. 管理 NetBackup Deduplication Engine 凭据
      1.  
        确定具有重复数据删除凭据的介质服务器
      2.  
        添加 NetBackup Deduplication Engine 凭据
      3.  
        更改 NetBackup Deduplication Engine 凭据
      4.  
        从负载平衡服务器上删除凭据
    3. 管理介质服务器重复数据删除池
      1.  
        查看介质服务器重复数据删除池
      2.  
        确定介质服务器重复数据删除池状态
      3.  
        更改介质服务器重复数据删除池状态
      4.  
        查看介质服务器重复数据删除池属性
      5.  
        设置“介质服务器重复数据删除池”属性
      6. 更改介质服务器重复数据删除池属性
        1.  
          如何解决自动映像复制的卷更改
      7.  
        清除“介质服务器重复数据删除池”属性
      8.  
        确定 MSDP 磁盘卷状态
      9.  
        更改 MSDP 磁盘卷状态
      10.  
        清点 NetBackup 磁盘池
      11.  
        删除介质服务器重复数据删除池
    4.  
      删除备份映像
    5.  
      关于 MSDP 队列处理
    6.  
      手动处理 MSDP 事务队列
    7.  
      关于 MSDP 数据完整性检查
    8. 配置 MSDP 数据完整性检查行为
      1.  
        MSDP 数据完整性检查配置参数
    9.  
      关于管理 MSDP 存储读取性能
    10. 关于 MSDP 存储基址重置
      1.  
        MSDP 服务器端基址重置参数
    11.  
      关于 MSDP 数据删除过程
    12.  
      调整 MSDP 存储分区的大小
    13.  
      MSDP 还原的工作原理
    14.  
      配置 MSDP 直接还原到客户端
    15.  
      关于还原远程站点上的文件
    16.  
      关于从目标主服务器域上的备份进行还原
    17.  
      指定还原服务器
  9. 恢复 MSDP
    1.  
      关于恢复 MSDP 目录库
    2.  
      从卷影副本还原 MSDP 目录库
    3.  
      从 MSDP 存储服务器磁盘故障中恢复
    4.  
      从 MSDP 存储服务器故障中恢复
    5.  
      在执行 NetBackup 目录库恢复后恢复 MSDP 存储服务器
  10. 替换 MSDP 主机
    1.  
      替换 MSDP 存储服务器主机计算机
  11. 卸载 MSDP
    1.  
      关于卸载 MSDP
    2.  
      停用 MSDP
  12. 重复数据删除体系结构
    1.  
      MSDP 服务器组件
    2.  
      介质服务器重复数据删除备份进程
    3.  
      MSDP 客户端组件
    4.  
      MSDP 客户端重复数据删除备份过程
  13. 故障排除
    1. 关于统一日志记录
      1.  
        关于使用 vxlogview 命令查看统一日志
      2.  
        使用 vxlogview 查看统一日志示例
    2. 关于旧式日志记录
      1.  
        为 MSDP 创建 NetBackup 日志文件目录
    3.  
      NetBackup MSDP 日志文件
    4. 对 MSDP 安装问题进行故障排除
      1.  
        在 SUSE Linux 上进行 MSDP 安装失败
    5. 对 MSDP 配置问题进行故障排除
      1.  
        MSDP 存储服务器配置失败
      2.  
        MSDP 数据库系统错误 (220)
      3.  
        “找不到 MSDP 服务器”错误
      4.  
        MSDP 配置期间许可证信息失败
      5.  
        磁盘池向导不显示 MSDP 卷
    6. 对 MSDP 操作问题进行故障排除
      1.  
        验证 MSDP 服务器是否具有足够内存
      2.  
        MSDP 备份或复制作业失败
      3.  
        MSDP 客户端重复数据删除失败
      4.  
        卸载 MSDP 卷后，该卷的状态将更改为“关闭”
      5.  
        MSDP 错误、延迟响应和挂起
      6.  
        无法删除 MSDP 磁盘池pacteracontextmathced
      7.  
        MSDP 介质打开错误 (83)
      8.  
        MSDP 介质写入错误 (84)
      9.  
        MSDP 未成功处理任何映像 (191)
      10.  
        MSDP 存储已满情况
      11.  
        MSDP 目录库备份故障排除
    7.  
      查看 MSDP 磁盘错误和事件
    8.  
      MSDP 事件代码和消息
    9. CloudCatalyst 问题故障排除
      1. CloudCatalyst 日志
        1.  
          esfs_storage 中的错误消息
        2.  
          esfs_filesystem 中的错误消息
      2. 使用云存储服务器配置向导时遇到的问题
        1.  
          无法选择所需的介质服务器
        2.  
          无法选择“重复数据删除”选项
        3. 存储服务器创建状态错误
          1.  
            登录凭据或证书失败消息
          2.  
            无法添加凭据
      3. 磁盘池问题
        1.  
          由于超时问题导致的磁盘池创建问题
        2.  
          每个 CloudCatalyst 存储服务器有一个磁盘池
      4. 云存储服务器配置期间出现的问题
        1.  
          “介质服务器”选项卡中没有可用于添加凭据的介质服务器
        2.  
          介质服务器添加凭据失败消息
      5.  
        状态码 191：未成功处理任何映像
      6.  
        由于本地缓存目录已满导致的介质写入错误 (84)
      7.  
        重新启动 vxesfsd 进程
      8.  
        重新启动 vxesfsd 时出现问题
      9. CloudCatalyst 疑难解答工具
        1.  
          esfs_cleanup.sh 脚本
        2.  
          esfs_check 一致性检查工具
        3.  
          setlsu_ioctl 工具
  14. 附录 A. 迁移到 MSDP 存储
    1.  
      从 PureDisk 迁移到 NetBackup MSDP
    2.  
      从其他存储类型迁移到 MSDP

NetBackup CloudCatalyst 工作流程

图：CloudCatalyst 存储服务器上的工作流程 显示了在 CloudCatalyst 存储服务器上将数据上载到云的工作流程。

图：CloudCatalyst 存储服务器上的工作流程

CloudCatalyst 存储服务器上的工作流程

请注意，一个 CloudCatalyst 存储服务器只能写入一个云提供程序及该云提供程序内的一个桶。

用户空间文件系统 (FUSE)

用户空间文件系统 (FUSE) 将数据从 MSDP 转发到文件系统数据库 (FSDB)。

文件系统数据库 (FSDB)

文件系统数据库 (FSDB) 跟踪并存储有关写入 NetBackup 可扩展存储文件系统 (ESFS) 的所有文件的元数据。

NetBackup 可扩展存储文件系统 (ESFS)

NetBackup CloudCatalyst 使用 NetBackup 可扩展存储文件系统服务 (vxesfsd) 及其子组件移动并管理本地缓存目录和云中的文件。

ESFS 使用后台驻留程序在其数据库中执行以下功能：

  • Veritas NetBackup 可扩展存储文件系统服务后台驻留程序 (vxesfsd)：这是主文件系统后台驻留程序。它负责将数据写入 MSDP 缓存文件。

  • Veritas NetBackup 可扩展存储代理 (vxesp) 后台驻留程序：这些后台驻留程序负责与云进行交互。在常规操作下，始终有两个 vxesp 进程，分别为主进程和工作进程。

    vxesp 后台驻留程序生成以下日志：/usr/openv/netbackup/logs/esfs_storage

vxesfsd 包括三个子组件，可作为 ESFS 的一部分执行各种任务：

  • 文件系统组件：与 ESFS 数据库交互。

  • 监视器组件：监视器组件将检查待上载文件的文件队列，并检查本地缓存目录以用于逐出缓存和其他活动。

  • 存储管理器组件：通知 vxesp 进程何时执行操作，并管理同步（从云下载）、异步（上载到云和在云中删除）和共享内存以及其他活动。

在 /usr/openv/netbackup/logs/ 中，vxesfsd 后台驻留程序生成以下日志：

esfs_filesystem

记录 FUSE 操作。

esfs_storagemanager

记录 ESFS 存储管理器与 vxesp 之间的交互。

esfs_monitor

记录作业状态更新和定期任务，例如，缓存逐出和 FSDB 备份。

esfs_database

记录特定于 ESFS 数据库的 FSDB 操作。

MSDP 缓存文件

作为云存储服务器配置向导的一部分，管理员将配置本地缓存目录 (local_cache_dir)。该目录必须位于 Linux 文件系统或（对于设备）VxFS 文件系统上。

然后，该目录一分为二：

  • 缓存目录：local_cache_dir/cache/userdata

    ESFS 写出该位置中的数据和元数据。此目录直接映射到存储目录 (local_cache_dir/storage)。此介质服务器上不存在每个文件的两个副本。

  • 存储目录：local_cache_dir/storage

    此路径是 ESFS 文件系统的装入点。MSDP 称之为存储目录。

NetBackup 定期在缓存目录中执行数据逐出任务，为新备份创建空间。如有必要，管理员可以更改执行数据逐出的时间或频率。例如，默认情况下，如果文件已成功上载到云，但在 30 天内未被访问，则会从缓存目录中将其删除。这些选项在 esfs.json 文件中配置。

请参见关于 CloudCatalyst esfs.json 配置文件。

备份工作流程

图：CloudCatalyst 存储服务器的备份数据工作流程

CloudCatalyst 存储服务器的备份数据工作流程
优化复制工作流程

图：以 CloudCatalyst 存储服务器为目标的优化复制工作流程

以 CloudCatalyst 存储服务器为目标的优化复制工作流程