Guide de déduplication NetBackup™
- Introduction à NetBackup Media Server Deduplication Option
- Planification de votre déploiement
- À propos des conditions requises en matière de stockage et de connectivité de MSDP
- À propos de la déduplication de serveur de médias NetBackup
- À propos de la déduplication directe du client NetBackup
- A propos de la déduplication client de filiale MSDP
- A propos des gestionnaires de flux de MSDP
- Pratiques d'excellence de déploiement MSDP
- Provisionnement du stockage
- Configuration de la fonction de déduplication
- A propos de l'agent de déduplication à plusieurs threads MSDP
- A propos des empreintes MSDP
- Activer la prise en charge d'un MSDP de 400 To
- Configuration d'un serveur de stockage pour un pool de déduplication de serveur de médias
- À propos des pools de disques pour la déduplication NetBackup
- Configuration d'une unité de stockage d'un pool de déduplication de serveur de médias
- Configuration des attributs client pour la déduplication côté client du MSDP
- À propos du chiffrement MSDP
- À propos du chiffrement MSDP à l'aide du service NetBackup Key Management Server
- À propos d'un chemin d'accès de réseau distinct pour la duplication et la réplication MSDP
- À propos de la duplication optimisée MSDP au sein du même domaine
- Configuration de la réplication MSDP sur un autre domaine NetBackup
- À propos d'Auto Image Replication NetBackup
- Configuration d'une cible pour la réplication de MSDP vers un domaine distant
- À propos des politiques de cycle de vie du stockage
- Propriétés Réseau résilient
- À propos de la déduplication de longueur variable sur les clients NetBackup
- A propos du fichier de configuration pd.conf de MSDP
- A propos de l'enregistrement de la configuration de serveur de stockage MSDP
- Au sujet de la protection du catalogue MSDP
- À propos de la prise en charge du stockage WORM NetBackup pour les données immuables et ineffaçables
- Exécution des services MSDP avec l'utilisateur non-racine
- Exécution des commandes MSDP avec l'utilisateur non-racine
- Groupe de volumes MSDP (MVG)
- À propos du groupe de volumes MSDP
- Configuration du groupe de volumes MSDP
- Prise en charge du cloud MSDP
- A propos de la prise en charge du cloud MSDP
- Récupération d'espace cloud
- A propos de la reprise après incident pour la LSU cloud
- À propos du partage d'images à l'aide du cloud MSDP
- Conversion de l'image de la machine virtuelle en VHD dans Azure
- À propos de la prise en charge du stockage immuable (WORM) en cloud MSDP
- À propos de la prise en charge des objets immuables pour AWS S3
- À propos de la prise en charge du stockage immuable au niveau objet pour Google Cloud Storage
- À propos de la prise en charge d'AWS IAM Role Anywhere
- À propos de la prise en charge du principal de service Azure
- À propos de la prise en charge d'AWS Snowball Edge par NetBackup
- Configuration de NetBackup pour AWS Snowball Edge
- Reconfigurer NetBackup pour fonctionner avec S3
- À propos de la sauvegarde directe dans le cloud
- Interface S3 pour MSDP
- Configuration de l'interface S3 pour MSDP sur un serveur BYO MSDP
- Gestion des identités et des accès (IAM) pour l'interface S3 pour MSDP
- API S3 pour l'interface S3 pour MSDP
- API S3 sur les compartiments
- API S3 sur les objets
- API S3 sur les compartiments
- Reprise après incident dans l'interface S3 pour MSDP
- Surveillance de l'activité de déduplication
- Affichage des détails du travail MSDP
- Gestion de la fonction de déduplication
- Gestion des serveurs MSDP
- Gestion des informations d'authentification du moteur de déduplication NetBackup
- Gestion des pools de déduplication de serveur de médias
- Modification des propriétés d'un pool de déduplication de serveur de médias
- A propos de la vérification d'intégrité des données de MSDP
- A propos du changement de base du stockage MSDP
- Gestion des serveurs MSDP
- Récupération MSDP
- Remplacement des hôtes MSDP
- Désinstallation MSDP
- Architecture de déduplication
- Configuration et gestion de partages universels
- Présentation des partages universels
- Conditions préalables à la configuration de partages universels
- Conditions préalables et configuration matérielle requise pour configurer des partages universels sur un serveur BYO
- Configuration de l'authentification utilisateur pour un partage universel
- Gestion des partages universels
- Créer un partage universel
- Créer un partage universel
- Restauration de données à l'aide de partages universels
- Fonctions avancées des partages universels
- Orientation des données de partage universel vers un magasin d'objets
- Accélérateur de partage universel pour la déduplication de données
- Configuration d'un accélérateur de partage universel
- À propos du quota de l'accélérateur de partage universel
- Chargement des données de sauvegarde sur un partage universel avec le mode de réception
- Évolutivité des partages universels
- Gestion des services de partage universel
- Résolution des problèmes liés aux partages universels
- Configuration d'un environnement de récupération isolé (IRE)
- Configuration d'un environnement de récupération isolé (IRE) à l'aide de l'interface utilisateur Web
- Configuration d'un environnement de récupération isolé (IRE) à l'aide de la ligne de commande
- Utilisation de NetBackup Deduplication Shell
- Gestion des utilisateurs à partir du shell de déduplication
- À propos de la sauvegarde externe de catalogue MSDP
- Gestion des certificats à partir du shell de déduplication
- Gestion des services NetBackup à partir du shell de déduplication
- Surveillance et dépannage des services NetBackup à partir du shell de déduplication
- Gestion du service S3 à partir du shell de déduplication
- Dépannage
- À propos de la consignation unifiée
- À propos de la consignation héritée
- Résolution des problèmes de configuration MSDP
- Résolution des problèmes d'exploitation de MSDP
- Résolution des problèmes liés à plusieurs domaines
- Annexe A. Migration vers le stockage MSDP
- Annexe B. Migration de Cloud Catalyst vers les niveaux cloud directs MSDP
- À propos de la migration directe de Cloud Catalyst vers les niveaux de cloud directs MSDP
- Annexe C. Robot de chiffrement
À propos de l'échantillonnage et du cache prédictif
MSDP utilise la mémoire disponible configurée dans MaxCacheSize pour mettre en cache les signatures, afin d'assurer une recherche efficace en vue de la déduplication. Un nouveau schéma de données de recherche de cache de signatures introduit par NetBackup version 10.1 réduit l'utilisation de la mémoire. Il divise le cache de mémoire existant en deux composants, le cache d'échantillonnage (cache S) et le cache prédictif (cache P). Le cache S comporte un certain pourcentage des signatures de chaque sauvegarde et sert à rechercher des données semblables à partir des échantillons des sauvegardes précédentes en vue de la déduplication. Le cache P met en cache les signatures qui seront le plus probablement utilisées dans un avenir immédiat pour la recherche en vue de la déduplication.
Au début d'un travail, une petite partie des signatures de la dernière sauvegarde de ce travail est chargée dans le cache P comme point de départ. La recherche de signatures se fait dans le cache P pour trouver des doublons et les recherches sans résultats sont réexécutées à partir des échantillons du cache S pour tenter de trouver des correspondances avec les données de sauvegarde précédentes. Si une correspondance est trouvée, une partie des signatures de sauvegarde correspondantes est chargée dans le cache P en vue de la déduplication.
La méthode de recherche de signatures dans les caches S et P est activée pour les volumes de stockage locaux et cloud déployés dans des clusters MSDP non BYO, tels que Flex, Flex Worm, Flex Scale, NetBackup Appliance, AKS et EKS. Cette méthode est également activée pour les volumes exclusivement cloud pour les plates-formes BYO MSDP. Pour les plates-formes prenant en charge les volumes exclusivement cloud, le volume local utilise la méthode initiale de recherche dans le cache. Vous trouverez les paramètres de configuration des caches S et P dans la section Cache du fichier de configuration contentrouter.cfg
.
À partir de NetBackup 10.2, les méthodes de recherche de signatures dans les caches S et P pour le stockage local sont utilisées avec la nouvelle configuration pour Flex, Flex WORM et l'appliance NetBackup. La mise à niveau ne modifie pas la méthode de recherche de signatures dans les caches S et P.
Valeurs par défaut pour les caches S et P :
Configuration | Valeur par défaut |
---|---|
MaxCacheSize | 512 Mio |
MaxPredictiveCacheSize | 40 % |
MaxSamplingCacheSize | 20 % |
EnableLocalPredictiveSamplingCache dans | true |
EnableLocalPredictiveSamplingCache dans | true |
Pour les systèmes qui utilisent le cache P/S, le volume local et les volumes cloud partagent les mêmes taille de cache S et P, et la mémoire globale est limitée par UsableMemoryLimit.
La taille du cache S est déterminée par la capacité du Back end MSDP ou le nombre de signatures à partir des données du Back end. En supposant que la taille moyenne du segment soit de 32 Ko, la taille du cache S est d'environ 100 Mo par To de capacité sur le Back end. La taille du cache P est déterminée par le nombre de travaux simultanés et la localité des données, ou bien par l'ensemble de travail des données entrantes. Avec un ensemble de travail de 250 Mo par flux (environ 5 millions de signatures). Par exemple, 100 flux simultanés nécessitent une mémoire minimale de 25 Go (100*250 Mo). L'ensemble de travail peut être plus grand pour certaines applications comportant des flux multiples et de grands ensembles de données. Dans la mesure où le cache P est utilisé pour la recherche en vue de la déduplication des signatures et que toutes les signatures chargées dans le cache P y restent jusqu'à ce que sa capacité maximale soit atteinte, plus le cache P est grand, plus le potentiel de réussite des recherches est élevé et plus la consommation de la mémoire augmente. Le sous-dimensionnement du cache S ou P réduit les taux de déduplication, tandis que leur surdimensionnement augmente la consommation de mémoire.