NetBackup™ 重複排除ガイド

サンプリングと予測キャッシュについて

MSDP は、効率的な重複排除のルックアップのために指紋をキャッシュする目的で、MaxCacheSize で構成されたサイズを上限としてメモリを使用します。NetBackup リリース 10.1 で導入された新しい指紋キャッシュのルックアップデータスキームによって、メモリの使用量が減少します。これにより、現在のメモリキャッシュは、サンプリングキャッシュ (S キャッシュ) と予測キャッシュ (P キャッシュ) の 2 つのコンポーネントに分割されます。S キャッシュは、各バックアップから指紋の一部をキャッシュに保存し、重複排除の以前のバックアップのサンプルから類似データを見つけるのに使用されます。P キャッシュは、重複排除のルックアップのために近い将来使用される可能性が高い指紋をキャッシュに保存します。

ジョブの開始時に、前回のバックアップから指紋の一部が初回シードとして P キャッシュにロードされます。指紋のルックアップは重複を見つけるために P キャッシュを使用して行われます。ルックアップミスが S キャッシュのサンプルで検索され、前回のバックアップデータに一致がないかどうかが検索されます。一致が検出されると、そのバックアップの指紋の一部が将来の重複排除のために P キャッシュにロードされます。

S キャッシュと P キャッシュによる指紋のルックアップ方法は、MSDP クラスタ配備 (Flex Scale、AKS、EKS の配備を含む) を使用するローカルおよびクラウドのストレージボリュームで有効になっています。この方法は、MSDP の非クラスタプラットフォーム (NetBackup アプライアンス、Flex、BYO) のクラウドのみのボリュームでも有効です。クラウドのみのボリュームをサポートするプラットフォームの場合、ローカルボリュームでは元のキャッシュルックアップ方法が引き続き使用されます。S キャッシュと P キャッシュの構成パラメータは、構成ファイル contentrouter.cfg のキャッシュセクションにあります。

非クラスタ配備のデフォルト値は次のとおりです。

クラスタ配備のデフォルト値は次のとおりです。

MSDP クラスタ配備の場合、ローカルボリュームとクラウドボリュームは同じ S キャッシュと P キャッシュサイズを共有します。非クラスタ配備の場合、S キャッシュと P キャッシュはクラウドボリュームにのみ使用され、ローカルボリュームには MaxCacheSize が引き続き使用されます。システムがクラウドバックアップに使用されない場合、MaxPredictiveCacheSize と MaxSamplingCacheSize は 1% や 128MiB などの小さい値に設定できます。MaxCacheSize は 50% や 60% などの大きい値に設定できます。同様に、システムがクラウドバックアップにのみ使用される場合、MaxCacheSize は 1% や 128MiB に設定でき、MaxPredictiveCacheSize と MaxSamplingCacheSize は大きい値に設定できます。

S キャッシュのサイズは、バックエンドの MSDP 容量またはバックエンドデータからの指紋の数によって決まります。セグメントの平均サイズを 32 KB と仮定する場合、S キャッシュのサイズはバックエンド容量の TB あたり約 100 MB です。P キャッシュのサイズは、同時実行ジョブの数、データの局所性、または受信データの作業セットによって決まります。作業セットはストリームあたり 250 MB (約 500 万の指紋) です。たとえば、100 の同時実行ストリームには 25 GB (100*250 MB) のメモリが最低限必要です。複数のストリームや大きいデータセットを伴う特定のアプリケーションでは、作業セットが大きくなる場合があります。指紋の重複排除ルックアップに P キャッシュが使用され、ロードされたすべての指紋は割り当てられた容量に達するまで P キャッシュに保持されるため、P キャッシュのサイズが大きいほど、ルックアップのヒット率は向上し、メモリ使用量も増えます。S キャッシュまたは P キャッシュのサイズを小さくすると重複排除率が低下し、大きくするとメモリコストが増加します。