ダンプとメジャーコンパクション

ダンプには、Mini CompactionとMinor Compactionの2つのプロセスが含まれます。MemTableのサイズが一定のしきい値を超えると、MemTable内のデータをMini SSTableに転送してメモリを解放する必要があり、このプロセスをMini Compactionと呼びます。ユーザーデータの書き込みに伴い、Mini SSTableの数が増加し、Mini SSTableの数が一定のしきい値を超えると、バックグラウンドで自動的にMinor Compactionがトリガーされます。ダンプ（Mini Compaction）により新しいMini SSTableが生成されます。ダンプ（Mini Compaction）の回数が一定のしきい値を超えた場合、または毎日の業務オフピーク時に、システムはベースラインSSTable（Major SSTable）とその後にダンプされた増分SSTable（Mini/Minor SSTable）を統合して新しいMajor SSTableを作成します。このプロセスをメジャーコンパクションと呼びます。

テナントのMemTableが使用可能なメモリの、利用可能な総メモリに対する割合は memstore_limit_percentage で定義され、これにはActive MemTableとFrozen MemTableの両方が含まれます。あるテナントのMemTableメモリ使用量がmemstore_limit_percentage * freeze_trigger_percentageに達すると、自動的にフリーズ（ダンプの前段階のアクション）がトリガーされ、新しいActive MemTableが生成され、元のActive MemTableはFrozen MemTableになります。その後、自動的にダンプがスケジュールされ、ダンプ完了後にFrozen MemTable部分のメモリが解放されます。

以下の方法でダンプのトリガーを高速化できます：

• freeze_trigger_percentageを下げる

• 手動でalter system minor freeze実行してトリガーする

あるテナントのフリーズ回数がmajor_compact_triggerに達すると、自動的にメジャーコンパクションがトリガーされます。OceanBaseデータベースV4.xバージョンでは、デフォルト値は0で、この方式によるメジャーコンパクションの自動トリガーが無効であることを示します。

以下の方法でメジャーコンパクションのトリガーを高速化できます：

• major_compact_triggerを下げる

• 手動でalter system major freeze実行してトリガーする

マージ時のデータ不整合

データ不整合には3つのケースがあります：

• 行数の不整合：主表とインデックス表の行数が一致しません。

• Column Checksumの不整合：Major SSTable内のcolumnのchecksum値が一致しません。

• Data Checksumの不整合：Major SSTable内のすべての行のchecksumが一致しません。