外部テーブルと外部ファイルについて

外部テーブル（External Table）のデータは、OceanBaseクラスタ外部のストレージシステム（ローカルディレクトリ、オブジェクトストレージ、HDFS、MaxComputeなど）に保存され、データベース内にはメタデータとアクセスパスのみが保持されます。作成後は通常のテーブルと同様にSELECT、JOIN、集計などに使用できますが、読み取り専用であり、DML、制約、インデックスはサポートされません。

通常のテーブルとの違い：

注意事項

• 外部テーブルを作成する際、システムはLOCATIONとPATTERNに基づいて一致するファイルリストをシステムテーブルに書き込みます。スキャン時はこのリストに従って外部ファイルにアクセスします。
• 外部ディレクトリに新しいファイルが追加されても、自動的にリストには表示されません。外部テーブルのファイルリストを更新するを実行するか、外部ファイルの管理を参照してください。
• 外部ファイルが削除された場合、クエリは通常エラーを報告せず、対応するファイルに対して空結果が返されます。
• 外部ファイルが変更された場合、クエリは最新の内容を読み取ります。クエリと外部ファイルの同時並行的な変更は予期しない結果を引き起こす可能性があるため、クエリ実行中はファイルの変更を避けてください。

外部データへのアクセス方法

OceanBaseは、外部データへのアクセス方法を複数提供しています。まず、テーブルオブジェクトの永続化が必要かどうか、および同一ファイル群への頻繁な繰り返しクエリが必要かどうかに基づいて選択してください：

HDFS外部テーブルとODPS外部テーブル

OceanBaseデータベースは、外部テーブルを通じて、外部ストレージシステムのファイルデータや外部データプラットフォームのテーブルデータなど、さまざまな種類の外部データソースにアクセスすることをサポートしています。その中で、HDFSは外部ストレージシステムに、ODPS(MaxCompute)は外部データプラットフォームに分類されます。

HDFS外部テーブル

Hadoop分散ファイルシステム（HDFS）は、Hadoopエコシステムにおける分散ストレージシステムです。OceanBaseデータベースは、バージョンV4.3.5 BP1から外部テーブルを通じてHDFS内のデータにアクセスできるようになりました。

HDFS外部テーブルを使用する前に、OceanBaseデータベースJAVA SDK環境の構築を行い、ob_enable_java_envなどの関連パラメータを設定する必要があります。構文の詳細については、CREATE EXTERNAL TABLEのLOCATIONおよびFORMATの項を参照してください。

ODPS(MaxCompute)外部テーブル

ODPS(MaxCompute)は、大規模データ処理向けのデータプラットフォームです。OceanBaseデータベースは、外部テーブルを通じてODPS内のデータにアクセスできるようになりました。

使用時には、外部テーブルのPROPERTIES (TYPE = 'ODPS' ...)で外部データソースを指定でき、API_MODEはstorage_apiまたはtunnel_apiをサポートします。構文の詳細については、CREATE EXTERNAL TABLEのproperties_type_optionsの項を参照してください。使用方法と例については、ODPS外部テーブルを参照してください。

関連ドキュメント

• 外部テーブルの作成とクエリ
• 外部テーブルパーティションの作成
• 外部ファイルの管理
• データ型マッピング
• CREATE EXTERNAL TABLE構文
• FILESテーブル関数