パフォーマンス
このドキュメントのパフォーマンスデータは、デフォルト設定に基づいています。高いネットワークレイテンシや高スループットの書き込みシナリオに直面している場合は、最適化についてOperation Manualを参照してください。
テストデータセット
- データセット: TPC-H 1T
テストクラスタ構成
| 構成項目 | アップストリーム構成 | ダウンストリーム構成 |
|---|---|---|
| FE | 2 cores 16 GB | 2 cores 16 GB |
| BE | 3 nodes, 16 cores 64 GB, 3*500 GB per node | 3 nodes, 16 cores 64 GB, 3*500 GB per node |
増分同期パフォーマンステスト
テスト手順
- アップストリームクラスタでTPC-H 1TのデータベースとTableを作成する。
- TPC-H 1Tデータベースの同期ジョブを作成する。
- TPC-H 1Tデータのインポート完了を待ち、完了時間を記録する。
- ダウンストリームデータの同期完了を待ち、完了時間を記録する。
テスト結論
増分同期の時間差: 33秒
完全同期パフォーマンステスト
テスト手順
- アップストリームクラスタでTPC-H 1TのデータベースとTable情報を作成し、データインポートを完了して、完了時間を記録する。
- TPC-H 1Tデータベースの同期ジョブを作成する。
- ダウンストリームデータの同期完了を待ち、完了時間を記録する。
テスト結論
完全同期の時間差: 6分1秒
Flink同期パフォーマンステスト
テスト手順
- Flinkを使用してアップストリームで100,000,000レコードをインポートする。
- ライブラリとTableの同期ジョブを作成する。
- 各段階(例:1,000,000レコード、2,000,000レコードなど)で、ダウンストリーム同期完了時間とアップストリームインポート完了時間の差を観察する。
- アップストリームでの最後のインポート完了時間を記録する。
- ダウンストリーム同期完了時間を記録する。
テスト結論
各段階でのラグタイムは5秒以内に維持されています。