統合の概要
VeloDBの統合は、BI、レイクハウス、オブザーバビリティ、SQLクライアント、データソース、データ取り込み、データ処理のカテゴリに分類されます。
このVeloDB / Apache Doris統合のリストは継続的に更新されており、まだ完全ではありません。関連するVeloDB / Apache Doris統合の拡充にご協力いただける貢献を歓迎します。統合リストの更新についてはお問い合わせください。
レイクハウス
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Iceberg |  | Dorisは様々なメタデータサービスを通してIcebergTableデータへのアクセスをサポートしています。データの読み取りに加えて、DorisはIcebergTableへの書き込みもサポートしています。 | ドキュメント |
| Apache Hudi |  | Hive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHudiのデータベースとTable情報を自動的に取得し、データクエリを実行できます。 | ドキュメント |
| Amazon Glue | AWS Glue カタログをCREATE CATALOGを通してIcebergTableやHiveTableにアクセスするために使用します。 | ドキュメント | |
| Apache Paimon | Dorisは現在、様々なメタデータサービスを通してPaimonTableのメタデータにアクセスし、Paimonデータをクエリすることをサポートしています。 | ドキュメント | |
| Apache Hive | Hive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHiveデータベースとTable情報を自動的に取得してデータクエリを行うことができます。 | ドキュメント | |
| BigQuery |  | BigQuery カタログはTrino Connector互換性フレームワークを使用してBigQuery Connectorを通してBigQueryTableにアクセスします。 | ドキュメント |
| Apache Kudu |  | Kudu カタログはTrino Connector互換性フレームワークを使用してKudu Connectorを通してKuduTableにアクセスします。 | ドキュメント |
| LakeSoul | DorisはPostgreSQLに格納されたメタデータを使用してLakeSoulTableデータのアクセスと読み取りをサポートしています。 | ドキュメント | |
| MaxCompute |  | MaxComputeはAlibaba Cloud上のエンタープライズ級SaaS（Software as a Service）クラウドデータウェアハウスです。 | ドキュメント |
オブザーバビリティ
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Opentelemetry |  | AWS Glue カタログをCREATE CATALOGを通してIcebergTableやHiveTableにアクセスするために使用します。 | ドキュメント |
| Logstash | LogstashはログETLフレームワーク（収集、前処理、ストレージシステムへの送信）で、ストレージシステムにデータを書き込むためのカスタム出力プラグインをサポートしています。 | ドキュメント | |
| Beats | Dorisは様々なメタデータサービスを通してIcebergTableデータへのアクセスをサポートしています。データの読み取りに加えて、DorisはIcebergTableへの書き込みもサポートしています。 | ドキュメント | |
| Fluentbit |  | Dorisは現在、様々なメタデータサービスを通してPaimonTableのメタデータにアクセスし、Paimonデータをクエリすることをサポートしています。 | ドキュメント |
データ処理
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Spark | Spark Doris ConnectorはSparkを通してDorisに格納されたデータの読み取りとDorisへのデータ書き込みをサポートできます。 | GitHub ドキュメント | |
| Apache Flink |  | Flink Doris ConnectorはFlinkを通してDorisクラスタからの読み取りとDorisクラスタへのデータ書き込みに使用されます。 | GitHub ドキュメント |
| dbt | dbt-dorisアダプタはdbt-coreをベースに開発され、mysql-connector-pythonドライバーに依存してデータをdorisに変換します。 | ドキュメント |
BI
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Tableau |  | ビジネスインテリジェンスに焦点を当てたインタラクティブなデータ可視化ソフトウェア | ドキュメント |
| Power BI |  | Microsoft Power BIは、ビジネスインテリジェンスを主な焦点としてMicrosoftが開発したインタラクティブなデータ可視化ソフトウェア製品です。 | ドキュメント |
| QuickSight | Amazon QuickSightは統合ビジネスインテリジェンス（BI）でデータ駆動型組織を支援します。 | ドキュメント | |
| Apache Superset | Apache Supersetはオープンソースのデータ探索プラットフォームです。豊富な種類のデータソース接続と多数の可視化手法をサポートしています。 | ドキュメント | |
| FineBI |  | FineBIは豊富なデータソース接続と複数のビューでのTableの分析および管理をサポートしています。 | ドキュメント |
| SmartBI |  | SmartbiはOracle、SQL サーバー、MySQL、Dorisを含む様々なデータソースに接続できるソフトウェアサービスとアプリケーションコネクタの集合体で、ユーザーが簡単にデータを統合・クレンジングできます。 | ドキュメント |
| QuickBI |  | Quick BIはデータウェアハウスベースのビジネスインテリジェンスツールで、企業が印象的なビジュアル分析を迅速に構築するのに役立ちます。 | ドキュメント |
SQLクライアント
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| DBeaver |  | DBeaverは開発者、データベース管理者、アナリスト、データを扱うすべての人のためのクロスプラットフォームデータベースツールです。 | ドキュメント |
| DataGrip | DataGripはJetBrainsが提供するリレーショナルおよびNoSQLデータベース用の強力なクロスプラットフォームデータベースツールです。 | ドキュメント |
データソース
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Kafka | Dorisはリアルタイムストリーミング（CSV/JSON、Exactly-Once）のための効率的なRoutine LoadとAdvanced形式のためのDoris Kafka Connectorを介してKafkaと統合します。 | GitHub ドキュメント | |
| Doris Kafka Connector | Dorisはリアルタイムストリーミング（CSV/JSON、Exactly-Once）のための効率的なRoutine LoadとAdvanced形式のためのDoris Kafka Connectorを介してKafkaと統合します。 | GitHub ドキュメント | |
| MySQL | Doris JDBC カタログは標準JDBCインターフェースを介してMySQLデータベースへの接続をサポートしています。 | ドキュメント | |
| PostgreSQL | Doris JDBC カタログは標準JDBCインターフェースを介してPostgreSQLデータベースへの接続をサポートしています。 | ドキュメント | |
| Amazon S3 |  | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用したS3ファイルの読み込みをサポートしています。 | ドキュメント |
| Azure | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用したAzure Storageファイルの読み込みをサポートしています。 | ドキュメント | |
| Google Cloud Storage | | Google Cloud Storageからファイルを読み込むために、Dorisは非同期S3 Loadと同期TVFの2つの方法を提供しています。 | ドキュメント |
| MinIO |  | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用したMinIOファイルの読み込みをサポートしています。 | ドキュメント |
| HDFS | Hive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHiveデータベースとTable情報を自動的に取得してデータクエリを行うことができます。 | ドキュメント |
データ取り込み
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Doris Streamloader |  | Doris StreamloaderはApache Dorisにデータを読み込むために設計されたクライアントツールです。curlを使用したシングルスレッド読み込みと比較して、並行読み込み機能により大規模データセットの読み込み遅延を削減します。 | ドキュメント |
| Apache SeaTunnel |  | SeaTunnelは非常に使いやすい超高性能分散データ統合プラットフォームで、大容量データのリアルタイム同期をサポートしています。 | ドキュメント |
| BladePipe | BladePipeはリアルタイムエンドツーエンドデータ複製ツールで、30以上のデータベース、メッセージキュー、検索エンジン、キャッシュ、リアルタイムデータウェアハウス、データレイクなどの間で、3秒未満の超低遅延でデータを移動します。 | ドキュメント |
その他
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| AutoMQ |  | AutoMQはS3などのオブジェクトストレージにストレージを分離することでKafkaのクラウドネイティブフォークです。 | ドキュメント |
| DataX | | DataX DoriswriterプラグインはStream Load方式を使用してMySQL、Oracle、SQL Serverなど様々なデータソースからDorisへのデータ同期をサポートしています。 | ドキュメント |
| Kettle |  | Kettle Doris PluginはKettleでStream Loadを通して他のデータソースからDorisにデータを書き込むために使用されます。 | ドキュメント |
| Apache Kyuubi |  | Apache Kyuubiは、データウェアハウスとレイクハウスでサーバーレスSQLを提供する分散マルチテナントゲートウェイです。 | ドキュメント |