統合概要
VeloDBの統合はBI、Lakehouse、Observability、SQL client、Data Source、Data Ingestion、Data Processingのカテゴリに分類されます。
このVeloDB / Apache Doris統合のリストは継続的に更新されており、まだ完全ではありません。関連するVeloDB / Apache Doris統合の拡充にご協力いただける場合は、ぜひご貢献ください。統合リストを更新するにはお問い合わせください。
Lakehouse
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Icebergaa |  | Dorisは様々なメタデータサービスを通じてIcebergテーブルデータへのアクセスをサポートします。データの読み込みに加えて、DorisはIcebergテーブルへの書き込みもサポートします。 | Documentation |
| Apache Hudi |  | Hive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHudiのデータベースとテーブル情報を自動的に取得し、データクエリを実行できます。 | Documentation |
| Amazon Glue | CREATE CATALOGを通じてIcebergテーブルまたはHiveテーブルにアクセスするためのAWS Glue Catalogの使用。 | Documentation | |
| Apache Paimon | Dorisは現在、様々なメタデータサービスを通じてPaimonテーブルのメタデータへのアクセスとPaimonデータのクエリをサポートしています。 | Documentation | |
| Apache Hive | Hive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHiveデータベースとテーブル情報を自動的に取得し、データクエリを実行できます。 | Documentation | |
| BigQuery |  | BigQuery CatalogはTrino Connector互換性フレームワークを使用して、BigQuery ConnectorによりBigQueryテーブルにアクセスします。 | Documentation |
| Apache Kudu |  | Kudu CatalogはTrino Connector互換性フレームワークを使用して、Kudu ConnectorによりKuduテーブルにアクセスします。 | Documentation |
| LakeSoul | DorisはPostgreSQLに保存されたメタデータを使用してLakeSoulテーブルデータへのアクセスと読み込みをサポートします。 | Documentation | |
| MaxCompute |  | MaxComputeはAlibaba Cloud上のエンタープライズレベルのSaaS（Software as a Service）クラウドデータウェアハウスです。 | Documentation |
Observability
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Opentelemetry |  | CREATE CATALOGを通じてIcebergテーブルまたはHiveテーブルにアクセスするためのAWS Glue Catalogの使用。 | Documentation |
| Logstash | LogstashはログETLフレームワーク（収集、前処理、ストレージシステムへの送信）で、ストレージシステムにデータを書き込むためのカスタム出力プラグインをサポートします。 | Documentation | |
| Beats | Dorisは様々なメタデータサービスを通じてIcebergテーブルデータへのアクセスをサポートします。データの読み込みに加えて、DorisはIcebergテーブルへの書き込みもサポートします。 | Documentation | |
| Fluentbit |  | Dorisは現在、様々なメタデータサービスを通じてPaimonテーブルのメタデータへのアクセスとPaimonデータのクエリをサポートしています。 | Documentation |
Data Processing
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Spark | Spark Doris ConnectorはSparkを通じてDorisに保存されたデータの読み込みと、Dorisへのデータ書き込みをサポートします。 | GitHub Documentation | |
| Apache Flink |  | Flink Doris ConnectorはFlinkを通じてDorisクラスターからの読み込みとデータ統合/への書き込みに使用されます。 | GitHub Documentation |
| dbt | dbt-dorisアダプターはdbt-coreをベースに開発されており、mysql-connector-pythonドライバーに依存してデータをDorisに変換します。 | Documentation |
BI
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Tableau |  | ビジネスインテリジェンスに焦点を当てたインタラクティブデータ可視化ソフトウェア | Documentation |
| Power BI |  | Microsoft Power BIは、Microsoftが開発したインタラクティブデータ可視化ソフトウェア製品で、主にビジネスインテリジェンスに焦点を当てています。 | Documentation |
| QuickSight | Amazon QuickSightは統合ビジネスインテリジェンス（BI）でデータ駆動型組織を支援します。 | Documentation | |
| Apache Superset | Apache Supersetはオープンソースのデータ探索プラットフォームです。豊富なデータソース接続と多数の可視化手法をサポートします。 | Documentation | |
| FineBI |  | FineBIは豊富なデータソース接続と複数ビューでのテーブルの分析・管理をサポートします。 | Documentation |
| SmartBI |  | SmartbiはOracle、SQL Server、MySQL、Dorisを含む様々なデータソースに接続できるソフトウェアサービスとアプリケーションコネクターのコレクションで、ユーザーが簡単にデータを統合・クレンジングできるようにします。 | Documentation |
| QuickBI |  | Quick BIはデータウェアハウスベースのビジネスインテリジェンスツールで、企業が迅速に印象的な視覚的分析を設定するのに役立ちます。 | Documentation |
SQL Client
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| DBeaver |  | DBeaverは開発者、データベース管理者、アナリスト、データを扱うすべての人のためのクロスプラットフォームデータベースツールです。 | Documentation |
| DataGrip | DataGripはJetBrainsのリレーショナルおよびNoSQLデータベース用の強力なクロスプラットフォームデータベースツールです。 | Docintegration/umentation |
Data Source
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Kafka | Dorisはリアルタイムストリーミングのための効率的なRoutine Load（CSV/JSON、Exactly-Once）と高度なフォーマットのためのDoris Kafka Connectorを介してKafkaと統合されます。 | GitHub Documentation | |
| Doris Kafka Connector | Dorisはリアルタイムストリーミングのための効率的なRoutine Load（CSV/JSON、Exactly-Once）と高度なフォーマットのためのDoris Kafka Connectorを介してKafkaと統合されます。 | GitHub Documentation | |
| MySQL | Doris JDBC Catalogは標準JDBCインターフェースを介してMySQLデータベースへの接続をサポートします。 | Documentation | |
| PostgreSQL | Doris JDBC Catalogは標準JDBCインターフェースを介してPostgreSQLデータベースへの接続をサポートします。 | Documentation | |
| Amazon S3 |  | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用してS3ファイルの読み込みをサポートします。 | Documentation |
| Azure | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用してAzure Storageファイルの読み込みをサポートします。 | Documentation | |
| Google Cloud Storage | | Google Cloud Stintegration/orageからファイルを読み込むために、Dorisは非同期S3 Loadと同期TVFの2つの方法を提供します。 | Documentation |
| MinIO |  | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用してMinIOファイルの読み込みをサポートします。 | Documentation |
| HDFS | Hive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHiveデータベースとテーブル情報を自動的に取得し、データクエリを実行できます。 | Documentation |
Data Ingestion
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Doris Streamloader |  | Doris StreamloaderはApache Dorisにデータを読み込むためのクライアントツールです。curlを使用したシングルスレッド読み込みと比較して、並行読み込み機能により大規模データセットの読み込み待機時間を短縮します。 | Documentation |
| Apache SeaTunnel |  | SeaTunnelは非常に使いやすく超高性能な分散データ統合プラットフォームで、大量データのリアルタイム同期をサポートします。 | Documentation |
| BladePipe | BladePipeはリアルタイムエンドツーエンドデータレプリケーションツールで、30以上のデータベース、メッセージキュー、検索エンジン、キャッシュ、リアルタイムデータウェアハウス、データレイクなどの間でデータを移動し、3秒未満の超低遅延を実現します。 | Documentation |
その他
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| AutoMQ |  | AutoMQはS3のようなオブジェクトストレージにストレージを分離することでKafkaのクラウドネイティブフォークです。 | Documentation |
| DataX | | DataX Doriswriterプラグインは、MySQL、Oracle、SQL Serverなどの様々なデータソintegration/ースからStream Load方式を使用してDorisにデータを同期することをサポートします。 | Documentation |
| Kettle |  | Kettle Doris PluginはKettle内でStream Loadを介して他のデータソーintegration/スからDorisにデータを書き込むために使用されます。 | Documentation |
| Apache Kyuubi |  | Apache Kyuubiはデータウェアハウスとレイクハウス上でサーバーレスSQLを提供する分散マルチテナントゲートウェイです。 | Documentation |