連携概要
VeloDBの連携はBI、Lakehouse、Observability、SQLクライアント、データソース、データ取り込み、データ処理のカテゴリに分類されます。
このVeloDB / Apache Doris連携のリストは継続的に更新されており、まだ完全ではありません。関連するVeloDB / Apache Doris連携の貢献を歓迎し、リストの拡張にご協力ください。連携リストを更新するにはお問い合わせください。
Lakehouse
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Iceberg |  | Dorisは様々なメタデータサービスを通じてIcebergテーブルデータへのアクセスをサポートします。データの読み取りに加えて、DorisはIcebergテーブルへの書き込みもサポートします。 | ドキュメント |
| Apache Hudi |  | Hive Metastore、またはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHudiのデータベースとテーブル情報を自動的に取得し、データクエリを実行できます。 | ドキュメント |
| Amazon Glue | CREATE CATALOGを通じてIcebergテーブルやHiveテーブルにアクセスするためのAWS Glue Catalogの使用。 | ドキュメント | |
| Apache Paimon | Dorisは現在、様々なメタデータサービスを通じてPaimonテーブルメタデータへのアクセスとPaimonデータのクエリをサポートします。 | ドキュメント | |
| Apache Hive | Hive MetastoreやHive Metastoreと互換性のあるメタデータサービスに接続することで、Dorisは自動的にHiveデータベースとテーブル情報を取得し、データクエリを実行できます。 | ドキュメント | |
| BigQuery |  | BigQuery CatalogはTrino Connector互換性フレームワークを使用して、BigQuery Connectorを通じてBigQueryテーブルにアクセスします。 | ドキュメント |
| Apache Kudu |  | Kudu CatalogはTrino Connector互換性フレームワークを使用して、Kudu Connectorを通じてKuduテーブルにアクセスします。 | ドキュメント |
| LakeSoul | DorisはPostgreSQLに保存されたメタデータを使用してLakeSoulテーブルデータへのアクセスと読み取りをサポートします。 | ドキュメント | |
| MaxCompute |  | MaxComputeは、Alibaba Cloud上のエンタープライズレベルSaaS（Software as a Service）クラウドデータウェアハウスです。 | ドキュメント |
Observability
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Opentelemetry |  | CREATE CATALOGを通じてIcebergテーブルやHiveテーブルにアクセスするためのAWS Glue Catalogの使用。 | ドキュメント |
| Logstash | LogstashはログETLフレームワーク（収集、前処理、ストレージシステムへの送信）で、ストレージシステムにデータを書き込むカスタム出力プラグインをサポートします。 | ドキュメント | |
| Beats | Dorisは様々なメタデータサービスを通じてIcebergテーブルデータへのアクセスをサポートします。データの読み取りに加えて、DorisはIcebergテーブルへの書き込みもサポートします。 | ドキュメント | |
| Fluentbit |  | Dorisは現在、様々なメタデータサービスを通じてPaimonテーブルメタデータへのアクセスとPaimonデータのクエリをサポートします。 | ドキュメント |
データ処理
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Spark | Spark Doris ConnectorはSparkを通じてDorisに保存されたデータの読み取りとDorisへのデータ書き込みをサポートできます。 | GitHub ドキュメント | |
| Apache Flink |  | Flink Doris ConnectorはFlinkを通じてDorisクラスターからデータを読み取り、データを書き込むために使用されます。 | GitHub ドキュメント |
| dbt | dbt-dorisアダプターはdbt-coreをベースに開発され、mysql-connector-pythonドライバーに依存してデータをdorisに変換します。 | ドキュメント |
BI
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Tableau |  | ビジネスインテリジェンスに焦点を当てたインタラクティブデータ可視化ソフトウェア | ドキュメント |
| Power BI |  | Microsoft Power BIは、主にビジネスインテリジェンスに焦点を当てたMicrosoftが開発したインタラクティブデータ可視化ソフトウェア製品です。 | ドキュメント |
| QuickSight | Amazon QuickSightは統合されたビジネスインテリジェンス（BI）でデータドリブン組織を支援します。 | ドキュメント | |
| Apache Superset | Apache Supersetはオープンソースのデータ探索プラットフォームです。豊富な種類のデータソース接続と数多くの可視化方法をサポートします。 | ドキュメント | |
| FineBI |  | FineBIは豊富なデータソース接続と複数ビューでのテーブルの分析と管理をサポートします。 | ドキュメント |
| SmartBI |  | SmartbiはOracle、SQL Server、MySQL、Dorisなどの様々なデータソースに接続できるソフトウェアサービスとアプリケーションコネクターの集合体で、ユーザーがデータを簡単に統合・クレンジングできるようにします。 | ドキュメント |
| QuickBI |  | Quick BIはデータウェアハウスベースのビジネスインテリジェンスツールで、企業が印象的なビジュアル分析を迅速に設定するのを支援します。 | ドキュメント |
SQLクライアント
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| DBeaver |  | DBeaverは開発者、データベース管理者、アナリスト、データを扱うすべての人のためのクロスプラットフォームデータベースツールです。 | ドキュメント |
| DataGrip | DataGripはJetBrainsによるリレーショナルおよびNoSQLデータベース向けの強力なクロスプラットフォームデータベースツールです。 | ドキュメント |
データソース
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Kafka | Dorisは効率的なRoutine Loadを介してリアルタイムストリーミング（CSV/JSON、Exactly-Once）とDoris Kafka Connectorを介して高度なフォーマット用にKafkaと統合します。 | GitHub ドキュメント | |
| Doris Kafka Connector | Dorisは効率的なRoutine Loadを介してリアルタイムストリーミング（CSV/JSON、Exactly-Once）とDoris Kafka Connectorを介して高度なフォーマット用にKafkaと統合します。 | GitHub ドキュメント | |
| MySQL | Doris JDBC Catalogは標準JDBCインターフェースを介してMySQLデータベースへの接続をサポートします。 | ドキュメント | |
| PostgreSQL | Doris JDBC Catalogは標準JDBCインターフェースを介してPostgreSQLデータベースへの接続をサポートします。 | ドキュメント | |
| Amazon S3 |  | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用してS3ファイルの読み込みをサポートします。 | ドキュメント |
| Azure | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用してAzure Storageファイルの読み込みをサポートします。 | ドキュメント | |
| Google Cloud Storage | | Google Cloud Storageからファイルを読み込むため、Dorisは非同期S3 Loadと同期TVFの2つの方法を提供します。 | ドキュメント |
| MinIO |  | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用してMinIOファイルの読み込みをサポートします。 | ドキュメント |
| HDFS | Hive MetastoreやHive Metastoreと互換性のあるメタデータサービスに接続することで、Dorisは自動的にHiveデータベースとテーブル情報を取得し、データクエリを実行できます。 | ドキュメント |
データ取り込み
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Doris Streamloader |  | Doris StreamloaderはApache Dorisにデータを読み込むために設計されたクライアントツールです。curlを使用した単一スレッドロードと比較して、並行読み込み機能により大規模データセットの読み込み遅延を削減します。 | ドキュメント |
| Apache SeaTunnel |  | SeaTunnelは非常に使いやすい超高性能分散データ統合プラットフォームで、大量データのリアルタイム同期をサポートします。 | ドキュメント |
| BladePipe | BladePipeはリアルタイムのエンドツーエンドデータレプリケーションツールで、30以上のデータベース、メッセージキュー、検索エンジン、キャッシュ、リアルタイムデータウェアハウス、データレイクなどの間でデータを移動し、3秒未満の超低レイテンシを実現します。 | ドキュメント |
その他
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| AutoMQ |  | AutoMQはS3などのオブジェクトストレージにストレージを分離することでKafkaのクラウドネイティブフォークです。 | ドキュメント |
| DataX | | DataX DoriswriterプラグインはMySQL、Oracle、SQL Serverなどの様々なデータソースからStream Load方法を使用してDorisにデータを同期することをサポートします。 | ドキュメント |
| Kettle |  | Kettle Doris PluginはKettleでStream Loadを通じて他のデータソースからDorisにデータを書き込むために使用されます。 | ドキュメント |
| Apache Kyuubi |  | Apache KyuubiはデータウェアハウスとレイクハウスでサーバーレスSQLを提供する分散マルチテナントゲートウェイです。 | ドキュメント |