連携の概要
VeloDBの連携はBI、Lakehouse、Observability、SQLクライアント、データソース、データ取り込み、データ処理のカテゴリに分類されます。
このVeloDB / Apache Doris連携のリストは継続的に更新されており、まだ完成していません。リストの拡充を支援するため、関連するVeloDB / Apache Doris連携への貢献を歓迎します。連携リストを更新するにはお問い合わせください。
Lakehouse
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Icebergaa |  | Dorisは、さまざまなメタデータサービスを通じてIcebergテーブルデータへのアクセスをサポートしています。データの読み取りに加えて、DorisはIcebergテーブルへの書き込みもサポートしています。 | ドキュメント |
| Apache Hudi |  | Hive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHudiのデータベースとテーブル情報を自動的に取得し、データクエリを実行できます。 | ドキュメント |
| Amazon Glue | CREATE CATALOGを通じてIcebergテーブルまたはHiveテーブルにアクセスするためのAWS Glue Catalogの使用。 | ドキュメント | |
| Apache Paimon | Dorisは現在、さまざまなメタデータサービスを通じてPaimonテーブルメタデータにアクセスし、Paimonデータをクエリすることをサポートしています。 | ドキュメント | |
| Apache Hive | Hive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHiveデータベースとテーブル情報を自動的に取得し、データクエリを実行できます。 | ドキュメント | |
| BigQuery |  | BigQuery CatalogはTrino Connectorの互換性フレームワークを使用して、BigQuery Connectorを通じてBigQueryテーブルにアクセスします。 | ドキュメント |
| Apache Kudu |  | Kudu CatalogはTrino Connectorの互換性フレームワークを使用して、Kudu Connectorを通じてKuduテーブルにアクセスします。 | ドキュメント |
| LakeSoul | DorisはPostgreSQLに保存されているメタデータを使用して、LakeSoulテーブルデータへのアクセスと読み取りをサポートしています。 | ドキュメント | |
| MaxCompute |  | MaxComputeは、Alibaba Cloud上のエンタープライズレベルSaaS（Software as a Service）クラウドデータウェアハウスです。 | ドキュメント |
Observability
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Opentelemetry |  | CREATE CATALOGを通じてIcebergテーブルまたはHiveテーブルにアクセスするためのAWS Glue Catalogの使用。 | ドキュメント |
| Logstash | LogstashはログETLフレームワーク（収集、前処理、ストレージシステムへの送信）で、ストレージシステムにデータを書き込むためのカスタム出力プラグインをサポートしています。 | ドキュメント | |
| Beats | Dorisは、さまざまなメタデータサービスを通じてIcebergテーブルデータへのアクセスをサポートしています。データの読み取りに加えて、DorisはIcebergテーブルへの書き込みもサポートしています。 | ドキュメント | |
| Fluentbit |  | Dorisは現在、さまざまなメタデータサービスを通じてPaimonテーブルメタデータにアクセスし、Paimonデータをクエリすることをサポートしています。 | ドキュメント |
データ処理
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Spark | Spark Doris Connectorは、Sparkを通じてDorisに保存されたデータの読み取りとDorisへのデータの書き込みをサポートできます。 | GitHub ドキュメント | |
| Apache Flink |  | Flink Doris Connectorは、Flinkを通じてDorisクラスタからの読み取りとデータ統合/への書き込みに使用されます。 | GitHub ドキュメント |
| dbt | dbt-dorisアダプタは、dbt-coreに基づいて開発され、mysql-connector-pythonドライバに依存してデータをdorisに変換します。 | ドキュメント |
BI
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Tableau |  | ビジネスインテリジェンスに特化したインタラクティブなデータ視覚化ソフトウェア | ドキュメント |
| Power BI |  | Microsoft Power BIは、Microsoftが開発したインタラクティブなデータ視覚化ソフトウェア製品で、主にビジネスインテリジェンスに焦点を当てています。 | ドキュメント |
| QuickSight | Amazon QuickSightは、統合されたビジネスインテリジェンス（BI）でデータ駆動型組織を支援します。 | ドキュメント | |
| Apache Superset | Apache Supersetは、オープンソースのデータ探索プラットフォームです。豊富なデータソース接続と多数の視覚化手法をサポートしています。 | ドキュメント | |
| FineBI |  | FineBIは豊富なデータソース接続と、複数のビューを持つテーブルの分析と管理をサポートしています。 | ドキュメント |
| SmartBI |  | Smartbiはソフトウェアサービスとアプリケーションコネクタの集合体で、Oracle、SQL Server、MySQL、Dorisなど、さまざまなデータソースに接続でき、ユーザーがデータを簡単に統合し、クレンジングできます。 | ドキュメント |
| QuickBI |  | Quick BIは、データウェアハウスベースのビジネスインテリジェンスツールで、企業が印象的な視覚的分析を迅速に設定するのに役立ちます。 | ドキュメント |
SQLクライアント
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| DBeaver |  | DBeaverは、開発者、データベース管理者、アナリスト、およびデータを扱う全ての人のためのクロスプラットフォームデータベースツールです。 | ドキュメント |
| DataGrip | DataGripは、JetBrainsが提供するリレーショナルデータベースとNoSQLデータベース向けの強力なクロスプラットフォームデータベースツールです。 | ドキュメント |
データソース
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Kafka | Dorisは、リアルタイムストリーミング（CSV/JSON、Exactly-Once）用の効率的なRoutine LoadとDoris Kafka Connectorを介してKafkaと統合し、高度なフォーマットをサポートします。 | GitHub ドキュメント | |
| Doris Kafka Connector | Dorisは、リアルタイムストリーミング（CSV/JSON、Exactly-Once）用の効率的なRoutine LoadとDoris Kafka Connectorを介してKafkaと統合し、高度なフォーマットをサポートします。 | GitHub ドキュメント | |
| MySQL | Doris JDBC CatalogはMySQLデータベースとの接続を標準JDBCインターフェースを使ってサポートします。 | ドキュメント | |
| PostgreSQL | Doris JDBC CatalogはPostgreSQLデータベースとの接続を標準JDBCインターフェースを使ってサポートします。 | ドキュメント | |
| Amazon S3 |  | Dorisは、非同期（S3 Load）と同期（TVF）の両方の方法を使用してS3ファイルの読み込みをサポートします。 | ドキュメント |
| Azure | Dorisは、非同期（S3 Load）と同期（TVF）の両方の方法を使用してAzure Storageファイルの読み込みをサポートします。 | ドキュメント | |
| Google Cloud Storage | | Google Cloud Storageからファイルを読み込むため、Dorisは非同期のS3 Loadと同期のTVFの2つの方法を提供します。 | ドキュメント |
| MinIO |  | Dorisは、非同期（S3 Load）と同期（TVF）の両方の方法を使用してMinIOファイルの読み込みをサポートします。 | ドキュメント |
| HDFS | Hive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHiveデータベースとテーブル情報を自動的に取得し、データクエリを実行できます。 | ドキュメント |
データ取り込み
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Doris Streamloader |  | Doris StreamloaderはApache Dorisにデータを読み込むために設計されたクライアントツールです。curlを使用したシングルスレッドの読み込みと比較して、同時読み込み機能により大規模データセットの読み込み遅延を削減します。 | ドキュメント |
| Apache SeaTunnel |  | SeaTunnelは、大規模データのリアルタイム同期をサポートする、非常に使いやすい超高性能分散データ統合プラットフォームです。 | ドキュメント |
| BladePipe | BladePipeは、リアルタイムエンドツーエンドデータ複製ツールで、30以上のデータベース、メッセージキュー、検索エンジン、キャッシュ、リアルタイムデータウェアハウス、データレイクなどの間でデータを移動し、3秒未満の超低遅延を実現します。 | ドキュメント |
その他
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| AutoMQ |  | AutoMQは、S3などのオブジェクトストレージにストレージを分離することでKafkaのクラウドネイティブフォークです。 | ドキュメント |
| DataX | | DataX DoriswriterプラグインはStream Load方法を使用して、MySQL、Oracle、SQL Serverなどのさまざまなデータソースからのデータを Dorisに同期することをサポートします。 | ドキュメント |
| Kettle |  | Kettle Doris PluginはKettle内でStream Loadを通じて他のデータソースからDorisにデータを書き込むために使用されます。 | ドキュメント |
| Apache Kyuubi |  | Apache Kyuubiは、データウェアハウスとLakehouse上でサーバーレスSQLを提供する分散型マルチテナントゲートウェイです。 | ドキュメント |