統合概要
VeloDBの統合はBI、レイクハウス、監視、SQLクライアント、データソース、データ取り込み、データ処理のカテゴリに分類されます。
このVeloDB / Apache Doris統合のリストは継続的に更新されており、まだ完全ではありません。関連するVeloDB / Apache Doris統合の貢献を歓迎し、拡充にご協力いただけます。統合リストの更新についてはお問い合わせください。
レイクハウス
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Icebergaa |  | Dorisは、様々なメタデータサービスを通じてIcebergTableデータへのアクセスをサポートします。データの読み取りに加えて、DorisはIcebergTableへの書き込みもサポートしています。 | ドキュメント |
| Apache Hudi |  | Hive Metastore、またはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHudiのデータベースとTable情報を自動的に取得し、データクエリを実行できます。 | ドキュメント |
| Amazon Glue | CREATE CATALOGを通じてIcebergTableやHiveTableにアクセスするためのAWS Glue カタログの使用。 | ドキュメント | |
| Apache Paimon | Dorisは現在、様々なメタデータサービスを通じてPaimonTableメタデータへのアクセスとPaimonデータのクエリをサポートしています。 | ドキュメント | |
| Apache Hive | Hive MetastoreやHive Metastoreと互換性のあるメタデータサービスに接続することで、Dorisは自動的にHiveデータベースとTable情報を取得し、データクエリを行うことができます。 | ドキュメント | |
| BigQuery |  | BigQuery カタログはTrino Connector互換性フレームワークを使用して、BigQuery Connectorを通じてBigQueryTableにアクセスします。 | ドキュメント |
| Apache Kudu |  | Kudu カタログはTrino Connector互換性フレームワークを使用して、Kudu Connectorを通じてKuduTableにアクセスします。 | ドキュメント |
| LakeSoul | DorisはPostgreSQLに保存されたメタデータを使用してLakeSoulTableデータへのアクセスと読み取りをサポートします。 | ドキュメント | |
| MaxCompute |  | MaxComputeは、Alibaba Cloud上のエンタープライズレベルSaaS（Software as a Service）クラウドデータウェアハウスです。 | ドキュメント |
監視
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Opentelemetry |  | CREATE CATALOGを通じてIcebergTableやHiveTableにアクセスするためのAWS Glue カタログの使用。 | ドキュメント |
| Logstash | Logstashはログ処理ETLフレームワーク（収集、前処理、ストレージシステムへの送信）で、ストレージシステムにデータを書き込むためのカスタム出力プラグインをサポートします。 | ドキュメント | |
| Beats | Dorisは、様々なメタデータサービスを通じてIcebergTableデータへのアクセスをサポートします。データの読み取りに加えて、DorisはIcebergTableへの書き込みもサポートしています。 | ドキュメント | |
| Fluentbit |  | Dorisは現在、様々なメタデータサービスを通じてPaimonTableメタデータへのアクセスとPaimonデータのクエリをサポートしています。 | ドキュメント |
データ処理
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Spark | Spark Doris ConnectorはSparkを通じてDorisに保存されたデータの読み取りとDorisへのデータ書き込みをサポートできます。 | GitHub ドキュメント | |
| Apache Flink |  | Flink Doris ConnectorはFlinkを通じてDorisクラスターからのデータ読み取りとデータ統合/書き込みに使用されます。 | GitHub ドキュメント |
| dbt | dbt-dorisアダプターはdbt-coreに基づいて開発されており、mysql-connector-pythonドライバーに依存してdorisにデータを変換します。 | ドキュメント |
BI
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Tableau |  | ビジネスインテリジェンスに特化したインタラクティブなデータ可視化ソフトウェア | ドキュメント |
| Power BI |  | Microsoft Power BIは、主にビジネスインテリジェンスに焦点を当てたMicrosoftが開発したインタラクティブなデータ可視化ソフトウェア製品です。 | ドキュメント |
| QuickSight | Amazon QuickSightは、統合されたビジネスインテリジェンス（BI）でデータ駆動型組織を支援します。 | ドキュメント | |
| Apache Superset | Apache Supersetは、オープンソースのデータ探索プラットフォームです。豊富なデータソース接続と多数の可視化方法をサポートしています。 | ドキュメント | |
| FineBI |  | FineBIは豊富なデータソース接続と複数のビューでのTableの分析と管理をサポートします。 | ドキュメント |
| SmartBI |  | Smartbiは、Oracle、SQL サーバー、MySQL、Dorisを含む様々なデータソースに接続できるソフトウェアサービスとアプリケーションコネクターの集合体で、ユーザーがデータを簡単に統合し、クレンジングすることを可能にします。 | ドキュメント |
| QuickBI |  | Quick BIは、企業が印象的なビジュアル分析を迅速に構築することを支援するデータウェアハウスベースのビジネスインテリジェンスツールです。 | ドキュメント |
SQLクライアント
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| DBeaver |  | DBeaverは開発者、データベース管理者、アナリスト、およびデータを扱うすべての人のためのクロスプラットフォームデータベースツールです。 | ドキュメント |
| DataGrip | DataGripはJetBrainsによるリレーショナルおよびNoSQLデータベース用の強力なクロスプラットフォームデータベースツールです。 | ドキュメント |
データソース
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Apache Kafka | Dorisはリアルタイムストリーミング（CSV/JSON、Exactly-Once）のための効率的なRoutine LoadとDoris Kafka Connectorを介して高度なフォーマット処理でKafkaと統合します。 | GitHub ドキュメント | |
| Doris Kafka Connector | Dorisはリアルタイムストリーミング（CSV/JSON、Exactly-Once）のための効率的なRoutine LoadとDoris Kafka Connectorを介して高度なフォーマット処理でKafkaと統合します。 | GitHub ドキュメント | |
| MySQL | Doris JDBC カタログは標準JDBCインターフェースを介してMySQLデータベースへの接続をサポートします。 | ドキュメント | |
| PostgreSQL | Doris JDBC カタログは標準JDBCインターフェースを介してPostgreSQLデータベースへの接続をサポートします。 | ドキュメント | |
| Amazon S3 |  | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用してS3ファイルの読み込みをサポートします。 | ドキュメント |
| Azure | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用してAzure Storageファイルの読み込みをサポートします。 | ドキュメント | |
| Google Cloud Storage | | Google Cloud Storageからのファイル読み込みについて、Dorisは非同期S3 Loadと同期TVFの2つの方法を提供します。 | ドキュメント |
| MinIO |  | Dorisは非同期（S3 Load）と同期（TVF）の両方の方法を使用してMinIOファイルの読み込みをサポートします。 | ドキュメント |
| HDFS | Hive MetastoreやHive Metastoreと互換性のあるメタデータサービスに接続することで、Dorisは自動的にHiveデータベースとTable情報を取得し、データクエリを行うことができます。 | ドキュメント |
データ取り込み
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| Doris Streamloader |  | Doris StreamloaderはApache Dorisにデータを読み込むために設計されたクライアントツールです。curlを使用したシングルスレッド読み込みと比較して、並行読み込み機能により大規模データセットの読み込み遅延を削減します。 | ドキュメント |
| Apache SeaTunnel |  | SeaTunnelは非常に使いやすく、超高性能の分散データ統合プラットフォームで、大量データのリアルタイム同期をサポートします。 | ドキュメント |
| BladePipe | BladePipeはリアルタイムエンドツーエンドデータレプリケーションツールで、30以上のデータベース、メッセージキュー、検索エンジン、キャッシュ、リアルタイムデータウェアハウス、データレイクなどの間でデータを移動し、3秒未満の超低遅延を実現します。 | ドキュメント |
その他
| 名前 | ロゴ | 説明 | リソース |
|---|---|---|---|
| AutoMQ |  | AutoMQは、S3のようなオブジェクトストレージにストレージを分離することによるKafkaのクラウドネイティブフォークです。 | ドキュメント |
| DataX | | DataX DoriswriterプラグインはMySQL、Oracle、SQL Serverなどの様々なデータソースからDorisへのStream Load方式を使用したデータ同期をサポートします。 | ドキュメント |
| Kettle |  | Kettle Doris PluginはKettleでStream Loadを通じて他のデータソースからDorisにデータを書き込むために使用されます。 | ドキュメント |
| Apache Kyuubi |  | Apache KyuubiはData WarehouseとLakehouse上でサーバーレスSQLを提供するための分散およびマルチテナントゲートウェイです。 | ドキュメント |