メインコンテンツまでスキップ
バージョン: 26.x

インテグレーション概要

VeloDBのインテグレーションは、BI、Lakehouse、Observability、SQLクライアント、データソース、データ取り込み、データ処理のカテゴリに分類されます。

このVeloDB / Apache Dorisインテグレーションのリストは継続的に更新されており、まだ完全ではありません。関連するVeloDB / Apache Dorisインテグレーションの貢献をお待ちしており、リストの拡充にご協力ください。インテグレーションリストの更新についてお問い合わせください。

Lakehouse

名前ロゴ説明リソース
Apache IcebergaaicebergDorisは様々なメタデータサービスを通じてIcebergテーブルデータへのアクセスをサポートしています。データ読み取りに加えて、DorisはIcebergテーブルへの書き込みもサポートしています。ドキュメント
Apache HudiHudiHive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHudiのデータベースとテーブル情報を自動的に取得し、データクエリを実行できます。ドキュメント
Amazon GlueAWS Glue Catalogを使用してCREATE CATALOGを通じてIcebergテーブルまたはHiveテーブルにアクセスします。ドキュメント
Apache PaimonDorisは現在、様々なメタデータサービスを通じてPaimonテーブルメタデータへのアクセスとPaimonデータのクエリをサポートしています。ドキュメント
Apache HiveHive MetastoreまたはHive Metastoreと互換性のあるメタデータサービスに接続することで、DorisはHiveデータベースとテーブル情報を自動的に取得し、データクエリを行えます。ドキュメント
BigQueryBigQueryBigQuery CatalogはTrino Connector互換性フレームワークを使用してBigQuery ConnectorによりBigQueryテーブルにアクセスします。ドキュメント
Apache KuduKuduKudu CatalogはTrino Connector互換性フレームワークを使用してKudu ConnectorによりKuduテーブルにアクセスします。ドキュメント
LakeSoulDorisはPostgreSQLに保存されたメタデータを使用してLakeSoulテーブルデータへのアクセスと読み取りをサポートしています。ドキュメント
MaxComputeMaxComputeMaxComputeはAlibaba Cloud上のエンタープライズレベルSaaS(Software as a Service)クラウドデータウェアハウスです。ドキュメント

Observability

名前ロゴ説明リソース
OpentelemetryOpentelemetryAWS Glue Catalogを使用してCREATE CATALOGを通じてIcebergテーブルまたはHiveテーブルにアクセスします。ドキュメント
LogstashLogstashはログ処理ETLフレームワーク(収集、前処理、ストレージシステムへの送信)で、ストレージシステムにデータを書き込むためのカスタム出力プラグインをサポートしています。ドキュメント
BeatsDorisは様々なメタデータサービスを通じてIcebergテーブルデータへのアクセスをサポートしています。データ読み取りに加えて、DorisはIcebergテーブルへの書き込みもサポートしています。ドキュメント
FluentbitFluentbitDorisは現在、様々なメタデータサービスを通じてPaimonテーブルメタデータへのアクセスとPaimonデータのクエリをサポートしています。ドキュメント

データ処理

名前ロゴ説明リソース
Apache SparkApache Spark logoSpark Doris ConnectorはSpark経由でDorisに保存されたデータの読み込みとDorisへのデータ書き込みをサポートできます。GitHub
ドキュメント
Apache FlinkflinkFlink Doris ConnectorはFlink経由でDorisクラスターからの読み込みとデータ統合/への書き込みに使用されます。GitHub
ドキュメント
dbtdbtdbt-dorisアダプタはdbt-coreをベースに開発され、mysql-connector-pythonドライバーに依存してデータをdorisに変換します。ドキュメント

BI


名前ロゴ説明リソース
Tableautableauビジネスインテリジェンスに特化したインタラクティブなデータ可視化ソフトウェアドキュメント
Power BIpowerbiMicrosoft Power BIはMicrosoftが開発したインタラクティブなデータ可視化ソフトウェア製品で、主にビジネスインテリジェンスに焦点を当てています。ドキュメント
QuickSightAmazon QuickSightは統一されたビジネスインテリジェンス(BI)でデータ主導型組織を支援します。ドキュメント
Apache SupersetApache Supersetはオープンソースのデータ探索プラットフォームです。豊富なデータソース接続と数多くの可視化方法をサポートします。ドキュメント
FineBIfinebiFineBIは豊富なデータソース接続と複数ビューでのテーブル分析・管理をサポートします。ドキュメント
SmartBIsmartbiSmartbiはOracle、SQL Server、MySQL、Dorisなど様々なデータソースに接続できるソフトウェアサービスとアプリケーションコネクタの集合体で、ユーザーが簡単にデータを統合・クレンジングできるようにします。ドキュメント
QuickBIquickbiQuick BIはデータウェアハウスベースのビジネスインテリジェンスツールで、企業が印象的な視覚的分析を迅速に構築できるよう支援します。ドキュメント

SQLクライアント


名前ロゴ説明リソース
DBeaverdbeaverDBeaverは開発者、データベース管理者、アナリスト、およびデータを扱うすべての人のためのクロスプラットフォームデータベースツールです。ドキュメント
DataGripicon_DataGripDataGripはJetBrains製の関係データベースおよびNoSQLデータベース向けの強力なクロスプラットフォームデータベースツールです。ドキュメント

データソース


名前ロゴ説明リソース
Apache KafkaDorisはリアルタイムストリーミング(CSV/JSON、Exactly-Once)向けの効率的なRoutine LoadとAdvanced形式向けのDoris Kafka Connectorを介してKafkaと統合されます。GitHub
ドキュメント
Doris Kafka ConnectorDorisはリアルタイムストリーミング(CSV/JSON、Exactly-Once)向けの効率的なRoutine LoadとAdvanced形式向けのDoris Kafka Connectorを介してKafkaと統合されます。GitHub
ドキュメント
MySQLDoris JDBC Catalogは標準JDBCインターフェース経由でMySQLデータベースへの接続をサポートします。ドキュメント
PostgreSQLDoris JDBC Catalogは標準JDBCインターフェース経由でPostgreSQLデータベースへの接続をサポートします。ドキュメント
Amazon S3amazon s3Dorisは非同期(S3 Load)と同期(TVF)の両方の方法を使用してS3ファイルの読み込みをサポートします。ドキュメント
AzureDorisは非同期(S3 Load)と同期(TVF)の両方の方法を使用してAzure Storageファイルの読み込みをサポートします。ドキュメント
Google Cloud StoragegcpGoogle Cloud Storageからファイルを読み込むために、Dorisは非同期S3 Loadと同期TVFの2つの方法を提供します。ドキュメント
MinIOMinIODorisは非同期(S3 Load)と同期(TVF)の両方の方法を使用してMinIOファイルの読み込みをサポートします。ドキュメント
HDFSHive MetastoreまたはHive Metastore互換のメタデータサービスに接続することで、DorisはHiveデータベースおよびテーブル情報を自動取得し、データクエリを実行できます。ドキュメント

データ取り込み

名前ロゴ説明リソース
Doris Streamloaderdoris streamloaderDoris StreamloaderはApache Dorisにデータを読み込むために設計されたクライアントツールです。curlを使用したシングルスレッド読み込みと比較して、並行読み込み機能により大規模データセットの読み込み遅延を削減します。ドキュメント
Apache SeaTunnelseatunnelSeaTunnelは非常に使いやすい超高性能分散データ統合プラットフォームで、大量データのリアルタイム同期をサポートします。ドキュメント
BladePipeBladePipeはリアルタイムのエンドツーエンドデータレプリケーションツールで、30以上のデータベース、メッセージキュー、検索エンジン、キャッシング、リアルタイムデータウェアハウス、データレイクなどの間でデータを移動し、3秒未満の超低遅延を実現します。ドキュメント

その他

名前ロゴ説明リソース
AutoMQautomqAutoMQはS3などのオブジェクトストレージにストレージを分離することによるKafkaのクラウドネイティブフォークです。ドキュメント
DataXdataxDataX DoriswriterプラグインはMySQL、Oracle、SQL Serverなど様々なデータソースからStream Load方式を使用してDorisにデータを同期することをサポートします。ドキュメント
KettlekettleKettle Doris PluginはKettle内でStream LoadによりDorisに他のデータソースからデータを書き込むために使用されます。ドキュメント
Apache KyuubikyuubiApache Kyuubiは、データウェアハウスやLakehouse上でサーバーレスSQLを提供する分散マルチテナントゲートウェイです。ドキュメント