機能詳細

DorisのCross-Cluster Replication（CCR）機能は、主に複数のクラスター間で効率的にデータを同期するために使用され、それによってビジネス継続性とディザスタリカバリ機能を強化します。CCRはDorisの様々な操作をサポートし、異なるクラスター間でのデータ整合性を保証します。以下は、CCRがサポートする主要なDoris操作の詳細です。

注記

1. Doris Versionの-は、Dorisバージョン2.0以上、CCRの全バージョンを示します。Dorisバージョン2.0.15または2.1.6以降の使用を推奨します。
2. CCR SyncerとDorisのバージョン要件：Syncer Version >= Downstream Doris Version >= Upstream Doris Version。そのため、最初にSyncer、次にダウンストリームDoris、最後にアップストリームDorisの順でアップグレードしてください。
3. CCRは現在、ストレージとコンピュートの分離をサポートしていません。

Database

Database Properties

データベースレベルのジョブは、Full Sync中にデータベースのプロパティを同期します。

Property	Supported	Doris Version	Sync Method	デスクリプション
replication_allocation	Supported	-	Full Sync
data quota	Not Supported
replica quota	Not Supported

Modify Database Properties

CCRジョブは、データベースプロパティを変更する操作を同期しません。

Property	Supported	Can Upstream Operate	Can Downstream Operate	デスクリプション
replication_allocation	Not Supported	No	No	両側での操作はCCRジョブの中断を引き起こします
data quota	Not Supported	Yes	Yes
replica quota	Not Supported	Yes	Yes

Rename Database

アップストリームとダウンストリームでの名前変更はサポートされていません。実行した場合、ビューが動作しなくなる可能性があります。

Table

Table Properties

Property	Supported	Doris Version	Sync Method	デスクリプション
Table Model (duplicate, unique, aggregate)	Supported	-	SQL
パーティション and Bucketing	Supported	-	SQL
replication_num	Supported	-	SQL
replication_allocation (resource group)	Supported	-	SQL	アップストリームはダウンストリームと一致している必要があり、BEタグが一致している必要があります。そうでないと、CCRジョブが失敗します
colocate_with	Not Supported
storage_policy	Not Supported
dynamic_partition	Supported	-	SQL
storage_medium	Supported	-	SQL
auto_bucket	Supported	-	SQL
group_commit series	Supported	-	SQL
enable_unique_key_merge_on_write	Supported	-	SQL
enable_single_replica_compaction	Supported	-	SQL
disable_auto_compaction	Supported	-	SQL
compaction_policy	Supported	-	SQL
time_series_compaction series	Supported	-	SQL
binlog series	Supported	-	SQL
skip_write_index_on_load	Supported	-	SQL
row_store series	Supported	-	SQL
seq column	Supported	-	SQL
enable_light_schema_change	Supported	-	SQL
compression_type	Supported	-	SQL
index	Supported	-	SQL
bloom_filter_columns	Supported	-	SQL
bloom_filter_fpp	Supported
storage_cooldown_time	Not Supported
generated column	Supported	-	SQL
auto-increment id	Not Supported			問題があります

Basic Table 運用

Operation	Supported	Doris Version	Sync Method	Can Downstream Operate Independently	デスクリプション
create table	Supported	-	SQL/Partial Sync	CCRジョブによって同期されるTableでは操作できません。	Table作成のプロパティについては、ほとんどの場合、SQL同期を使用します。ユーザーが特定のセッション変数を設定した場合や、create table文に転置インデックスが含まれている場合など、一部の操作ではpartial syncを使用します
drop table	Supported	-	SQL/Full Sync	上記と同じ	2.0.15/2.1.6以前：Full Sync、以降：SQL
rename table	Tableレベルジョブはデータベースレベルジョブをサポートしません	2.1.8/3.0.4	SQL	上記と同じ	Tableレベルジョブの名前変更はCCRジョブの停止を引き起こします
replace table	Supported	2.1.8/3.0.4	SQL/Full Sync	上記と同じ	データベースレベル同期ではSQLを使用します。Tableレベルではフル同期をトリガーします
truncate table	Supported	-	SQL	上記と同じ
restore table	Not Supported			上記と同じ

Modify Table Properties

同期方法はSQLです。

Property	Supported	Doris Version	Can Upstream Operate	Can Downstream Operate	デスクリプション
colocate	Not Supported		Yes	No	ダウンストリーム操作でのフル同期のトリガーはデータ損失を引き起こします
distribution type	Not Supported		No	Same
dynamic partition	Not Supported		Yes	Same
replication_num	Not Supported		No	No
replication_allocation	Not Supported		No
storage policy	Not Supported		No	No
enable_light_schema_change	Not Supported				CCRは軽量スキーマ変更のみを同期できます。
row_store	Supported	2.1.8/3.0.4			Partial Syncを通じて
bloom_filter_columns	Supported	2.1.8/3.0.4			Partial Syncを通じて
bloom_filter_fpp	Supported	2.1.8/3.0.4			Partial Syncを通じて
bucket num	Not Supported		Yes	No	ダウンストリーム操作でのフル同期のトリガーはデータ損失を引き起こします
isBeingSynced	Not Supported		No	No
compaction series properties	Not Supported		Yes	No	ダウンストリーム操作でのフル同期のトリガーはデータ損失を引き起こします
skip_write_index_on_load	Not Supported		Yes	Same
seq column	Supported	-	Yes	No	ダウンストリーム操作でのフル同期のトリガーはデータ損失を引き起こします
delete sign column	Supported	-	Yes	Same
comment	Supported	2.1.8/3.0.4	Yes	No	ダウンストリーム操作でのフル同期のトリガーはデータ損失を引き起こします

Column 運用

Table内のBase Indexでのカラム操作。

Operation	Supported	Doris Version	Sync Method	Can Downstream Operate	Remarks
add key column	Supported	-	Partial Sync	No
add value column	Supported	-	SQL	No
drop key column	Supported	-	Partial Sync	Same
drop value column	Supported	-	SQL	Same
modify column	Supported	-	Partial Sync	Same
order by	Supported	-	Partial Sync	Same
rename	Supported	2.1.8/3.0.4	SQL	Same
comment	Supported	2.1.8/3.0.4	SQL	Same

注記

valueカラムの追加/削除には、Table作成時にプロパティ"light_schema_change" = "true"を設定する必要があります。

Table内のRollup Indexでのカラム操作。

Operation	Supported	Doris Version	Sync Method	Remarks
add key column	Supported	2.1.8/3.0.4	Partial Sync
add value column	Supported	2.1.8/3.0.4	SQL	ライトニングスキーマ変更の有効化が必要
drop column	Supported	2.1.8/3.0.4	Partial Sync
modify column	Unknown	2.1.8/3.0.4	Partial Sync	Dorisはrollupカラムタイプの直接変更をサポートしていません
order by	Supported	2.1.8/3.0.4	Partial sync

Rollup

Operation	Supported	Doris Version	Sync Method	Remarks
add rollup	Supported	2.1.8/3.0.4	Partial Sync
drop rollup	Supported	2.1.8/3.0.4	SQL
rename rollup	Supported	2.1.8/3.0.4	SQL

Index

Inverted Index

Operation	Supported	Doris Version	Sync Method	Remarks
create index	Supported	2.1.8/3.0.4	Partial Sync
drop index	Supported	2.1.8/3.0.4	SQL
build index	Supported	2.1.8/3.0.4	SQL

Bloom Filter

Operation	Supported	Doris Version	Sync Method	Remarks
add bloom filter	Supported	2.1.8/3.0.4	Partial Sync
alter bloom filter	Supported	2.1.8/3.0.4	Partial Sync	これはbloom_filter_columnsの変更を指します
drop bloom filter	Supported	2.1.8/3.0.4	Partial Sync

Data

Import

Import Method	Supported	Doris Version	Sync Method	Can Downstream Operate	デスクリプション
stream load	Supported（一時パーティション除く）	-	TXN	No、ダウンストリームがインポートした場合、その後のフルまたはPartial Syncのトリガーがデータ損失を引き起こします	アップストリームトランザクションが可視、つまりbinlog生成時にデータが可視になると、ダウンストリームが同期を開始します。
broker load	Supported（一時パーティション除く）	-	TXN	Same	Same
routine load	Supported（一時パーティション除く）	-	TXN	Same	Same
mysql load	Supported（一時パーティション除く）	-	TXN	Same	Same
group commit	Supported（一時パーティション除く）	2.1	TXN	Same	Same

Data 運用

Operation	Supported	Doris Version	Sync Method	Can Downstream Operate	デスクリプション
delete	Supported	-	TXN	No、ダウンストリームが操作した場合、その後のフルまたはPartial Syncのトリガーがデータ損失を引き起こします	アップストリームトランザクションが可視、つまりbinlog生成時にデータが可視になると、ダウンストリームが同期を開始します。
update	Supported	-	TXN	Same	Same
insert	Supported	-	TXN	Same	Same
insert into overwrite	Supported（一時パーティション除く）	2.1.6	Partial Sync	Same	Same
insert into overwrite	Supported（一時パーティション除く）	2.0	full sync	Same	Same
Explicit transaction (3.0) begin commit	Not Supported

パーティション 運用

Operation	Supported	Doris Version	Sync Method	Can Downstream Operate Independently	デスクリプション
add partition	Supported	-	SQL	No、その後のFull SyncまたはPartial Syncのトリガーがダウンストリーム操作の消失を引き起こします	cooldown timeプロパティとその動作は不明です
add temp partition	Not Supported			Same	バックアップはtemp partitionをサポートしていません。Doris 2.1.8/3.0.4以降、アップストリームFE設定：ignore_backup_tmp_partitionsを変更してこの問題を回避できます
drop partition	Supported	-	SQL/Full Sync	Same	2.0.15/2.1.6以前：Full Sync、以降：SQL
replace partition	Supported	2.1.7/3.0.3	Partial Sync	Same	Partial Syncはstrict rangeおよび非temp partitionのreplace方法のみをサポートし、そうでない場合はFull Syncをトリガーします。
modify partition	Not Supported			Same	パーティションのプロパティの変更を指します
rename partition	Supported	2.1.8/3.0.4	SQL	Same

Views

Operation	Supported	Doris Version	Sync Method	Remarks
create view	Supported	-	SQL	アップストリームとダウンストリームが同じ名前の場合に動作します。ダウンストリームに既に存在する場合は、作成前に削除されます
alter view	Supported	2.1.8/3.0.4	SQL
drop view	Supported	2.1.8/3.0.4	SQL

::: note

Doris実装の制限により、ビュー内のカラム名/ビュー名をデータベース名と同じにすることはできません。

:::

Materialized Views

マテリアライズドビューの同期

Operation	Supported	Doris Version	Sync Method	Remarks
create materialized view	Supported	2.1.8/3.0.4	Partial Sync	アップストリームとダウンストリームが同じ名前の場合に動作します。異なる名前の場合、ダウンストリームでビューを手動で再構築する必要があります。
drop materialized view	Supported	2.1.8/3.0.4	SQL

非同期マテリアライズドビュー

Operation	Supported
create async materialized view	Not Supported
alter async materialized view	Not Supported
drop async materialized view	Not Supported
refresh	Not Supported
pause	Not Supported
resume	Not Supported

Statistics

アップストリームとダウンストリーム間で同期されず、独立して操作します。

Others

Operation	Supported
external table	Not Supported
recycle bin	Not Supported
catalog	Not Supported
workload group	Not Supported
job	Not Supported
function	Not Supported
policy	Not Supported
user	Not Supported
cancel alter job	Supported