ES_CCS/R(三)：跨集群复制 Cross-cluster replication（CCR)

跨集群复制（CCR）功能支持将远程集群中的索引复制到本地集群。可以在一些常见的生产用例中使用此功能：

CCR概述：

版本要求：

许可：

CCR是官方在 6.7 版本以上提供了此功能。此功能以 x-pack 插件的形式提供，遵循Elasticsearch自定义的开源协议，为商业付费功能。关于官方的介绍

CCR过程解析：

复制过程主要分为两个阶段(对应ES写入的两个阶段，复制落地到磁盘的segment和复制写入缓存区还未落地到磁盘的数据)

如下图：

1、Step1的过程(复制segment到从集群)

通过remote recovery的功能进行复制，复制远程集群的segment到本地集群，是一个网络密集型的过程。可以通过以下参数控制复制过程对网络的压力。

ccr.indices.recovery.max_bytes_per_sec ：限制每个节点上的总入站和总出站的远程流量(速度)。(默认值是40mb)，当主集群和从集群都设置这个值后，先达到限制值的先其作用。即如果主集群设置20mb，从集群设置60mb，那么主集群也只会想从集群发送20mb。这个参数常用
ccr.indices.recovery.max_concurrent_file_chunks：复制文件的并行度，即可以同时复制接个文件，默认值是5，最大值为10.
ccr.indices.recovery.chunk_size：复制文件一次请求的最大限制，默认值是1mb
ccr.indices.recovery.recovery_activity_timeout：leader等待follower恢复请求的时间，默认值是60s
ccr.indices.recovery.internal_action_timeout：在远程恢复过程中单个网络请求的超时值，默认值是60s

2、Step2的执行过程(复制缓存区数据到从集群)

过程分解：

主要参数：

动手实践

1、参见：ES_CCS/R(二)：跨集群搜索 Cross-cluster search (CCS) 创建两个集群，在 cluster_1 上创建命名为： twitter 的索引并录入测试数据

2、在 cluster_2 上配置 remote cluster 并与 cluster_1连通，如下图：

3、点击 “Cross-Cluster Replication”，create a follower index，如下图：

4、配置完成后，自动复制功能已经在起作用。同时也可以直接使用 API 来完成，在 cluster_2 的 Kibana 中打入如下的命令：

1 PUT twitter_copy/_ccr/follow
2 {
3   "remote_cluster" : "remote_twitter",
4   "leader_index" : "twitter"
5 }

Flag :

参考资料：

标签：cluster,max,索引,Cross,CCS,replication,复制,集群,默认值
From： https://www.cnblogs.com/tgzhu/p/17090475.html