1、ES滾動重啟：

#準備工作：
##提前開啟如下資訊，有些API是需要觀察的各項指標（出現問題則停止重啟），其餘是配合檢查的API：
##檢視叢集UNASSIGEN shards 原因
curl http://0.0.0.0:9200/_cluster/allocation/explain?pretty

###叢集配置
curl http://0.0.0.0:9200/_cluster/settings?pretty

###pending-tasks
curl http://0.0.0.0:9200/_cluster/pending_tasks?pretty

###叢集健康
curl http://0.0.0.0:9200/_cluster/health?pretty


#重啟client-node組節點
#start
步驟1：關閉其中一個client節點
步驟2：重啟節點
步驟3：檢查節點是否加入叢集
步驟4：重複步驟2-3重啟其他節點
#end

#重啟mater-node節點
#start
步驟1：明確master節點IP
步驟2：關閉master-node組的一個非master節點
步驟3：重啟節點
步驟4：檢查節點是否加入叢集（確保已經加入叢集）
步驟5：重複步驟2-4，重啟另外的master-node組的一個非master節點
步驟6：關閉master節點
步驟7：重啟master節點
##在master節點選舉過程中，叢集功能不可用（包括了：索引功能、search功能，API功能堵塞等），叢集並不會立即選舉出master節點（預設進行選舉的時間為3s, 由於網路的問題，往往將master選舉的時間延長）
步驟8：檢查叢集裝填，檢查節點是否加入叢集。
##當master選舉出來，叢集功能將全部正常。
#end

#重啟data-node節點
#start
步驟1：禁用分片分配
curl -X PUT http://0.0.0.0:9200/_cluster/settings?pretty -d '{"transient": {"cluster.routing.allocation.enable": "new_primaries"}}'
##禁用分片分配期間，叢集新建索引將無法分配副本分片，允許新建索引主分片的分配
步驟2：執行同步重新整理
curl -XPOST "http://0.0.0.0:9200/_flush/synced?pretty"
##對於在此刻不在更新的索引，此操作將通過synced值來確認主副分片是否資料一致（加快了分片加入叢集的時間）；對於在此刻索引發生變化的分片，此操作對節點加入叢集的索引恢復沒有作用
步驟3：關閉一個data-node節點
步驟4：重啟節點
步驟5：檢查節點是否加入叢集
步驟6：啟用分片分配
curl -X PUT http://0.0.0.0:9200/_cluster/settings?pretty -d '{"transient": {"cluster.routing.allocation.enable": "all"}}'
步驟7：檢查叢集狀態是否為green
##在啟用了分片分配後，UNASSIGEN shards會瞬間減少（不會瞬間減少為0，因為在大的ES叢集中，每個節點都會有在更新的索引分片）；之後會出現一些initializing shards，這部分分片會需要等待一段時間才會減少為0（分片同步過程中）
步驟8：重複步驟3-7，重啟其他節點
步驟9：節點全部重啟完畢後，檢查叢集配置，確保沒有禁用分片分配
#end

參考資料：

ES官方重啟教程 https://www.elastic.co/guide/en/elasticsearch/reference/1.4/cluster-nodes-shutdown.html#_rolling_restart_of_nodes_full_cluster_restart

2、ES常用設定：
ES cluster的settings：

{"persistent":{"cluster.routing.allocation.node_concurrent_recoveries": 8}}
允許在節點上併發分片恢復的個數（寫和讀），只控制“恢復”過程的併發數，對叢集“重平衡”和其他情況下的併發數沒有影響。

{"persistent":{"cluster.routing.allocation.node_initial_primaries_recoveries": 16}}
控制節點重啟後有多少併發數從本地恢復未分配的主分片。

{"persistent":{"indices.recovery.max_bytes_per_sec": "200mb"}}

設定索引恢復時每秒位元組數。

{"transient":{"cluster.routing.allocation.cluster_concurrent_rebalance": 4}}
允許在叢集上併發分片重平衡的個數，只控制“重平衡”過程的併發數，對叢集“恢復”和其他情況下的併發數沒有影響。

{"transient":{"cluster.routing.allocation.cluster_concurrent_rebalance": 0}}
禁用叢集“rebalance”

{"transient":{"cluster.routing.allocation.cluster_concurrent_rebalance": null}}
啟用叢集“rebalance”

#調整叢集恢復併發數為4
curl -XPUT http://<domain>:<port>/_cluster/settings?pretty -d'{"transient":{"cluster.routing.allocation.node_concurrent_recoveries": 4}}'
#取消設定，叢集恢復併發數為預設
curl -XPUT http://<domain>:<port>/_cluster/settings?pretty -d'{"transient":{"cluster.routing.allocation.node_concurrent_recoveries": null}}'

#通過IP，排除叢集中的某個節點：節點IP：10.100.0.11
curl -XPUT http://<domain>:<port>/_cluster/settings?pretty -d '{"transient":{"cluster.routing.allocation.exclude._ip":"10.100.0.11"}}'
#通過IP，排除叢集中的多個節點：節點IP：10.10.0.11,10.100.0.12
curl -XPUT http://<domain>:<port>/_cluster/settings?pretty -d '{"transient":{"cluster.routing.allocation.exclude._ip":"10.100.0.11,10.100.0.12"}}'
#取消節點排除的限制
curl -XPUT http://<domain>:<port>/_cluster/settings?pretty -d '{"transient":{"cluster.routing.allocation.exclude._ip": null}}'

#調整資料節點的低水位值為600gb
curl -XPUT http://<domain>:<port>/_cluster/settings?pretty -d '{"transient":{"cluster.routing.allocation.disk.watermark.low":"600gb"}}'
#調整資料節點的高水位值為300gb
curl -XPUT http://<domain>:<port>/_cluster/settings?pretty -d '{"transient":{"cluster.routing.allocation.disk.watermark.high":"300gb"}}'
#取消使用者設定，叢集恢復這一項的預設配置
curl -XPUT http://<domain>:<port>/_cluster/settings?pretty -d '{"transient":{"cluster.routing.allocation.disk.watermark.low": null}}'
curl -XPUT http://<domain>:<port>/_cluster/settings?pretty -d '{"transient":{"cluster.routing.allocation.disk.watermark.low": null}}'