2. 程式人生 > >elasticsearch數據備份恢復

elasticsearch數據備份恢復

阿新 • • 發佈：2017-05-19
elasticsearch數據備份恢復

本文主要介紹elasticsearch集群數據備份及恢復，利用共享文件系統，通過快照方式備份。

集群的部署參考：http://hnr520.blog.51cto.com/4484939/1876467

一、配置修改

1.配置文件必須添加如下參數

path.repo: /mnt/backups/es_mybak

二、數據備份

1.創建備份倉庫

curl -XPUT ‘http://192.168.115.11:9200/_snapshot/EsBackup‘ -d ‘{  
"type": "fs",
"settings": {
    "location": "/mnt/backups/es_mybak"
    }
}‘
[[email protected]
/* */ local]# curl -XPUT ‘http://192.168.115.11:9200/_snapshot/EsBackup‘ -d ‘{ > "type": "fs", > "settings": { > "location": "/mnt/backups/es_mybak" > } > }‘ {"acknowledged":true}

給我們的倉庫取一個名字，在本例它叫 EsBackup 。

我們指定倉庫的類型應該是一個共享文件系統，這裏采用nfs。

最後，我們提供一個已掛載的設備(/mnt/backups/es_mybak )作為目的地址。

註意：共享文件系統路徑必須確保集群所有節點都可以訪問到。

2.查詢備份倉庫

[[email protected] local]# curl -XGET ‘http://192.168.115.11:9200/_snapshot?pretty‘
{
  "EsBackup" : {
    "type" : "fs",
    "settings" : {
      "location" : "/mnt/backups/es_mybak"
    }
  }
}

3.備份所有索引

curl -XPUT ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_all‘
[[email protected]
*/ local]# curl -XPUT ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_all‘ {"accepted":true}

4.查看備份快照

curl -XGET ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_all?pretty‘
[[email protected] elasticsearch5]# curl -XGET ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_*?pretty‘ 
{
  "snapshots" : [
    {
      "snapshot" : "snapshot_all",
      "uuid" : "MRTYocxBT4qgwtpu_6jdpg",
      "version_id" : 5000199,
      "version" : "5.0.1",
      "indices" : [
        "els_student_hnr05",
        "hnrtest",
        "els_student_hnr03",
        "els_student",
        "els_student_hnr02",
        "els_student_hnr04",
        "els_python01",
        "els_student_hnr01"
      ],
      "state" : "SUCCESS",
      "start_time" : "2017-05-17T10:00:46.860Z",
      "start_time_in_millis" : 1495015246860,
      "end_time" : "2017-05-17T10:00:54.209Z",
      "end_time_in_millis" : 1495015254209,
      "duration_in_millis" : 7349,
      "failures" : [ ],
      "shards" : {
        "total" : 40,
        "failed" : 0,
        "successful" : 40
      }
    }
  ]
}

5.備份部分索引

curl -XPUT ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_els_student_hnr05‘ -d ‘{ "indices": "els_student_hnr05" }‘
[[email protected] elasticsearch5]# curl -XPUT ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_els_student_hnr05‘ -d ‘{ "indices": "els_student_hnr05" }‘
{"accepted":true}

6.查看備份快照

curl -XGET ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_els_student_hnr05?pretty‘
查看快照的詳細信息，可以看到每個shard的信息
curl -XGET ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_els_student_hnr05/_status?pretty‘
[[email protected] elasticsearch5]# curl -XGET ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_els_student_hnr05?pretty‘   
{
  "snapshots" : [
    {
      "snapshot" : "snapshot_els_student_hnr05",
      "uuid" : "hsSkWa63Ss6MJjh0Eo4arA",
      "version_id" : 5000199,
      "version" : "5.0.1",
      "indices" : [
        "els_student_hnr05"
      ],
      "state" : "SUCCESS",
      "start_time" : "2017-05-18T00:58:35.699Z",
      "start_time_in_millis" : 1495069115699,
      "end_time" : "2017-05-18T00:58:36.396Z",
      "end_time_in_millis" : 1495069116396,
      "duration_in_millis" : 697,
      "failures" : [ ],
      "shards" : {
        "total" : 5,
        "failed" : 0,
        "successful" : 5
      }
    }
  ]
}

三、.部分索引數據恢復

1.查詢索引

curl -XGET ‘192.168.115.11:9200/_cat/indices?v‘
health status index             uuid                   pri rep docs.count docs.deleted store.size pri.store.size
green  open   els_student_hnr05 mkvmTguZS4m1wGKbB8TOEw   5   1         99            0    124.7kb         62.3kb
green  open   hnrtest           Y-bjuEPLQTGGP88EafDlyg   5   1          0            0      1.5kb           795b
green  open   els_student_hnr03 _UHB6P-fRfucH7lEyE-C7g   5   1         99            0    146.7kb         73.3kb
green  open   els_student       JC69IBEjTji8jU6bxCDE3A   5   1        999            0    495.9kb        247.9kb
green  open   els_student_hnr02 k-aLl7tzRUyRfwJs8O0-kA   5   1         99            0    109.8kb         54.9kb
green  open   els_student_hnr04 zAkj7GvfQ-CqmuFMJUTSuA   5   1         99            0    162.8kb         81.4kb
green  open   els_python01      wmdREADVQmCX773_JDL46Q   5   1          0            0      1.5kb           795b
green  open   els_student_hnr01 BJlcIp7mS0ii9nDYj8UDyQ   5   1        100            0    109.2kb         54.6kb

2.刪除索引els_student_hnr05

[[email protected] elasticsearch5]# curl -XDELETE ‘http://192.168.115.11:9200/els_student_hnr05‘
{"acknowledged":true}

3.根據snapshot_els_student_hnr05快照恢復索引

curl -XPOST ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_els_student_hnr05/_restore‘
[[email protected] elasticsearch5]# curl -XPOST ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_els_student_hnr05/_restore‘
{"accepted":true}

4.再次查看索引

[[email protected] elasticsearch5]# curl -XGET ‘192.168.115.11:9200/_cat/indices?v‘
health status index             uuid                   pri rep docs.count docs.deleted store.size pri.store.size
green  open   hnrtest           Y-bjuEPLQTGGP88EafDlyg   5   1          0            0      1.5kb           795b
green  open   els_student_hnr05 S3AsHa4dRtuXXZ3uIDGvuQ   5   1         99            0    124.7kb         62.3kb

被刪除的索引els_student_hnr05已經恢復回來

四、數據完全恢復

1.關閉所有節點，刪除數據目錄下的所有數據，重新啟動集群

kill -9 $(ps -ef | grep -v grep | grep elasticsearch | awk ‘{print $2}‘)

2.重新啟動集群

技術分享

3.創建備份倉庫

curl -XPUT ‘http://192.168.115.11:9200/_snapshot/EsBackup‘ -d ‘{
"type": "fs",
"settings": {
    "location": "/mnt/backups/es_mybak"
    }
}‘

4.查看備份快照

curl -XGET ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_*?pretty‘
{
  "snapshots" : [
    {
      "snapshot" : "snapshot_all",
      "uuid" : "MRTYocxBT4qgwtpu_6jdpg",
      "version_id" : 5000199,
      "version" : "5.0.1",
      "indices" : [
        "els_student_hnr05",
        "hnrtest",
        "els_student_hnr03",
        "els_student",
        "els_student_hnr02",
        "els_student_hnr04",
        "els_python01",
        "els_student_hnr01"
      ],
      "state" : "SUCCESS",
      "start_time" : "2017-05-17T10:00:46.860Z",
      "start_time_in_millis" : 1495015246860,
      "end_time" : "2017-05-17T10:00:54.209Z",
      "end_time_in_millis" : 1495015254209,
      "duration_in_millis" : 7349,
      "failures" : [ ],
      "shards" : {
        "total" : 40,
        "failed" : 0,
        "successful" : 40
      }
    },
    {
      "snapshot" : "snapshot_els_student_hnr05",
      "uuid" : "hsSkWa63Ss6MJjh0Eo4arA",
      "version_id" : 5000199,
      "version" : "5.0.1",
      "indices" : [
        "els_student_hnr05"
      ],
      "state" : "SUCCESS",
      "start_time" : "2017-05-18T00:58:35.699Z",
      "start_time_in_millis" : 1495069115699,
      "end_time" : "2017-05-18T00:58:36.396Z",
      "end_time_in_millis" : 1495069116396,
      "duration_in_millis" : 697,
      "failures" : [ ],
      "shards" : {
        "total" : 5,
        "failed" : 0,
        "successful" : 5
      }
    }
  ]
}

5.恢復數據

curl -XPOST ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_all/_restore‘

6.查詢索引

[[email protected] elasticsearch5]# curl -XGET ‘192.168.115.11:9200/_cat/indices?v‘
health status index             uuid                   pri rep docs.count docs.deleted store.size pri.store.size
green  open   hnrtest           LNkwevA2Sr2Jgue1oLRIGA   5   1          0            0      1.5kb           795b
green  open   els_student       6aE8M7KMRN2EdievhDBXcw   5   1        999            0    495.9kb        247.9kb
green  open   els_student_hnr04 8hXeVjXYRhS5POdy3hnMuQ   5   1         99            0    162.8kb         81.4kb
green  open   els_student_hnr01 afVLqgxpTqii6pNObLC2sA   5   1        100            0    109.2kb         54.6kb
green  open   els_student_hnr05 jzHPY_TlSEm-ZEXWz0sz4Q   5   1         99            0    124.7kb         62.3kb
green  open   els_student_hnr02 f3hqeM1pQkWttZifnCCQDQ   5   1         99            0    109.8kb         54.9kb
green  open   els_python01      4_vFwhn0RCi3SZbz2bORCw   5   1          0            0      1.5kb           795b
green  open   els_student_hnr03 esFyZMwwTaeLf7YrKxyYjQ   5   1         99            0    146.7kb         73.3kb
至此所有索引已經完全恢復

技術分享


五、從全部索引快照中恢復單個索引

1.刪除索引els_student_hnr05

curl -XDELETE ‘http://192.168.115.11:9200/els_student_hnr05‘

2.恢復被刪除的索引els_student_hnr05

curl -XPOST ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_all/_restore‘ -d ‘{
    "indices": "els_student_hnr05", 
    "rename_replacement": "restored_index_$1"
}‘

六、刪除快照

curl -XDELETE ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_els_student_hnr05‘
curl -XDELETE ‘http://192.168.115.11:9200/_snapshot/EsBackup/snapshot_all‘


本文出自 “linux之路” 博客，請務必保留此出處http://hnr520.blog.51cto.com/4484939/1927320

elasticsearch數據備份恢復

相關推薦

elasticsearch數據備份恢復

elasticsearch數據備份恢復本文主要介紹elasticsearch集群數據備份及恢復，利用共享文件系統，通過快照方式備份。集群的部署參考：http://hnr520.blog.51cto.com/4484939/1876467一、配置修改1.配置文件必須添加如下參數path.repo: /mnt/

記一次測試環境Hbase數據備份恢復以及恢復後部分表無法刪除的問題處理

localhost mkdir folder max 一個表 任務 spa file config 一、Hbase數據備份恢復說明：因為測試環境要修改hadoop配置文件hdfs-site.xml的參數hdfs.rootdir修改前的配置 <property>

數據備份 恢復

vip time sql_mode 表數據 style database http nbsp 復制 Top NSD DBA1 DAY06 1 數據備份與恢復 1.1 問題 本案例要求熟悉MySQL的備份與恢復，完成以下任務操作： 邏輯備份工具 mysql

mysql數據庫數據備份與恢復

方法 can sql數據庫 local mini into chan query admin 備份數據： C:\Users\Administrator>mysqldump -uroot --password -v test01 test02 >e:\tem

表中 的數據 備份 和 恢復

delete -- lac values reat varchar let color into -- 建表 create table emp( sid int(8) primary key, sname varchar(10), sex varchar(2), chu

MongoDB的數據備份與恢復

端口 exe 備份與恢復 地址 per 容災 數據備份與恢復 .exe dbn 　　一、數據備份操作 　　　　在實際的應用場景中，經常需要對業務數據進行備份以做容災準備，mongodb提供了備份和恢復的功能，分別是MongoDB下載目錄下的mongodump.exe和mon

如何用sql server數據庫恢復.bak數據庫備份

bak 文件夾 建數據庫 名稱 這一 div 分享 alt 備份 @hcy（黃燦奕） 之前有兩次都恢復不了，折騰了很長時間，這一次碰到這樣的問題，居然又忘了，又搗鼓了很長時間，現在記下來 1.右擊SQL Server 2008實例下的“數據庫&

10gocm-&gt;session3-&gt;數據備份與恢復

gist 備份恢復 recovery tro padding 數據備份 學會 打開 man 這個實驗考查我們當數據庫出現問題宕機、數據丟失的情況下怎樣挽回我們的損失，怎樣在最短時間內恢復我們的數據庫服務。 RMAN規劃 host tar

三種VMware數據備份和恢復方法

vm備份方法 服務器虛擬化，尤其是VMware形式的服務器虛擬化使IT人員獲益良多，這麽說一點也不為過。據我們所見，服務器虛擬化能解決服務器擴張、資源消耗、服務器擴張、能源消耗、高可用性等相關問題。服務器虛擬化也使我們有更多的時間解決其它的迫切問題，如企業資源預案升級、存儲項目再三遷移。　　盡管VMw

python-day47--mysql數據備份與恢復

建庫 eat 系統 mys creat windows option 導出 目標 一、IDE工具介紹 掌握： #1. 測試+鏈接數據庫 #2. 新建庫 #3. 新建表，新增字段+類型+約束 #4. 設計表：外鍵 #5. 新建查詢 #6. 備份庫/表 #註意： 批量加註釋

MySQL 數據備份與恢復

mar target 備份與恢復 bsp 恢復 art sql get mysql mysqldump 數據備份與恢復 mysqlbinlog 數據增量恢復 MySQL 數據備份與恢復

DBA成長之路---mysql數據備份與恢復

insert describe status use 表結構 command osi 5.7 數據 數據備份與恢復備份方式： 物理備份：直接拷貝備份庫和表對應的文件 cp -r /var/lib/mysql/mysql /mysql.bak

oracle12c數據備份、恢復策略

arc compress pass overflow tom tps space 開始 esp 對oracle不太了解，只會簡單的startup、shutdown、lsnrctl start等命令，不喜歡oracle，不好用請按實際情況修改username、password

04： 用戶授權及撤銷 、 數據備份與恢復 、 MySQL管理工具

languages ref bash 恢復密碼 option p12 是否 空間 list day04一 、管理root用戶密碼1.1 修改密碼1.2 恢復密碼 二、用戶授權與權限撤銷2.1 授權2.2 撤銷權限 三、安裝圖形管理工具 四 數據備份與恢復 ----- 完全備

數據庫 之 數據備份和恢復概念

負載 實現 黑客 sql 復數 狀態 sel 環境 需要 本文主要介紹數據備份和恢復的相關概念備份：存儲的數據副本； 原始數據：持續改變；恢復：把副本應用到線上系統； 僅能恢復至備份操作時刻的數據狀態； 時間點恢復：通過binary logs實現基於時間點的恢復; 為什麽備

MySQL數據備份與恢復

sample password 常用選項 yum port apply-log 自帶 刪除表 time 常見的MySQL管工具mysql 命令行 跨平臺 MySQL官方bundle包自帶 MySQL-Workbench 圖形 跨平臺 MySQL官方提供 MyS

Redis 數據備份與恢復

實例 nbsp star rep chm 恢復數據 安裝目錄 microsoft style Redis 數據備份與恢復 Redis SAVE 命令用於創建當前數據庫的備份。 語法 redis Save 命令基本語法如下： redis 127.0.0.1:6379>

數據庫數據備份和恢復

mysqldump mysql 數據庫備份(包括數據庫中的數據）：mysqldump -u root -p dbname > dbname.sql 導出數據庫結構（不含數據）mysqldump -u username -p -d dbname > dbname.sql 對數據進

Oracle 數據備份與恢復

earch base 數據庫 ras show let oba bubuko red 前言一：備份與恢復概述二：RMAN 工具概述1： RMAN 組件 1： RMAN命令執行器 1 [oracle@localhost ~]$ rman target syste

數據備份與恢復、系統備份與恢復

數據備份與恢復、系統備份與恢復數據備份與恢復、系統備份與恢復一、數據備份與恢復1、什麽是備份備份，即另外準備一–為應付文件、數據丟失或損壞等可能出現的意外情況，將電子計算機存儲設備中的數據復制到大容量存儲設備中2、備份對象的類別系統備份–針對整個操作系統進行備份–當操作系統損壞或者無法啟動時，能通過備份快速恢