首页 > 其他分享 >ElasticSearch快照备份、还原

ElasticSearch快照备份、还原

时间：2023-07-17 12:11:40浏览次数：29  
标签：127.0 快照 0.1 my 备份 ElasticSearch snapshot backup

快照备份

备份和还原的前提：在配置文件elasticsearch.yml中设置path.repo

path.repo: ["D:\\elasticsearch-6.8.23\\elasticsearch-6.8.23\\snapshot_data"]

创建快照仓库

语法：

PUT http://127.0.0.1:9200/_snapshot/快照仓库名

实例：创建一个名叫my_fs_backup的快照仓库

PUT http://127.0.0.1:9200/_snapshot/my_fs_backup

{
    "type": "fs",
    "settings": {
        "location": "my_fs_backup_location", // 如果使用相对路径，则根据配置文件中的path.repo中的路径下创建文件夹
        "compress": true // 是否启用压缩
    }
}

查看快照仓库

GET http://127.0.0.1:9200/_snapshot/快照仓库名/

删除快照仓库

DELETE http://127.0.0.1:9200/_snapshot/快照仓库名/

开始快照备份

语法：

PUT http://127.0.0.1:9200/_snapshot/<快照仓库名>/快照备份名
    ?<wait_for_completion=false|true>&ignore_unavailable=false|true?include_global_state=false|true

# 快照的名称可以用这种方式，来创建名称中包含当前日期的快照，例如 snapshot-2018.05.11 ：
# 日志格式详见：https://www.elastic.co/guide/en/elasticsearch/reference/6.8/date-math-index-names.html
# PUT /_snapshot/my_backup/<snapshot-{now/d}>
# URL特殊字符要编码，上面的日志格式链接有详细说明。
PUT /_snapshot/my_backup/%3Csnapshot-%7Bnow%2Fd%7D%3E

wait_for_completion：是否等待快照备份完成，如果你的数据特别多会卡住很久的...
ignore_unavailable： 忽略不可用不存在的索引，默认为false，true则表示如果所有不存在，则会跳过而不是报错。
include_global_state：是否包含集群全局状态信息，默认为true。

实例：在my_fs_backup快照仓库中创建一个名为snapshot-1的快照，只备份completions,articles,news索引

PUT http://127.0.0.1:9200/_snapshot/my_fs_backup/snapshot-1
// 可以指定只备份那些索引
{
    "indices": "completions,articles,news"
}

查看快照的备份、还原情况

语法：

GET http://127.0.0.1:9200/_snapshot/<快照仓库名>/<快照名,支持通配符查找多个>/

# 加上_status可以获取更完整的信息
GET http://127.0.0.1:9200/_snapshot/<快照仓库名>/<快照名,支持通配符查找多个>/_status

实例：查看my_fs_backup仓库下的snapshot-1快照的情况

GET http://127.0.0.1:9200/_snapshot/my_fs_backup/snapshot-1/_status

返回：
{
    "snapshots": [
        {
            "snapshot": "snapshot-1", // 快照的名称
            "repository": "my_fs_backup", // 快照所在的快照仓库
            "uuid": "98Fv_sStR-ilW114aF768g",
            "state": "SUCCESS", // 快照的备份状态
            "include_global_state": true, // 该快照是否包含集群全局状态信息
            "shards_stats": {
                "initializing": 0,
                "started": 0,
                "finalizing": 0,
                "done": 9,
                "failed": 0,
                "total": 9
            },
            "stats": {
                "incremental": {
                    "file_count": 96,
                    "size_in_bytes": 631455
                },
                "total": {
                    "file_count": 96,
                    "size_in_bytes": 631455
                },
                "start_time_in_millis": 1688029820217,
                "time_in_millis": 86,
                "number_of_files": 96,
                "processed_files": 96,
                "total_size_in_bytes": 631455,
                "processed_size_in_bytes": 631455
            },
            "indices": { // 快照中的每个索引信息
                "news": {
                    "shards_stats": {
                        "initializing": 0,
                        "started": 0,
                        "finalizing": 0,
                        "done": 3,
                        "failed": 0,
                        "total": 3
                    },
                    "stats": {...略....}
                    "shards": { // 所以的分片信息
                        "0": { // 第1个分片
                            "stage": "DONE",
                            "stats": {
                                "incremental": {
                                    "file_count": 4,
                                    "size_in_bytes": 3759
                                },
                                "total": {
                                    "file_count": 4,
                                    "size_in_bytes": 3759
                                },
                                "start_time_in_millis": 1688029820289,
                                "time_in_millis": 14,
                                "number_of_files": 4,
                                "processed_files": 4,
                                "total_size_in_bytes": 3759,
                                "processed_size_in_bytes": 3759
                            }
                        },
                        "1": { //第2个分片
                            "stage": "DONE",
                            "stats": {...略....}
                        },
                        "2": {
                            "stage": "DONE",
                            "stats": {...略....}
                        }
                    }
                }
            }
        }
    ]
}

查看快照仓库下所有的快照

语法：

GET http://127.0.0.1:9200/_snapshot/<快照仓库名>/_all

实例：

{
    "snapshots": [
        {
            "snapshot": "snapshot-1",
            "uuid": "98Fv_sStR-ilW114aF768g",
            "version_id": 6082399,
            "version": "6.8.23",
            "indices": [
                "completions",
                "articles",
                "news"
            ],
            "include_global_state": true,
            "state": "SUCCESS",
            "start_time": "2023-06-29T09:10:20.185Z",
            "start_time_in_millis": 1688029820185,
            "end_time": "2023-06-29T09:10:20.310Z",
            "end_time_in_millis": 1688029820310,
            "duration_in_millis": 125,
            "failures": [],
            "shards": {
                "total": 9,
                "failed": 0,
                "successful": 9
            }
        },
        {
            "snapshot": "snapshot-2023.06.29",
            "uuid": "j_TNZ3NvT5yX-cEGogJVuQ",
            "version_id": 6082399,
            "version": "6.8.23",
            "indices": [
                "completions",
                "articles",
                "news"
            ],
            "include_global_state": true,
            "state": "SUCCESS",
            "start_time": "2023-06-29T09:28:58.952Z",
            "start_time_in_millis": 1688030938952,
            "end_time": "2023-06-29T09:28:59.033Z",
            "end_time_in_millis": 1688030939033,
            "duration_in_millis": 81,
            "failures": [],
            "shards": {
                "total": 9,
                "failed": 0,
                "successful": 9
            }
        }
    ]
}

集群环境的下的快照备份

多节点集群如何配置才能实现快照？
第一：建立共享文件系统：如NFS共享，确定每一个节点挂载到指定路径，才能创建快照存储库。
第二：在所有的主节点、数据节点都要配置相同的path.repo。

快照还原

还原步骤

1、设置各个节点（集群环境的每台都要设置）elasticsearch.yml中的path.repo（如果是还原到其他es实例上，这一步要做。）

2、创建快照仓库，和备份快照一样，都需要先创建快照仓库。

3、复制备份的快照文件到快照仓库指定的文件夹下（如果是还原到其他es实例上，这里假设是没有使用ftp等共享方式的快照仓库）

4、执行还原快照的命令

POST /_snapshot/<快照仓库名>/<快照名>/_restore

// 还原的时候可以进行一些设置
{
  "indices": "index_1,index_2", // 只还原指定的索引
  "ignore_unavailable": true, // 忽略不可用索引
  "include_global_state": true, // 包含es集群全局状态信息
  // rename_pattern 和rename_replacement用于使用正则表达式重命名索引
  "rename_pattern": "index_(.+)",
  "rename_replacement": "restored_index_$1"
}

实例：

POST http://127.0.0.1:9201/_snapshot/my_fs_backup/snapshot-1/_restore

停止正在运行的快照和恢复操作

DELETE /_snapshot/<快照仓库名>/<快照名>

其他还原查看命令

查看还原信息
GET http://127.0.0.1:9200/_recovery/

查看正在运行的快照
GET /_snapshot/my_backup/_current

标签：127.0,快照,0.1,my,备份,ElasticSearch,snapshot,backup
From： https://www.cnblogs.com/juelian/p/17559735.html

相关文章

  • 2.ElasticSearch入门
    一、初步检索1、_catGET/_cat/nodes:查看所有结点GET/_cat/health:查看es的健康状况GET/_cat/master:查看主节点GET/_cat/indices：查看所有索引2、索引一个文档保存一个数据，保存在哪个索引的哪个类型下，指定用哪个唯一标识PUTcustomer/external/1:在customer......
  • 1-ElasticSearch - Docker安装
    1、下载镜像文件dockerpullelasticsearch:7.4.2dockerpullkibana:7.4.22、创建实例创建文件夹和配置文件mkdir-p/mydata/elasticsearch/configmkdir-p/mydata/elasticsearch/dataecho"http.host:0.0.0.0">>/mydata/elasticsearch/config/elasticsearch.yml创......
  • redis 更改备份路径
    Redis更改备份路径简介Redis是一个开源的高性能键值对存储系统，常用作缓存、消息队列和数据库等应用。在运维Redis时，备份是非常重要的一项任务。默认情况下，Redis将备份数据存储在与Redis配置文件（redis.conf）相同的目录中。然而，有时我们可能希望将备份数据存储在其他位置，以提高数据......
  • Elasticsearch：使用 runtime fields 探索你的数据
    Elasticsearch考虑要提取字段的大量日志数据。为数据建立索引非常耗时，并且会占用大量磁盘空间，而你只想探索数据结构而无需预先提交schema。你知道你的日志数据包含你要提取的特定字段。在这种情况下，我们要关注@timestamp和消息字段。通过使用运行时字段（runtimefields），你可以......
  • 微小企业的数据备份方案
    问题企业内部的文件，系统，数据库等需要备份。最开始我们是采用挂接NFS->jenkinsjob(定时）->ossutil===》阿里云oss库直到发现每个月需要1000+的接口调用费用，当时就哭了。阿里云的服务是隐藏的贵，所以，上云的时候一定要规划好，否则，每个月的账单让人想骂......
  • 在Docker上实战ElasticSearch以及与SpringBoot集成
    简介项目地址：https://gitee.com/charlinchenlin/wysmallElasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTfulweb接口。Elasticsearch是用Java语言开发的，并作为Apache许可条款下的开放源码发布，是一种流行的企业级搜索引擎。Elastic......
  • 实现LVM的备份还原，结合binlog恢复最新状态
    -备份过程1实现LVMmkdir/data/{mysql,binlog}vim/etc/fstabmount/dev/vg0/lv_mysql/data/mysqlmount/dev/vg0/lv_binlog/data/binlogchown-Rmysql.mysql/data/vim/etc/my.cnfdatadir=/data/mysqllog_bin=/data/binlog/mysql-binsystemctlrestartmariadb2mysq......
  • KingbaseES V8R6集群运维案例之---single-pro模式备份
    案例说明：KingbaseESV8R6集群物理备份配置参数_target_db_style，可选single或cluster或single-pro。single对应单机模式的目标数据库实例，cluster对应集群模式的目标数据库实例，single-pro对应集群模式的每个DB节点独立备份。本案例详细描述集群架构在singl-pro模式下的备份。适用......
  • Docker安装ElasticSearch
    Docker安装ElasticSearch标签（空格分隔）：linux安装ElasticSearch版本：elasticsearch:7.10.1mkdir-p/usr/local/elasticsearch/configmkdir-p/usr/local/elasticsearch/datachmod777-R/usr/local/elasticsearch/echo"http.host:0.0.0.0">>/usr/local/el......
  • 视频融合平台EasyCVR接口调用正常，但快照不显示是什么原因？
    EasyCVR平台能在复杂的网络环境中，将分散的各类视频资源进行统一汇聚、整合、集中管理，实现视频资源的鉴权管理、按需调阅、全网分发、智能分析等，平台融合性强、开放度高、部署轻快，在智慧工地、智慧园区、智慧工厂、智慧码头、智慧水利等场景中有着广泛的应用前景。有用户反馈，现场......

赞助商

阅读排行

网站主页关于我们联系我们网站地图

本网站内容转载自其他媒体，侵权联系[admin##ips99.com]。

Copyright © 2020-2023 IPS99 版权所有 IPS99