- 最新动态
- 功能总览
- 服务公告
- 产品介绍
- 计费说明
- 快速入门
-
用户指南
- CSS服务权限管理
-
使用Elasticsearch搜索数据
- Elasticsearch使用流程
- Elasticsearch集群规划建议
- 创建Elasticsearch集群
- 访问Elasticsearch集群
- 导入数据至Elasticsearch集群
- 使用Elasticsearch集群搜索数据
- 增强Elasticsearch集群搜索能力
- 配置Elasticsearch集群网络
- 备份与恢复Elasticsearch集群数据
- 扩缩容Elasticsearch集群
- 升级Elasticsearch集群版本
- 管理Elasticsearch集群
- 管理Elasticsearch集群索引策略
- Elasticsearch集群监控与日志管理
- 查看Elasticsearch集群审计日志
- 使用OpenSearch搜索数据
- 使用Logstash迁移数据
- CSS服务资源监控
- 最佳实践
- API参考
- SDK参考
-
常见问题
- 产品咨询
- CSS集群访问
- CSS集群迁移
-
CSS集群搜索引擎使用
- CSS服务中为什么新创建的索引分片集中分配到单节点上?
- CSS服务中Elasticsearch 7.x集群如何在index下创建type?
- CSS服务中如何配置Elasticsearch索引副本数量?
- CSS服务中Elasticsearch集群分片过多会有哪些影响?
- 如何查看CSS集群的分片数以及副本数?
- CSS服务中Elasticsearch集群的节点node.roles为i表示什么意思?
- CSS服务中如何设置Elasticsearch集群的默认分页返回最大条数?
- CSS服务中如何更新Elasticsearch生命周期策略?
- CSS服务中如何设置Elasticsearch集群慢查询日志的阈值?
- CSS服务中如何清理Elasticsearch索引数据?
- CSS服务中如何清理Elasticsearch缓存?
- 使用delete_by_query命令删除Elasticsearch集群数据后,为什么磁盘使用率反而增加?
- CSS服务的Elasticsearch集群是否支持script dotProduct?
-
CSS集群管理
- 如何查看CSS集群所分布的可用区?
- CSS服务中Filebeat版本与集群版本的关系是什么?
- 如何获取CSS服务的安全证书?
- CSS服务中如何转换CER安全证书的格式?
- CSS服务中Elasticsearch和OpenSearch集群支持修改安全组吗?
- CSS服务中Elasticsearch集群如何设置search.max_buckets参数?
- CSS服务中如何修改Elasticsearch和OpenSearch集群的TLS算法?
- CSS服务中如何开启Elasticsearch和OpenSearch集群的安全审计日志?
- CSS服务中是否支持停止集群?
- CSS集群冻结索引后如何查询OBS上的索引占用量?
- 如何查看Elasticsearch和OpenSearch集群的系统默认插件列表
- CSS集群备份与恢复
- CSS集群监控与运维
-
故障排除
-
访问集群类
- 无法正常打开Kibana
- Elasticsearch针对filebeat配置调优
- Spring Boot使用Elasticsearch出现Connection reset by peer问题
- 为什么集群创建失败
- Elasticsearch集群出现写入拒绝“Bulk Reject”,如何解决?
- Elasticsearch集群创建index pattern卡住,如何解决?
- 云搜索控制台页面提示系统繁忙
- Elasticsearch集群报错:unassigned shards all indices
- es-head插件连接Elasticsearch集群报跨域错误
- 单节点集群打开Cerebro界面显示告警
- ECS无法连接到集群
- 集群不可用
- 数据导入导出类
-
功能使用类
- 无法备份索引
- 无法使用自定义词库功能
- 快照仓库找不到
- 集群一直处于快照中
- 数据量很大,如何进行快照备份?
- 集群突现load高的故障排查
- 使用ElasticSearch的HLRC(High Level Rest Client)时,报出I/O Reactor STOPPED
- Elasticsearch集群最大堆内存持续过高(超过90%)
- Elasticsearch集群更改规格失败
- 安全集群索引只读状态修改报错
- Elasticsearch集群某一节点分配不到shard
- 集群索引插入数据失败
- CSS创建索引报错“maximum shards open”
- 删除索引报错“403 Forbidden”是什么原因?
- Kibana中删除index pattern报错Forbidden
- 执行命令update-by-query报错“Trying to create too many scroll contexts”
- Elasticsearch集群无法创建pattern
- 端口访问类
-
访问集群类
- 视频帮助
- 产品术语
-
更多文档
-
用户指南(阿布扎比区域)
- 产品介绍
- 快速入门
- 权限管理
- 创建并接入集群
- 集群形态变更
- 导入数据到Elasticsearch
- 管理Elasticsearch类型集群
- 向量检索
- 使用Kibana相关操作
- 查询Elasticsearch SQL
- 增强特性
- 监控
- 审计
-
常见问题
- 产品咨询类
-
功能使用相关
- Elasticsearch是否支持不同VPC之间的数据迁移?
- 如何跨Region迁移CSS集群?
- 如何设置云搜索服务的慢查询日志的阈值?
- 如何更新CSS生命周期策略?
- 如何批量设置索引副本数为0?
- 为什么新创建的索引分片全部被分配到一个node节点上?
- 如何查询快照信息?
- 购买的低版本集群是否可以升级为高版本集群
- 集群被删除后是否还能恢复?
- 如何修改Elasticsearch集群的TLS算法?
- ES集群如何设置search.max_buckets参数?
- Elasticsearch集群中某个客户端节点的node.roles为i表示该节点是ingest节点吗?
- Elasticsearch 7.x集群如何在index下创建type?
- 安全模式集群相关
- 资源使用和更改相关
- 组件使用
- Kibana使用相关
- 访问集群相关
- 端口使用
- 修订记录
- API参考(阿布扎比区域)
-
用户指南(巴黎、阿姆斯特丹区域)
- 产品介绍
- 快速入门
- 权限管理
- 创建并接入集群
- 集群形态变更
- 导入数据到Elasticsearch
- 管理Elasticsearch类型集群
- 向量检索
- 使用Kibana相关操作
- 查询Elasticsearch SQL
- 增强特性
- 监控
- 审计
- 最佳实践
-
常见问题
- 产品咨询类
-
功能使用相关
- Elasticsearch是否支持不同VPC之间的数据迁移?
- 如何跨Region迁移CSS集群?
- 如何设置云搜索服务的慢查询日志的阈值?
- 如何更新CSS生命周期策略?
- 如何批量设置索引副本数为0?
- 为什么新创建的索引分片全部被分配到一个node节点上?
- 如何查询快照信息?
- 购买的低版本集群是否可以升级为高版本集群
- 集群被删除后是否还能恢复?
- 如何修改Elasticsearch集群的TLS算法?
- Elasticsearch集群如何设置search.max_buckets参数?
- Elasticsearch集群中某个客户端节点的node.roles为i表示该节点是ingest节点吗?
- Elasticsearch 7.x集群如何在index下创建type?
- 安全模式集群相关
- 资源使用和更改相关
- 组件使用
- Kibana使用相关
- 访问集群相关
- 端口使用
- 修订记录
- API参考 (巴黎、阿姆斯特丹区域)
-
用户指南(吉隆坡区域)
- 产品介绍
- 快速入门
- 权限管理
- 创建并接入集群
- 集群形态变更
- 导入数据到Elasticsearch
- 管理Elasticsearch类型集群
- 向量检索
- 使用Kibana相关操作
- 查询Elasticsearch SQL
- 增强特性
- 监控
- 审计
-
常见问题
- 产品咨询类
-
功能使用相关
- Elasticsearch是否支持不同VPC之间的数据迁移?
- 如何跨Region迁移CSS集群?
- 如何设置云搜索服务的慢查询日志的阈值?
- 如何更新CSS生命周期策略?
- 如何批量设置索引副本数为0?
- 为什么新创建的索引分片全部被分配到一个node节点上?
- 如何查询快照信息?
- 购买的低版本集群是否可以升级为高版本集群
- 集群被删除后是否还能恢复?
- 如何修改Elasticsearch集群的TLS算法?
- ES集群如何设置search.max_buckets参数?
- Elasticsearch集群中某个客户端节点的node.roles为i表示该节点是ingest节点吗?
- Elasticsearch 7.x集群如何在index下创建type?
- 安全模式集群相关
- 资源使用和更改相关
- 组件使用
- Kibana使用相关
- 访问集群相关
- 端口使用
- 修订记录
- API参考(吉隆坡区域)
-
用户指南(安卡拉区域)
- 产品介绍
- 快速入门
- 权限管理
- 查看集群运行状态和存储容量状态
- 集群列表概览
- 部署跨AZ集群
- Elasticsearch
- 导入数据到Elasticsearch
- 监控
- 审计
-
常见问题
- 产品咨询类
-
功能使用相关
- Elasticsearch是否支持不同VPC之间的数据迁移?
- 如何跨Region迁移CSS集群?
- 如何设置云搜索服务的慢查询日志的阈值?
- 如何更新CSS生命周期策略?
- 如何批量设置索引副本数为0?
- 为什么新创建的索引分片全部被分配到一个node节点上?
- 如何查询快照信息?
- 购买的低版本集群是否可以升级为高版本集群
- 集群被删除后是否还能恢复?
- 如何修改Elasticsearch集群的TLS算法?
- ES集群如何设置search.max_buckets参数?
- Elasticsearch集群中某个客户端节点的node.roles为i表示该节点是ingest节点吗?
- Elasticsearch 7.x集群如何在index下创建type?
- 安全模式集群相关
- 资源使用和更改相关
- 组件使用
- Kibana使用相关
- 访问集群相关
- 端口使用
- 修订记录
- API参考(安卡拉区域)
-
用户指南(阿布扎比区域)
- 通用参考
链接复制成功!
备份与恢复索引
为避免数据丢失,您可以将集群的索引数据进行备份,当数据发生丢失或者想找回某一时间段数据时,您可以通过恢复索引操作快速获得数据。索引的备份是通过创建集群快照实现。第一次备份时,建议将所有索引数据进行备份。
- 管理自动创建快照:自动创建快照指按照设置的规则,每天在指定时间自动创建快照。您可以开启自动创建功能、设置自动创建的策略、和关闭自动创建功能。
- 手动创建快照:在任意时间,您通过手动创建快照的方式,针对当时的数据或某几个索引创建快照进行备份。
- 恢复数据:将已有的快照,通过恢复快照功能,将备份的索引数据恢复到指定的集群中。
- 删除快照:对于已失效的快照,建议删除以释放存储资源。
- 创建快照之前,您需要进行基础配置,包含存储快照的OBS桶、快照的备份路径及安全认证使用的IAM委托。
- 集群快照存储的OBS桶,在首次设置后,不管自动创建快照还是手动创建快照,如果快照列表中已有可用的快照,则OBS桶将无法再变更,请谨慎选择存储OBS桶。
- 如果OBS桶已经存储了快照,OBS无法变更,您可以使用这个方法修改:首先关闭快照功能,然后再开启快照功能,指定新的OBS桶。一旦关闭快照功能,之前创建的快照将无法用于恢复集群。
- 当集群处于“不可用”状态时,快照功能中,除了恢复快照功能外,其他快照信息或功能只能查看,无法进行编辑。
- 备份与恢复过程中,支持集群扩容、访问Kibana、查看监控、删除其他快照的操作。不支持重启此集群、删除此集群、删除正在创建或恢复的快照、再次创建或恢复快照的操作。补充说明,当此集群正在进行创建快照或者恢复快照时,此时,自动创建快照任务将被取消。
- CSS集群第一次快照是全量,后面再备份快照是在之前的快照基础上增量,CSS是增量快照逻辑,快照之间的文件会相互依赖。
- CSS集群快照恢复到另一个集群会覆盖标集群中的同名索引,不同名的索引不会覆盖。如果两个集群的shard不一样,则同名的索引不会被覆盖。
前提条件
登录云搜索服务管理控制台的帐号或IAM用户必须同时具备如下权限才能使用创建或恢复快照功能。
- “全局服务”中“对象存储服务”项目的“Tenant Administrator”权限。
- 当前所属区域的“Elasticsearch Administrator”权限。
管理自动创建快照
- 在云搜索服务管理控制台,单击左侧导航栏的“集群管理”。
- 在“集群管理”页面,单击需要进行备份的集群名称,进入集群基本信息页面。在左侧导航栏选择“集群快照”,进入“集群快照”管理页面。
- 在“集群快照”管理页面,在“集群快照开关”右侧单击开关,打开集群快照功能。
- 打开集群快照功能后,云搜索服务会自动为客户创建OBS桶和IAM委托,用于存储快照。自动创建的OBS桶和IAM委托将直接展示在界面中。如果您不希望使用自动创建的OBS桶和IAM委托,您可以在“基础配置”右侧单击
进行配置。
表1 集群快照基础配置的参数说明 参数
说明
OBS桶
在下拉框中选择存储快照的OBS桶。也可以单击右侧的“创建桶”新建OBS。
创建或者已存在的OBS桶需满足如下条件:
- “存储类别”为“标准存储”。
- CSS不支持加密的OBS桶,选择快照存储的OBS桶时,确保此OBS桶的加密功能关闭。
备份路径
快照在OBS桶中的存放路径。
备份路径配置规则:- 备份路径不能包括下列符号:\:*?"<>|
- 备份路径不能以“/”开头。
- 备份路径不能以“.”开头或结尾。
- 备份路径的总长度不能超过1023个字符。
IAM委托
指当前帐号授权云搜索服务访问或维护存储在OBS中数据。也可以单击右侧的“创建委托”新建IAM委托。
创建或者已存在的IAM委托需满足如下条件:
- “委托类型”选择“云服务”。
- “云服务”选择“Elasticsearch”或者“云搜索服务 CSS”。
- 设置当前委托具备“全局服务”中“对象存储服务”项目的“Tenant Administrator”权限。
- 在“自动创建快照”右侧,单击开关开启自动创建快照功能,弹出“创建快照策略”页面。若已启用自动创建快照功能,也可以在开关右侧单击
进行快照策略修改。
- “快照名称前缀”:快照名称前缀的长度为1~32个字符,只能包含小写字母、数字、中划线和下划线,且必须以小写字母开头。快照名称由快照名称前缀加上时间组成,例如自动生成的快照名称snapshot-2018022405925。
- “时区”:指备份时间对应的时区。请基于此时区选择“备份开始时间”。
- “索引”:填写索引名称,支持选择索引进行备份。索引名称不能包含空格和大写字母,且不能包含"\<|>/?特殊字符,多个索引之间使用英文逗号隔开。如果不填写,则默认备份集群中所有索引。支持使用“*”匹配多个索引,例如:index*,表示备份名称前缀是index的所有索引的数据。
在Kibana中使用GET /_cat/indices命令,可以查询集群中所有索引的名称。
- “备份开始时间”:指每天自动开始备份的时间,只能指定整点时间,如00:00、01:00,取值范围为00:00~23:00。请在下拉框中选择备份时间。
- “保留时间(天)”:指备份的快照在OBS的保留时间,以天为单位,取值范围为1~90,您可以根据自己的需求进行设置。系统在半点时刻会自动删除超过保留时间的快照。
图1 自动创建快照 - 设置完成后,单击“确定”保存快照策略。
按照策略自动创建的快照将呈现在快照管理列表中。快照列表同时展示自动创建和手动创建的快照,您可以通过快照类型参数进行区分。在快照列表右上角,您可以输入快照名称或快照ID的关键字进行查找。
- (可选)关闭自动创建快照功能。
关闭自动创建快照功能后,系统将停止继续自动创建快照。如果系统正在根据策略自动创建快照,而快照列表还未呈现正在创建的快照时,无法关闭自动创建快照功能。如果您单击了关闭按钮,系统将提示您无法关闭。建议等快照自动创建成功后,即快照列表已出现最新创建的快照时,再单击关闭按钮,关闭自动创建快照功能。
关闭自动创建快照功能时,您可以在弹出窗口中通过“删除自动创建的快照”选项,选择是否立即删除之前已自动创建的快照,默认不勾选。
- 不勾选:表示不会删除关闭此功能前已自动创建的快照。如果不删除,后续还可以在快照列表中通过删除按钮手动删除,详细操作指导请参见删除快照。如果未手动删除,且之后用户又重新开启了自动创建快照功能,那么此集群中所有“快照类型”为自动创建的快照(包含开启自动创建快照功能前已存在的自动创建的快照)都无法手动删除,只会被系统自动删除。系统会基于重新开启自动创建快照功能时的配置策略进行自动删除,例如此策略中定义的保留时间为10天,那么系统中超过10天的快照将被系统自动删除。
- 勾选:表示删除此集群快照列表中所有“快照类型”为自动创建的快照。
手动创建快照
- 在云搜索服务管理控制台,单击左侧导航栏的“集群管理”。
- 在“集群管理”页面,单击需要进行备份的集群名称,进入集群基本信息页面。在左侧导航栏选择“集群快照”,进入“集群快照”管理页面。
- 在“集群快照”管理页面,单击“集群快照开关”右侧的开关,打开集群快照功能。
- 打开集群快照功能后,云搜索服务会自动为客户创建OBS桶和IAM委托,用于存储快照。自动创建的OBS桶和IAM委托将直接展示在界面中。如果您不希望使用自动创建的OBS桶和IAM委托,您可以在“基础配置”右侧单击
进行配置。
表2 集群快照基础配置的参数说明 参数
说明
OBS桶
在下拉框中选择存储快照的OBS桶。也可以单击右侧的“创建桶”新建OBS。
创建或者已存在的OBS桶需满足如下条件:
- “存储类别”为“标准存储”。
- CSS不支持加密的OBS桶,选择快照存储的OBS桶时,确保此OBS桶的加密功能关闭。
备份路径
快照在OBS桶中的存放路径。
备份路径配置规则:- 备份路径不能包括下列符号:\:*?"<>|
- 备份路径不能以“/”开头。
- 备份路径不能以“.”开头或结尾。
- 备份路径的总长度不能超过1023个字符。
IAM委托
指当前帐号授权云搜索服务访问或维护存储在OBS中数据。也可以单击右侧的“创建委托”新建IAM委托。
创建或者已存在的IAM委托需满足如下条件:
- “委托类型”选择“云服务”。
- “云服务”选择“Elasticsearch”或者“云搜索服务 CSS”。
- 设置当前委托具备“全局服务”中“对象存储服务”项目的“Tenant Administrator”权限。
- 完成基础配置后,单击“创建快照”可手动创建快照。
- “快照名称”:手动创建的快照名称,4~64个字符,只能包含小写字母、数字、中划线和下划线,且必须以字母开头。与自动创建不同,手动创建的快照名称按照用户设置的名称,不会自动加上时间信息。
- “索引”:填写索引名称,支持选择索引进行备份。索引名称不能包含空格和大写字母,且不能包含"\<|>/?特殊字符,多个索引之间使用英文逗号隔开。如果不填写,则默认备份集群中所有索引。支持使用“*”匹配多个索引,例如:index*,表示备份名称前缀是index的所有索引的数据。
在Kibana中使用GET /_cat/indices命令,可以查询集群中所有索引的名称。
- “快照描述”:创建的快照描述信息。0~256个字符,不能包含“<>”字符。
图2 手动创建快照 - 单击“确定”开始创建快照。
快照创建完成后,将直接呈现在快照管理列表中,快照状态为“可用”表示快照创建成功。快照列表同时展示自动创建和手动创建的快照,您可以通过快照类型参数进行区分。在快照列表右上角,您可以输入快照名称或快照ID的关键字进行查找。
恢复数据
快照管理列表中“快照状态”为“可用”的快照,可以恢复集群中的数据。已存储的快照数据可恢复至其他集群。
恢复数据将覆盖集群中当前的数据,请谨慎操作。
- 在快照管理列表中,选择需要恢复的快照,单击“操作”列的“恢复”。
图3 选择恢复快照
- 在“恢复”页面配置集群的恢复参数。
“索引”:指定需要进行恢复的索引名称,默认为空。如保持默认值,即不指定索引名称,则表示恢复所有的索引数据。0~1024个字符,不能包含空格和大写字母,且不能包含"\<|>/?特殊字符。支持使用“*”匹配多个索引,比如index*,表示恢复快照中名称前缀是index的所有索引。
“索引名称匹配模式”:在恢复时,可以根据文本框中定义的过滤条件去恢复符合条件的索引,过滤条件请使用正则表达式。默认值“index_(.+)”表示所有的索引。0~1024个字符,不能包含空格和大写字母,且不能包含"\<|>/?,特殊字符。
“索引名称替换模式”:索引重命名的规则。默认值“restored_index_$1”表示在所有恢复的索引名称前面加上“restored_”。0~1024个字符,不能包含空格和大写字母,且不能包含"\<|>/?,特殊字符。
说明:
“索引名称匹配模式”和“索引名称替换模式”需要同时设置才会生效。
“集群”:选择需要进行恢复的集群名称,可选择当前集群或者其他集群。只能选择处于“可用”状态的集群,如果快照所属的集群处于“不可用”状态,那么也无法将快照恢复到本集群。恢复到其他集群时,目标集群中的Elasticsearch版本不低于本集群。如果已选择其他集群,且该集群中存在同名的索引,则恢复完成后,该同名的索引中的数据将会被覆盖,请谨慎操作。图4 恢复快照 - 单击“确定”开始恢复。恢复成功,快照列表中“任务状态”将变更为“恢复成功”,索引数据将根据快照信息重新生成。
图5 恢复成功
删除快照
当快照信息不需要使用时,您可以删除快照释放存储资源。当自动创建快照功能开启时,自动创建的快照无法手动删除,系统会按照设置的策略在半点时刻自动删除超过“保留时间”的快照。当自动创建快照功能关闭,且之前已自动创建的快照并未同步删除时,快照列表中自动创建的快照,可通过删除按钮手动删除。如果未手动删除,且之后用户又重新开启了自动创建快照功能,那么此集群中所有“快照类型”为自动创建的快照(包含开启自动创建快照功能前已存在的自动创建的快照)都无法手动删除,只会被系统自动删除。
快照信息删除后,数据将无法恢复,请谨慎操作。
- 在快照管理页面中,选择需要删除的快照.
- 单击“操作”列的“删除”,在弹窗中确认要删除的快照信息后,单击“确定”删除快照。