更新时间:2024-11-29 GMT+08:00

恢复Elasticsearch业务数据

操作场景

在用户意外修改、删除或需要找回数据时,系统管理员对Elasticsearch进行重大操作(如升级、重大数据调整等)后,系统数据出现异常或未达到预期结果,模块全部故障无法使用,或者迁移数据到新集群的场景中,需要对Elasticsearch业务数据进行恢复数据操作。

系统管理员可以通过FusionInsight Manager创建Elasticsearch业务数据的恢复任务,成功执行后进行业务数据恢复。只支持创建任务手动恢复数据。

  • 只支持进行数据备份时的系统版本与当前系统版本一致时的数据恢复。
  • 当业务正常时需要恢复Elasticsearch业务数据,建议手动备份最新的Elasticsearch业务数据后,再执行恢复数据操作。否则会丢失从备份时刻到恢复时刻之间的Elasticsearch业务数据。
  • 需要恢复的索引分片必须和快照中对应的索引分片数量保持一致。
  • 在恢复任务执行过程中,会自动关闭需要恢复的索引,恢复任务执行完成后,会自动打开相关索引,如果需要恢复的索引不存在,则会自动创建索引。所以恢复任务执行过程中可能会影响相关索引的业务操作。
  • 因为Elasticsearch业务数据的恢复需要通过EsNode1实例来调用snapshot接口,所以请保证集群中所有EsNode1实例的健康状态为良好,可以正常接收请求。为了保证恢复成功,请不要操作像扩容、减容、停止或重启Elasticsearch实例、停止或重启Elasticsearch服务、停止或重启集群等操作。

对系统的影响

  • 数据恢复后,会丢失从备份时刻到恢复时刻之间的数据。
  • 数据恢复后,需要重新启动Elasticsearch的上层应用。

前提条件

  • 检查Elasticsearch备份文件保存路径。
  • 停止Elasticsearch的上层应用。
  • 如果需要从远端HDFS恢复数据,需要准备备集群。如果主集群部署为安全模式,且主备集群不是由同一个FusionInsight Manager管理,则必须配置系统互信,请参见配置跨Manager集群互信。如果主集群部署为普通模式,则不需要配置互信。
  • 主备集群上的时间必须一致,而且主备集群上的NTP服务必须使用同一个时间源。

操作步骤

  1. 在FusionInsight Manager,选择“运维 > 备份恢复 > 备份管理”。
  2. 在任务列表指定任务的“操作”列,选择“更多 > 查询历史”。

    在弹出的窗口中,在指定一次执行成功记录的“备份路径”列,单击“查看”,打开此次任务执行的备份路径信息,查找以下信息:

    • “备份对象”表示备份的数据源。
    • “备份路径”表示备份文件保存的完整路径。

      选择正确的项目,在“备份路径”手动选中备份文件的完整路径并复制。

  3. 在FusionInsight Manager,选择“运维 > 备份恢复 > 恢复管理”。
  4. 单击“创建”。
  5. 在“任务名称”填写恢复任务的名称。
  6. 在“恢复对象”选择待操作的集群。
  7. 在“恢复配置”,勾选“业务数据”下的“Elasticsearch”。
  8. 在“Elasticsearch”的“路径类型”,选择一个恢复目录的类型。

    恢复目录支持以下类型:

    • “RemoteHDFS”:表示将从备集群的HDFS目录下恢复数据。
      选择此参数值,还需要配置以下参数:
      • “IP 模式”:目标IP的IP地址模式。系统会根据集群网络类型自动选择对应的IP模式,如IPv4或者IPv6。
      • “源端NameNode IP地址”:填写备集群主NameNode的业务平面IP地址。
      • “源端路径”:表示备份文件在HDFS中保存的完整路径。例如“备份路径/备份任务名_数据源_任务创建时间”。
      • “恢复点列表”:单击“刷新”,然后选择一个备集群上已备份的Elasticsearch快照。
    • “NFS”:表示将通过NFS协议从NAS中获取备份文件。选择此参数值,还需要配置以下参数:
      • “IP 模式”:目标IP的IP地址模式。系统会根据集群网络类型自动选择对应的IP模式,如IPv4或者IPv6。
      • “服务器IP地址”:填写NAS服务器IP地址。
      • “源端路径”:填写备份文件在NAS服务器中保存的完整路径。例如,“备份路径/备份任务名_数据源_任务创建时间/”。
      • “恢复点列表”:单击“刷新”,然后选择一个NAS上已备份的Elasticsearch快照名称。

  9. 在“数据配置”中的“备份数据”列根据业务需要勾选一个或多个需要恢复的已备份数据。

    若勾选了“.security_info或.index_owner_info”索引,请提前关闭“.security_info”“.index_owner_info”索引,否则将有可能导致恢复任务执行失败。

  10. 在“强制覆盖”中,"false"不生效,Elasticsearch会强制覆盖,即表示存在同名索引时强制恢复备份的所有数据。如果索引中存在备份后新增加的数据,那恢复后将丢失这些数据。
  11. 单击“校验”查看恢复任务的配置是否正确。

    • 如果不存在指定的恢复目录,校验失败。
    • 如果不满足强制覆盖的条件,校验失败。

  12. 单击“确定”保存。
  13. 在恢复任务列表已创建任务的“操作”列,单击“执行”,开始执行恢复任务。

    • 恢复成功后进度显示为绿色。
    • 恢复成功后此恢复任务不支持再次执行。
    • 如果恢复任务在第一次执行时由于某些原因未执行成功,在排除错误原因后单击“重试”,重试恢复任务。