当前位置:首页 > 技术 > 正文内容

利用别名和重新索引实现Elasticsearch零停机迁移

访客 技术 2026年6月30日 3

背景与挑战

在生产环境中使用Elasticsearch时,经常会遇到需要调整字段映射(mapping)的情况。例如,某个字段最初被定义为text类型,但后续业务需求要求其支持时间范围查询,这就需要将其更改为date类型。然而,Elasticsearch不允许直接修改已创建的字段类型,因此必须通过重建索引来完成变更。

如果直接重建索引会导致服务中断或数据不可用,影响线上应用。为此,我们需要一种能够在不中断服务的前提下完成索引结构升级的方案——即"零停机重新索引"。

解决方案:结合别名与_reindex API

核心思路是:

  1. 创建一个具有正确映射的新索引;
  2. 将旧索引的数据复制到新索引中;
  3. 通过索引别名平滑切换流量,确保读写操作不受影响;
  4. 最终删除旧索引以释放资源。

具体实施步骤

1. 创建原始索引(含错误映射)

PUT /articles_old
{
  "settings": {
    "number_of_shards": 3,
    "number_of_replicas": 1
  },
  "mappings": {
    "properties": {
      "id": { "type": "keyword" },
      "title": { "type": "text" },
      "readCounts": { "type": "integer" },
      "publish_time": { "type": "text" }
    }
  }
}

插入测试数据:

PUT /articles_old/_doc/1
{
  "id": "1",
  "title": "Elasticsearch入门指南",
  "readCounts": 45,
  "publish_time": "2023-07-15T10:00:00"
}

2. 定义新索引结构(修正字段类型)

publish_time改为date类型以便支持时间查询:

PUT /articles_new
{
  "settings": {
    "number_of_shards": 3,
    "number_of_replicas": 1
  },
  "mappings": {
    "properties": {
      "id": { "type": "keyword" },
      "title": { "type": "text" },
      "readCounts": { "type": "integer" },
      "publish_time": { "type": "date", "format": "yyyy-MM-dd HH:mm:ss||yyyy-MM-dd'T'HH:mm:ss" }
    }
  }
}

3. 设置共享别名

为两个索引添加统一别名blog_index,便于后续切换:

POST /_aliases
{
  "actions": [
    { "add": { "index": "articles_old", "alias": "blog_index" } },
    { "add": { "index": "articles_new", "alias": "blog_index" } }
  ]
}

4. 执行数据迁移

使用_reindex API 将旧索引中的所有文档迁移到新索引:

POST /_reindex
{
  "source": {
    "index": "articles_old"
  },
  "dest": {
    "index": "articles_new"
  }
}

5. 验证迁移结果

检查新索引是否包含正确转换后的数据:

GET /articles_new/_doc/1

响应应显示publish_time已被成功解析为日期格式。

6. 切换别名指向新索引

将别名从旧索引移除,并仅指向新索引,实现无缝切换:

POST /_aliases
{
  "actions": [
    { "remove": { "index": "articles_old", "alias": "blog_index" } },
    { "add": { "index": "articles_new", "alias": "blog_index" } }
  ]
}

此时,所有对blog_index的请求都将路由至articles_new,而应用程序无需任何代码改动。

7. 清理旧资源

确认系统稳定运行后,可安全删除旧索引:

DELETE /articles_old

优势总结

  • 无停机更新:通过别名机制保证服务连续性;
  • 灵活回滚:若新索引异常,可快速切回原索引;
  • 兼容性强:适用于字段类型变更、分词器调整等多种场景;
  • 操作简单:依赖Elasticsearch原生API,无需额外工具。

相关文章

Linux crontab 详解

1) crontab 是什么cron 是 Linux 的定时任务守护进程;crontab 是用来编辑/查看“按时间周期执行命令”的表(cron table)。常见两类:用户 crontab:每个用户一份(crontab -e 编辑)系统级 crontab / cron.d:可指定执行用户(/etc/crontab、/etc/cron.d/*)2) crontab 时间...

富文本里可以允许的 HTML 属性

一、所有标签默认允许的安全属性(极少)class        (可选)id           (通常建议禁用)title️ 注意:id 容易被滥用做锚点注入,很多系统直接禁用class 允许的话最好只允许固定前缀(如 editor-*)二、a 标签允许属性<a href="" t...

Mac 安装 Node.js 指南

方法一:通过官网安装包(最简单,适合初学者)如果你只是想快速安装并开始使用,这是最直接的方法。访问 Node.js 官网。页面会显示两个版本:LTS (Recommended For Most Users):长期支持版,最稳定。建议选这个。Current:最新特性版,包含最新功能但可能不够稳定。下载 .pkg 安装包并运行。按照安装向导点击“下一步”即可完成。方法二:使用 Homebrew 安装(...

Dom\HTML_NO_DEFAULT_NS 的副作用:自动加闭合标签

在使用Dom\HTMLDocument时,Dom\HTML_NO_DEFAULT_NS 将禁止在解析过程中设置元素的命名空间, 此设置是为了与DOMDocument向后兼容而存在的。当使用它时,已知的一个副作用就是:自动加闭合标签例如 </img> 为什么会这样?当你使用:Dom\HTML_NO_DEFAULT_NS文档会变成 无命名空间模式,此时内部更接近 XML...

Laravel 事件和监听器创建

在 Laravel 中,使用 Artisan 命令创建 Events(事件) 和 Listeners(监听器) 是非常高效的。你可以通过以下几种方式来实现:1. 手动创建单个 Event如果你只想创建一个事件类,可以使用 make:event 命令:Bashphp artisan make:event UserRegistered执行后,文件将生成在 app/Even...

自定义域名解析神器 dnsmasq

什么是 dnsmasq?dnsmasq 是一个轻量级、功能强大的网络服务工具,专为小型和中等规模网络设计。它是一个综合的网络基础设施解决方案[1]。dnsmasq 能做什么?功能说明应用场景DNS 转发与缓存将 DNS 查询转发到上游服务器(ISP、Google DNS 等),并在本地缓存结果加快 DNS 查询速度,减少外部 DNS 流量本地 DNS解析本地网络设备的主机名,无需编辑&n...

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。