如何重命名集群中的索引？

我需要在一个集群中重命名几个索引(它们的名称 必须的要更改，我不能使用 化名)。

我看到没有支持的方法来做到这一点，我发现最接近的是 重命名索引的目录，我在一个集群中尝试了这一点。

集群有3台机器 A、 B和 C，每台机器上都复制了碎片。我关闭了 A上的 elasticsearch，将 /var/lib/elasticsearch/security/nodes/0/indices/oldindexname重命名为 /var/lib/elasticsearch/security/nodes/0/indices/newindexname并重新启动 A。

集群的状态是黄色的，而 elasticsearch 正在使用一些魔法来恢复正确的状态。过了一段时间后

  • oldindexname可用并完全复制(我猜是从 B和 C恢复的)
  • newindexname可用(我可以搜索它) ，但是头插件显示它的碎片处于“未分配”状态，并且它们是灰色的(没有被复制)

在恢复期间，security.log显示了以下信息:

[2015-02-20 11:02:33,461][INFO ][gateway.local.state.meta ] [A.example.com] dangled index directory name is [newindexname], state name is [oldindexname], renaming to directory name

虽然 newindexname是可搜索的，但它肯定不处于正常状态。

我通过删除 newindexname回滚到了之前的状态。集群回到了绿色，没有任何“未分配”的条目。

既然如此，我如何在集群中将 oldindexname重命名为 newindexname？

注意: 我想到的最终解决方案是将 oldindex滚动复制到 newindex中，然后删除 oldindex。这将需要时间，所以如果有一个更直接的解决方案，这将是巨大的。

175961 次浏览
小开

因此，在 ES 中没有直接的方法来复制或重命名索引(我为自己的项目做了大量的搜索)

然而，一个非常简单的选择是使用流行的迁移工具[ Elastic-Exporter ]。

Http://www.retailmenot.com/corp/eng/posts/2014/12/02/elasticsearch-cluster-migration/

[附注: 这不是我的博客，只是偶然发现，觉得不错]

因此，您可以复制索引/类型，然后删除旧的。

小开

实现重命名或更改索引的映射的另一种不同方法是使用 logstash 重新索引。 下面是 logstash 2.1配置的一个示例:

input {
elasticsearch {
hosts => ["es01.example.com", "es02.example.com"]
index => "old-index-name"
size => 500
scroll => "5m"
}
}
filter {


mutate {
remove_field => [ "@version" ]
}


date {
"match" => [ "custom_timestamp", "MM/dd/YYYY HH:mm:ss" ]
target => "@timestamp"
}


}
output {
elasticsearch {
hosts => ["es01.example.com", "es02.example.com" ]
manage_template => false
index => "new-index-name"
}
}
小开

如 快照模块的 Elasticsearch 引用所示,

在使用正则表达式进行恢复时，也可以使用 rename _ pattern 和 rename _ place 选项来重命名索引

小开

要重命名索引，可以使用 Elasticsearch 快照模块。

首先，您必须在恢复索引的同时对其进行快照 重命名索引。

    POST /_snapshot/my_backup/snapshot_1/_restore
{
"indices": "jal",
"ignore_unavailable": "true",
"include_global_state": false,
"rename_pattern": "jal",
"rename_replacement": "jal1"
}

Rename _ place:-要在其中备份数据的新索引名。

小开

您可以使用 索引来做到这一点。

Reindex 不尝试设置目标索引 复制源索引的设置 在运行 a _ reindex 操作之前，目标 index ，包括 建立映射、碎片计数、复制等。

  1. 首先将索引复制到一个新名称
POST /_reindex
{
"source": {
"index": "twitter"
},
"dest": {
"index": "new_twitter"
}
}
  1. 现在删除索引
DELETE /twitter
小开

以防有人还需要它。成功的(非官方的)重命名索引的方法是:

  1. 关闭需要重命名的索引
  2. 重命名主目录和数据节点的所有数据目录中的索引文件夹。
  3. 重新打开旧的封闭索引(我使用 kofp 插件)。旧的索引将重新开放，但保持未分配。新索引将以关闭状态显示
  4. 重新打开新索引
  5. 删除旧索引

如果您碰巧得到这个错误“ dangled index directory name is”，请删除所有主节点(而不是数据节点)中的索引文件夹，然后重新启动其中一个数据节点。

小开

如果你不能重新索引一个 解决办法是使用 化名。从 正式的文档:

Elasticsearch 中的 API 在处理特定索引时接受索引名称，在适用时接受多个索引。索引别名 API 允许使用名称作为索引的别名，所有 API 都会自动将别名转换为实际的索引名称。也可以将别名映射到多个索引，并且在指定别名时，别名将自动扩展到别名索引。别名还可以与搜索时自动应用的筛选器和路由值关联。别名不能与索引具有相同的名称。

请注意，如果您正在使用 More Like This 特性，则此解决方案不起作用

小开
最佳答案

从 ElasticSearch 7.4开始，重命名索引的最佳方法是使用新引入的 克隆索引 API复制索引，然后使用 删除索引 API删除原始索引。

与使用快照 API 或重新索引 API 相比，克隆索引 API 的主要优势在于速度，因为克隆索引 API 硬链接从源索引到目标索引的段，而不需要重新处理它的任何内容(很明显，在支持硬链接的文件系统上; 否则，文件将在文件系统级别进行复制，这仍然比其他选择有效得多)。克隆索引还保证目标索引在源索引的每个点上都是相同的(也就是说，不需要手动复制设置和映射，与重新索引方法相反) ，并且不需要配置本地快照目录。

旁注: 尽管这个过程比以前的解决方案快得多，但它仍然意味着停机时间。有一些真实的用例证明了重命名索引的合理性(例如，作为拆分、收缩或备份工作流中的一个步骤) ，但是重命名索引不应该成为日常操作的一部分。如果您的工作流需要频繁的索引重命名，那么您应该考虑使用 别名索引。

下面是一个将索引 source_index重命名为 target_index的操作完整数列的例子。它可以使用一些 ElasticSearch 特定的控制台来执行，例如集成的 在 Kibana。请参阅 这个要点以获得此示例的替代版本，使用 curl而不是弹性搜索控制台。

# Make sure the source index is actually open
POST /source_index/_open


# Put the source index in read-only mode
PUT /source_index/_settings
{
"settings": {
"index.blocks.write": "true"
}
}


# Clone the source index to the target name, and set the target to read-write mode
POST /source_index/_clone/target_index
{
"settings": {
"index.blocks.write": null
}
}


# Wait until the target index is green;
# it should usually be fast (assuming your filesystem supports hard links).
GET /_cluster/health/target_index?wait_for_status=green&timeout=30s


# If it appears to be taking too much time for the cluster to get back to green,
# the following requests might help you identify eventual outstanding issues (if any)
GET /_cat/indices/target_index
GET /_cat/recovery/target_index
GET /_cluster/allocation/explain


# Delete the source index
DELETE /source_index

提交答案