带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(2)

简介: 带你读《Elastic Stack 实战手册》之48:——3.5.7.索引生命周期管理(2)

《Elastic Stack 实战手册》——三、产品能力——3.5 进阶篇——3.5.7.索引生命周期管理(1) https://developer.aliyun.com/article/1228516


四个阶段支持的行为

 

索引生命周期每个阶段支持的行为如下:

 

l Hot

l Set Priority

l Unfollow

l Force Merge

l Rollover

 

l Warm

l Set Priority

l Unfollow

l Read only

l Allocate

l Shrink

l Force Merge

l Migrate

 

l Cold

l Set Priority

l Unfollow

l Allocate

l Migrate

l Freeze

l Searchable Snapshot

 

l Delete

l Wait For Snapshot

l Delete


行为

 

Set Priority

 

设置索引的优先级,一旦进入到某阶段,就设置索引的优先级,节点重新启动后,优先级较高的索引将会优先恢复。

 

参数:


l priority: 正整数。

 

例如:设置 warm 阶段 index 的优先级为 50

 

PUT _ilm/policy/my_policy
{
  "policy": {
    "phases": {
      "warm": {
        "actions": {
          "set_priority" : {
            "priority": 50
          }
        }
      }
    }
  }
}

Rollover

 

当 index 满足三个条件中的任何一个时,会将别名指向新生成的索引。



参数:

 

l max_age

l 达到索引创建的最大时间

 

l max_docs

l 达到指定的文档数后

 

l max_size

l index 达到指定的大小时,主分片的大小,不包含副本。

 

以上三个参数至少应该存在一个

 

例如:当前 index 主分片大小达到 100GB 或文档数超过 100000000 或者 index 创建超过 7天 生产新的 index

 

PUT _ilm/policy/my_policy
{
  "policy": {
    "phases": {
     "hot": {
        "actions": {
          "rollover" : {
            "max_size": "100GB",
      "max_docs": 100000000,
      "max_age": "7d"
          }
        }
      }
    }
  }
}

Unfollow

 

将 follow 索引转换为正常索引。

 

例如:

PUT _ilm/policy/my_policy
{
  "policy": {
    "phases": {
      "hot": {
        "actions": {
          "unfollow" : {}
        }
      }
    }
  }
}

Allocate

 

指定 index 的副本数,迁移 index 到某些节点,冷热节点数据迁移依赖此步骤。

 

参数:

 

l number_of_replicas

l 指定 index 的副本数

 

l include

l 将 index 迁移到具有指定属性之一的节点

 

 l exclude

l 将 index 迁移到不包含指定属性的节点

 

l require

l 将 index 迁移到具有所有指定属性的节点

 

Note: include 满足其中一个就可以, require 必须全部满足。

 

例如:到达 warm 阶段将 index 的备份数设置为 2,并且将 index 迁移至属性 box_type 包含 hot, warm 且不包含 cold 的节点。

PUT _ilm/policy/my_policy
{
  "policy": {
    "phases": {
      "warm": {
        "actions": {
          "allocate" : {
            "number_of_replicas" : 2,
      "include" : {
            "box_type": "hot"
            },
      "exclude" : {
            "box_type": "cold"
            },
      "require" : {
            "box_type": "hot,warm"
            }
          }
        }
      }
    }
  }
}

《Elastic Stack 实战手册》——三、产品能力——3.5 进阶篇——3.5.7.索引生命周期管理(3) https://developer.aliyun.com/article/1228514

相关实践学习
以电商场景为例搭建AI语义搜索应用
本实验旨在通过阿里云Elasticsearch结合阿里云搜索开发工作台AI模型服务,构建一个高效、精准的语义搜索系统,模拟电商场景,深入理解AI搜索技术原理并掌握其实现过程。
ElasticSearch 最新快速入门教程
本课程由千锋教育提供。全文搜索的需求非常大。而开源的解决办法Elasricsearch(Elastic)就是一个非常好的工具。目前是全文搜索引擎的首选。本系列教程由浅入深讲解了在CentOS7系统下如何搭建ElasticSearch,如何使用Kibana实现各种方式的搜索并详细分析了搜索的原理,最后讲解了在Java应用中如何集成ElasticSearch并实现搜索。  
相关文章
|
1天前
|
数据采集 人工智能 安全
|
10天前
|
云安全 监控 安全
|
2天前
|
自然语言处理 API
万相 Wan2.6 全新升级发布!人人都能当导演的时代来了
通义万相2.6全新升级,支持文生图、图生视频、文生视频,打造电影级创作体验。智能分镜、角色扮演、音画同步,让创意一键成片,大众也能轻松制作高质量短视频。
916 150
|
2天前
|
编解码 人工智能 机器人
通义万相2.6,模型使用指南
智能分镜 | 多镜头叙事 | 支持15秒视频生成 | 高品质声音生成 | 多人稳定对话
|
15天前
|
机器学习/深度学习 人工智能 自然语言处理
Z-Image:冲击体验上限的下一代图像生成模型
通义实验室推出全新文生图模型Z-Image,以6B参数实现“快、稳、轻、准”突破。Turbo版本仅需8步亚秒级生成,支持16GB显存设备,中英双语理解与文字渲染尤为出色,真实感和美学表现媲美国际顶尖模型,被誉为“最值得关注的开源生图模型之一”。
1655 8
|
7天前
|
人工智能 自然语言处理 API
一句话生成拓扑图!AI+Draw.io 封神开源组合,工具让你的效率爆炸
一句话生成拓扑图!next-ai-draw-io 结合 AI 与 Draw.io,通过自然语言秒出架构图,支持私有部署、免费大模型接口,彻底解放生产力,绘图效率直接爆炸。
608 152
|
9天前
|
人工智能 安全 前端开发
AgentScope Java v1.0 发布,让 Java 开发者轻松构建企业级 Agentic 应用
AgentScope 重磅发布 Java 版本,拥抱企业开发主流技术栈。
579 13
|
6天前
|
人工智能 前端开发 文件存储
星哥带你玩飞牛NAS-12:开源笔记的进化之路,效率玩家的新选择
星哥带你玩转飞牛NAS,部署开源笔记TriliumNext!支持树状知识库、多端同步、AI摘要与代码高亮,数据自主可控,打造个人“第二大脑”。高效玩家的新选择,轻松搭建专属知识管理体系。
366 152
|
9天前
|
人工智能 自然语言处理 API
Next AI Draw.io:当AI遇见Draw.io图表绘制
Next AI Draw.io 是一款融合AI与图表绘制的开源工具,基于Next.js实现,支持自然语言生成架构图、流程图等专业图表。集成多款主流大模型,提供智能绘图、图像识别优化、版本管理等功能,部署简单,安全可控,助力技术文档与系统设计高效创作。
663 151

热门文章

最新文章