深入了解Elasticsearch Yellow状态

一、什么是Elasticsearch Yellow状态

Elasticsearch是一款流行的开源分布式全文搜索和分析引擎,由Elasticsearch BV开发和维护。Elasticsearch Yellow状态指的是在集群中主分片(number_of_replicas设置为1)和至少一个副本分片都存在,但是有一些部分出现问题,例如少量分片未分配、投票脱机的节点或磁盘空间低于设置的阈值。它表示在数据丢失或分片不可恢复之前还有时间来修复问题。

二、导致Elasticsearch Yellow状态的原因

1、未分配分片: 当Elasticsearch在集群中加入新节点或有节点关闭时,由于数据迁移可能导致未分配分片。当未分配分片>0时,数据就不能良好地分布在节点上,数据访问就可能会出现问题。

2、投票的脱机节点:Elasticsearch将集群中的节点视为主节点或数据节点的一部分,并通过投票选出主节点。当主节点脱机时,投票选出其他节点成为新的主节点。事情变得更糟糕的是,在集群结构不稳定的情况下,可能出现投票分歧而没有达成consensus。这些情况都会导致集群状态的黄色警报。

3、磁盘空间低于设置的阈值:磁盘空间的不充足可能会导致数据丢失和停机。默认情况下,Elasticsearch将不允许将分片分配到空间低于5%的节点上。如果某个节点低于这个阈值,状态将被标记为黄色。

三、如何诊断Elasticsearch Yellow状态

1、通过健康检查API:使用curl命令或浏览器中的HTTP请求连接到Elasticsearch的API地址,然后发送GET请求来检查集群的状态。输出结果中将包含活跃分片数(active_shards),分配分片(unassigned_shards)的数量以及节点数。如果活动分片数小于期望值或分配的分片数大于零,则检查分片分配是否正常或是否有分配失败的索引。

$ curl -XGET 'http://localhost:9200/_cat/health?pretty'
{
  "cluster_name" : "elasticsearch",
  "status" : "yellow",
  "timed_out" : false,
  "number_of_nodes" : 3,
  "number_of_data_nodes" : 2,
  "active_primary_shards" : 10,
  "active_shards" : 20,
  "relocating_shards" : 0,
  "initializing_shards" : 0,
  "unassigned_shards" : 3,
  "delayed_unassigned_shards": 0,
  "number_of_pending_tasks" : 0,
  "number_of_in_flight_fetch": 0,
  "task_max_waiting_in_queue_millis": 0,
  "active_shards_percent_as_number": 86.95652173913044
}

2、通过分片和节点API:使用curl命令或浏览器中的HTTP请求连接到Elasticsearch的API地址,然后发送GET请求以获得与每个索引,节点,分片和状态相关的信息。

$ curl -XGET 'http://localhost:9200/_cat/shards?v' 

四、如何解决Elasticsearch Yellow状态

1、增加节点:通过添加额外的节点,可以将负载分散到更多的节点中,从而使每个节点处理的数据更少。这可以提高性能和稳定性,并为磁盘故障提供更好的保护。默认情况下,Elasticsearch 中包含一个单独的主节点,负责协调集群。将数据节点和观察节点部署到集群将提供更多的弹性和更好的性能。

2、重新分配分片: 重新分配失败的分片或重新分配未分配的分片可以解决由于节点故障引起的丢失的数据和索引。

curl -XPOST 'http://localhost:9200/_cluster/reroute' -d '{
    "commands": [
          {
              "allocate_replica": {
                  "index": "your_index",
                  "shard": 0,
                  "node": "your_new_node",
                  "allow_primary": true
              }
          }
      ]
}'

3、调整副本数量:根据使用情况,可以在不同的节点之间设置更多副本,以减少数据丢失的风险。

PUT /my_index/_settings
{
    "index": {
        "number_of_replicas": 2
    }
}

4、清理不必要的分片:清理无用的分片和索引,可以释放磁盘空间并提高性能。

DELETE /my_index

原创文章,作者:小蓝,如若转载,请注明出处:https://www.506064.com/n/184986.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
小蓝小蓝
上一篇 2024-11-26 05:03
下一篇 2024-11-26 05:03

相关推荐

  • Elasticsearch API使用用法介绍-get /_cat/allocation

    Elasticsearch是一个分布式的开源搜索和分析引擎,支持全文检索和数据分析,并且可伸缩到上百个节点,处理PB级结构化或非结构化数据。get /_cat/allocation…

    编程 2025-04-28
  • Elasticsearch Scroll Java的使用指南

    本文旨在详细介绍如何使用Elasticsearch Scroll Java。Elasticsearch Scroll Java是一种高效的遍历大型数据集的方法。通过它,我们可以逐个…

    编程 2025-04-27
  • 深入解析Vue3 defineExpose

    Vue 3在开发过程中引入了新的API `defineExpose`。在以前的版本中,我们经常使用 `$attrs` 和` $listeners` 实现父组件与子组件之间的通信,但…

    编程 2025-04-25
  • 深入理解byte转int

    一、字节与比特 在讨论byte转int之前,我们需要了解字节和比特的概念。字节是计算机存储单位的一种,通常表示8个比特(bit),即1字节=8比特。比特是计算机中最小的数据单位,是…

    编程 2025-04-25
  • 深入理解Flutter StreamBuilder

    一、什么是Flutter StreamBuilder? Flutter StreamBuilder是Flutter框架中的一个内置小部件,它可以监测数据流(Stream)中数据的变…

    编程 2025-04-25
  • 深入探讨OpenCV版本

    OpenCV是一个用于计算机视觉应用程序的开源库。它是由英特尔公司创建的,现已由Willow Garage管理。OpenCV旨在提供一个易于使用的计算机视觉和机器学习基础架构,以实…

    编程 2025-04-25
  • 深入了解scala-maven-plugin

    一、简介 Scala-maven-plugin 是一个创造和管理 Scala 项目的maven插件,它可以自动生成基本项目结构、依赖配置、Scala文件等。使用它可以使我们专注于代…

    编程 2025-04-25
  • 深入了解LaTeX的脚注(latexfootnote)

    一、基本介绍 LaTeX作为一种排版软件,具有各种各样的功能,其中脚注(footnote)是一个十分重要的功能之一。在LaTeX中,脚注是用命令latexfootnote来实现的。…

    编程 2025-04-25
  • 深入探讨冯诺依曼原理

    一、原理概述 冯诺依曼原理,又称“存储程序控制原理”,是指计算机的程序和数据都存储在同一个存储器中,并且通过一个统一的总线来传输数据。这个原理的提出,是计算机科学发展中的重大进展,…

    编程 2025-04-25
  • 深入了解Python包

    一、包的概念 Python中一个程序就是一个模块,而一个模块可以引入另一个模块,这样就形成了包。包就是有多个模块组成的一个大模块,也可以看做是一个文件夹。包可以有效地组织代码和数据…

    编程 2025-04-25

发表回复

登录后才能评论