vlambda博客
学习文章列表

引言

1.查询命令

通过「_cluster/health」命令能快速了解集群、索引、分片的健康状况，以及这些不健康大体是怎么引起的。

GET _cluster/health

2.查询参数说明

3.查询示例

输入命令

GET /_cluster/health

输出结果

{
  "cluster_name" : "elastic-log-xxx",
  "status" : "green",
  "timed_out" : false,
  "number_of_nodes" : 24,
  "number_of_data_nodes" : 21,
  "active_primary_shards" : 27777,
  "active_shards" : 27804,
  "relocating_shards" : 0,
  "initializing_shards" : 0,
  "unassigned_shards" : 0,
  "delayed_unassigned_shards" : 0,
  "number_of_pending_tasks" : 0,
  "number_of_in_flight_fetch" : 0,
  "task_max_waiting_in_queue_millis" : 0,
  "active_shards_percent_as_number" : 100.0
}

4.返回参数说明

5.其他示例

GET /_cluster/health?level=indices&timeout=50s

GET /_cluster/health?level=shards&timeout=50s

1.查询命令

该命令返回方方面面的指标，涵盖集群、节点、索引、系统、Jvm

GET _cluster/stats

2.节点指标

stats命令返回的节点指标格式：

"_nodes" : {
    "total" : 33,
    "successful" : 33,
    "failed" : 0
}

下面是返回的指标说明：

3.集群指标

stats命令返回的集群指标格式：

{
  "cluster_name" : "elastic-log-trade2-prd",
  "cluster_uuid" : "iLSahkk-TaiP9g-FQKWsDQ",
  "timestamp" : 1650100202175,
  "status" : "green"
}

下面是返回的指标说明：

4.索引指标

stats命令返回的索引指标格式：

"indices" : {
    "count" : 736,
    "shards" : {
      "total" : 21324,
      "primaries" : 21297,
      "replication" : 0.0012677841949570363,
      "index" : {
        "shards" : {
          "min" : 2,
          "max" : 30,
          "avg" : 28.972826086956523
        },
        "primaries" : {
          "min" : 1,
          "max" : 30,
          "avg" : 28.936141304347824
        },
        "replication" : {
          "min" : 0.0,
          "max" : 1.0,
          "avg" : 0.036684782608695655
        }
      }
    }

下面是返回的指标说明：

5.文档指标

stats命令返回的文档指标格式：

"docs" : {
  "count" : 133086059854,
  "deleted" : 628015654
}

下面是返回的指标说明：

6.存储指标

stats命令返回的存储指标格式：

"store" : {
  "size_in_bytes" : 63035363353788,
  "reserved_in_bytes" : 0
}

下面是返回的指标说明：

7.列数据缓存指标

列数据缓存主要用于对字段进行排序以及计算的聚合，将字段加载到缓存方便快速访问，通过参数indices.fielddata.cache.size控制。

stats命令返回的列数据缓存指标格式：

"fielddata" : {
  "memory_size_in_bytes" : 280480,
  "evictions" : 0
}

下面是返回的指标说明：

8.查询缓存指标

查询缓存用于缓存查询结果，默认为堆内存的10%，可以通过参数indices.queries.cache.size。调优该参数可以提高命中率，提高查询性能。

stats命令返回的查询缓存指标格式：

 "query_cache" : {
   "memory_size_in_bytes" : 3407568767,
   "total_count" : 24089971,
   "hit_count" : 5694545,
   "miss_count" : 18395426,
   "cache_size" : 33826,
   "cache_count" : 160975,
   "evictions" : 127149
 }

下面是返回的指标说明：

9.complete缓存指标

Linux内核中用于唤醒等待队列中睡眠线程，等待队列占用的缓存大小。

stats命令返回的complete缓存指标格式：

"completion" : {
   "size_in_bytes" : 0
}

下面是返回的指标说明：

10.segments指标

stats命令返回的segments缓存指标格式：

"segments" : {
      "count" : 314594,
      "memory_in_bytes" : 1698599230,
      "terms_memory_in_bytes" : 1229694816,
      "stored_fields_memory_in_bytes" : 233711144,
      "term_vectors_memory_in_bytes" : 0,
      "norms_memory_in_bytes" : 79423936,
      "points_memory_in_bytes" : 0,
      "doc_values_memory_in_bytes" : 155769334,
      "index_writer_memory_in_bytes" : 3707801916,
      "version_map_memory_in_bytes" : 281886805,
      "fixed_bit_set_memory_in_bytes" : 69337608,
      "max_unsafe_auto_id_timestamp" : 1650067201523,
      "file_sizes" : { }
    }

下面是返回的指标说明：

11.mappings指标

统计集群中使用的字段数据类型，以及使用该字段类型的索引数量

stats命令返回的mappings指标格式：

"mappings" : {
  "field_types" : [
    {
      "name" : "binary",
      "count" : 15,
      "index_count" : 4
    },
    {
      "name" : "boolean",
      "count" : 100,
      "index_count" : 22
    }
    //...
}        

下面是返回的指标说明：

12.Analyzer指标

Analyzer组件用于将文本解析成单词，即分词过程。

stats命令返回的analysis指标格式：

"analysis" : {
      "char_filter_types" : [ ],
      "tokenizer_types" : [ ],
      "filter_types" : [
        {
          "name" : "pattern_capture",
          "count" : 1,
          "index_count" : 1
        }
      ],
      // ....
      ]
    }
  }

下面是返回的指标说明：

13.nodes指标

该指标包含集群中各个节点类型数量统计、使用的ES版本、操作系统处理器数量、操作系统名称、物理内存情况

stats命令返回的nodes指标格式：

"nodes" : {
    "count" : {
      "total" : 33,
      "coordinating_only" : 0,
      "data" : 0,
      "data_cold" : 15,
      "data_content" : 15,
      "data_hot" : 15,
      "data_warm" : 0,
      "ingest" : 30,
      "master" : 3,
      "ml" : 3,
      "remote_cluster_client" : 3,
      "transform" : 0,
      "voting_only" : 0
    },
    "versions" : [
      "7.10.0"
    ],
    "os" : {
      "available_processors" : 780,
      "allocated_processors" : 780,
      "names" : [
        {
          "name" : "Linux",
          "count" : 33
        }
      ],
      "pretty_names" : [
        {
          "pretty_name" : "CentOS Linux 8 (Core)",
          "count" : 33
        }
      ],
      "mem" : {
        "total_in_bytes" : 3002182139904,
        "free_in_bytes" : 122349514752,
        "used_in_bytes" : 2879832625152,
        "free_percent" : 4,
        "used_percent" : 96
      }
    }

下面是返回的指标说明：

14.处理器指标

stats命令返回的处理器指标格式：

"process" : {
      "cpu" : {
        "percent" : 186
      },
      "open_file_descriptors" : {
        "min" : 1120,
        "max" : 15304,
        "avg" : 10030
      }
    }

下面是返回的指标说明：

15.Jvm指标

stats命令返回的Jvm指标格式：

 "jvm" : {
   "max_uptime_in_millis" : 1406090815,
   "versions" : [
     {
       "version" : "15.0.1",
       "vm_name" : "OpenJDK 64-Bit Server VM",
       "vm_version" : "15.0.1+9",
       "vm_vendor" : "AdoptOpenJDK",
       "bundled_jdk" : true,
       "using_bundled_jdk" : true,
       "count" : 33
     }
   ],
   "mem" : {
     "heap_used_in_bytes" : 592482887640,
     "heap_max_in_bytes" : 1629940088832
   },
   "threads" : 6632
 }

下面是返回的指标说明：

16.file stores指标

stats命令返回的file stores指标格式：

"fs" : {
      "total_in_bytes" : 175453039177728,
      "free_in_bytes" : 111910350888960,
      "available_in_bytes" : 111909797236736
    }

下面是返回的指标说明：

health命令可以监测集群、索引、分片三个维度的健康状况。而stats统计的指标就更多了，本文梳理了16个不同方面的指标。虽然有些指标字面含义能大体猜出来，然而还有一些指标从字面上并不清晰，对其梳理一遍很有必要，在遇到问题时方便快速定位。

备注：官方文档

https://www.elastic.co/guide/en/elasticsearch/reference/current/cluster-health.html

https://www.elastic.co/guide/en/elasticsearch/reference/current/cluster-stats.html