Elasticsearch Hot Threads

1. Hot Threads 是什么？

简单来说：hot_threads 是 OpenSearch/Elasticsearch 提供的一个强大的诊断工具，用于分析当前集群中哪些“线程”正在“热火朝天”地工作，即消耗了最多的CPU资源。

详细解释：

• 线程：OpenSearch 服务在处理请求（如搜索、写入）时，会创建多个线程来并行执行任务。

• “热”线程：当某个操作（如一次复杂的搜索、一次大批量写入、或一个大的段合并）长时间占用CPU时，执行这个操作的线程就成了“热”线程。

• 作用：通过 hot_threads API，管理员可以快速定位到是哪些具体的操作导致了系统负载过高。它提供了一个“快照”，显示在采样时间段内，CPU时间都花在了哪里。

在本次案例中的应用：
一线工程师通过 hot_threads 分析，发现热点节点上的CPU资源主要被两个操作占用：

1. indexing -> refresh：这是数据写入过程中的内存刷新到磁盘生成新段的操作。

2. merge：这是Lucene底层将多个小数据文件合并成大文件的操作。

这个发现直接印证了“巨大分片导致高负载”的推测，因为数据量越大，这两个操作就越频繁、越繁重。

如何使用：
通过Kibana的Dev Tools或直接调用API：

json

GET /_nodes/hot_threads

或者针对特定节点：

json

GET /_nodes/<node_id>/hot_threads

当Elasticsearch集群出现CPU持续高负载但内存和IO正常时，使用该API可快速识别高负载线程，例如：

textCopy Code

 

GET /_nodes/hot_threads?threads=5&snapshots=20

此请求将返回集群中占用CPU最高的5个线程及其堆栈信息。