news 2026/11/5 21:17:34

k8s kube-prometheus-stack kube-state-metrics 指标时断时续 kube-state-metrics - write: broken pipe

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
k8s kube-prometheus-stack kube-state-metrics 指标时断时续 kube-state-metrics - write: broken pipe

问题描述

k8s 环境有天主机故障关机了很长时间,但是没有执行 kubectl delete node 【nodename】剔除节点,过了一段时间发现KubeNodeNotReadyKubeNodeUnreachable这两个告警在恢复和告警之间切换,这明显不正常,因为节点都已经关机,怎么可能恢复。

排查步骤

经过排查才发现是kube_node_status_condition{node="nodename"}这个指标时断时续(偶尔指标缺失),问题就是指标缺失造成的(指标缺失就认定为告警恢复)。

然后查看kube-state-metrics pod的日志发现如下错误,prometheus pod未发现错误日志。

E122007:28:28.0369131metrics_handler.go
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/11/5 19:26:22

Linly-Talker如何优化弱网环境下的音画同步?

Linly-Talker如何优化弱网环境下的音画同步? 在5G普及、AI数字人走向大众的今天,一个现实却常被忽视的问题浮出水面:大多数系统设计都假设用户处于高速稳定的网络环境中。然而,在偏远地区直播带货、乡村远程教学或地铁通勤中使用智…

作者头像 李华
网站建设 2026/11/6 4:53:20

26、虚拟机迁移配置全解析

虚拟机迁移配置全解析 1. 共享虚拟硬盘配置 在为来宾群集使用共享虚拟硬盘时,需要确保满足以下要求: - Hyper - V 故障转移群集配置 :需按照相关说明配置 Hyper - V 故障转移群集,且 Hyper - V 主机必须运行 Windows Server 2012 R2。 - 存储方式 :使用群集共享卷…

作者头像 李华
网站建设 2026/11/5 23:33:10

Linly-Talker支持RBAC权限控制系统吗?

Linly-Talker 支持 RBAC 权限控制系统吗? 在当前 AI 数字人技术快速落地的背景下,越来越多企业开始将虚拟主播、智能客服等交互式系统引入实际业务流程。随着使用场景从“演示原型”走向“生产部署”,一个问题逐渐浮现:这类系统是…

作者头像 李华
网站建设 2026/11/6 1:58:10

计算机毕业设计springboot基于JavaWeb的宠物寄养系统设计与实现 基于SpringBoot的宠物托管服务平台的设计与实现 JavaWeb视角下的宠物临时照护系统构建与研发

计算机毕业设计springboot基于JavaWeb的宠物寄养系统设计与实现uj6xg0b4(配套有源码 程序 mysql数据库 论文) 本套源码可以在文本联xi,先看具体系统功能演示视频领取,可分享源码参考。当都市年轻人把猫狗视为“家人”,小长假、出差…

作者头像 李华
网站建设 2026/11/5 13:15:08

汇编语言全接触-39.获得结果

在本章中,我们来学习如何获得SQL语句的执行结果。我们称由查询返回的一组记录为一个 结果集(result set) (或在VB中被称为recordset).检索结果通常分为以下几个步骤:确认一个结果集是否可用。 将结果集的列绑定在适当的变量上。 取得行 完成对结果集的操作后,我们必须调用SQLCl…

作者头像 李华
网站建设 2026/11/5 15:29:06

经典算法题型之编辑距离(二)

解题思路简要概括题意,使用最少的操作使得「word1」与「word2」相同。很明显所要进行的操作是从左至右线性增长的,不难联想到最长公共子序列(LCS),因此我们令 f[i][j] 表示最少的操作使得 「word1」的前 i 个字符与「w…

作者头像 李华