K8s etcd 集群崩溃异常恢复
kubectl执行命令卡住，访问apiserver:6443 报504连接超时报错，k8s集群无法操作，根据经验感觉 etcd 集群是出问题了，查看 etcd 集群发现只剩一个节点的etcd还在运行，登陆异常 etcd 节点发现etcd容器一直在不断重启，拿到报错日志，备份3个master节点上etcd数据，将etcd报错信息截图和故障现象描述发给 qwen...
Continue reading >>标签：k8s
Kubernetes PV数据卷缩容方案及统计PV容量
在 Kubernetes 中，直接对 Persistent Volume (PV) 进行容量缩容（减小容量）通常是不被支持的。这主要是出于数据安全的考虑，因为贸然缩小底层存储设备可能会破坏数据。
理解 PV 缩容的限制
Kubernetes 及其存储生态系统在设计上就偏向于扩容，对缩容则有严格限制，主要原因如下：
数据安全风险：缩容操作可能导致数据被截断或丢失。如果新的容量小于已存储的数据量，后果不堪设...
K8s HPA原理及最佳实践
在Kubernetes整个体系中，弹性伸缩是至关重要的功能，其分为两种：水平弹性伸缩(Horizontal Pod Autoscaling，简称HPA)和垂直弹性伸缩(Vertical Pod Autoscaler，简称VPA)。HPA可以根据观察到的资源实际使用情况（如CPU/内存）或其它自定义指标负载自动调整Pod副本数，VPA可以根据资源实际使用情况为其Pod中的容器设置最新的资源配额req...
Continue reading >>K8s集群etcd磁盘更换
在 Kubernetes 生产环境中更换 etcd 节点的磁盘是一个高风险操作，需谨慎执行。什么情况需要更换磁盘？
磁盘性能不足，如机械盘升级到 SSD
磁盘硬件存在问题，影响稳定性
ETCD 对磁盘性能要求非常敏感，强烈建议使用 SSD 且独立挂盘。如果有更高性能要求，可以选择分离 snapshot(快照文件)/wal(预写日志)的目录，使用两块盘分离 IO 读写。
以下是详细步骤和注意事项，以三节点...
Continue reading >>kube-proxy iptables 和 ipvs 模式的工作原理及示例
客户有个好几年前的k8s老环境，部署新的应用就出问题了，从部署的服务pod里访问k8s svc地址端口 172.16.0.1:443 不通，宿主机上访问都是通的，kube-proxy mode是 iptables 模式，endpoints检察都正常，svc 后端apiserver 6443 也都能正常访问，重建kube-proxy、kubernetes svc 后 pod 访问 svc 依然不通，...
k8s master join 时etcd证书报错问题
最近在给客户部署一套 k8s 集群时，主节点master1安装完后，master2 join时提示 etcd 证书报错，铲掉重装后问题还是稳定复现，客户提供的机器操作系统为Ubuntu 22.04、Kernel：Linux 5.15.x，报错信息节选如下：
Continue reading >>error execution phase control-plane-prepare/certs: error creating PKI as...