一、因为java启动 需要时间,在用户点击发版的时候
kube-apiserver会接受到用户的删除指令,默认有30秒时间等待优雅退出,超过30秒会被标记为死亡状态,此时Pod的状态Terminating,kubelet看到pod标记为Terminating就开始了关闭Pod的工作;关闭流程如下
1、pod从service的endpoint列表中被移除;
2、如果该pod定义了一个停止前的钩子,其会在pod内部被调用,停止钩子一般定义了如何优雅的结束进程;
3)进程被发送TERM信号(kill -14);
4)当超过优雅退出的时间后,Pod中的所有进程都会被发送SIGKILL信号(kill -9)
所以 在以上完成前,你的java服务还没有启动完成,用户端体验就是503 状态,因为你的pod java服务还没有启动完成,如果启动失败,那就是无法恢复,只能在线修复,或者回滚
如何杜绝,处理这个问题
无健康检查状态
第一个节点服务 刚刚创建,就删除了旧服务,其实里面的 java 还不能正常工作,因为启动也需要 20秒左右,所以就导致服务断线问题
有健康检查状态 ,新服务没有通过 验证,就不会删除旧服务
1、健康检查
存活检查、如果检查失败,将杀死容器,根据Pod 的重启策略来操作。
就绪检查、如果检查失败,Kubernetes会把 Pod从服务端点中剔除。(可以理解为提出k8s的负载均衡)
启动检查、检查成功才由存活检查接手,用于保护 慢启动容器
startupProbe:
initialDelaySeconds: 5 #启动容器后多少秒,进行健康检查
timeoutSeconds: 1 #超时
periodSeconds: 5 #每各*秒一次
successThreshold: 1 #成功值
failureThreshold: 30 #失败次数
tcpSocket:
port: 123 #检查端口
............................. HTTP 请求格式
startupProbe:
..........
httpGet:
scheme: HTTP
path: /oss/actuator/health #oss的健康检查地址
port: 8765
### 推荐
livenessProbe:
initialDelaySeconds: 30
periodSeconds: 10
failureThreshold: 2
httpGet:
scheme: HTTP
path: /oss/actuator/health
port: 8765
readinessProbe:
initialDelaySeconds: 30
periodSeconds: 10
failureThreshold: 2
httpGet:
scheme: HTTP
path: /oss/actuator/health
port: 8765
点赞关注:留言帮你解决k8s烦恼



