栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Java

NacosRule规则导致spring-retry失败踩坑

Java 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

NacosRule规则导致spring-retry失败踩坑

简介

本文记录springcloud使用RestTemplate请求测试服务重试过程中, 配置NacosRule 权重规则导致spring-retry执行失败踩坑经历

重试是一种容错机制,如果请求后台服务出错,或者服务器故障,会向另一台服务器重试访问

背景

测试springcloud重试机制通过引入spring-retry能够自动请求超时重试其他可用节点。

        
        
            org.springframework.retry
            spring-retry
        

  • 测试配置

    • 消费端: 请求超时设置为3秒
    • 提供者7072: 线程睡眠5秒响应 (模拟业务执行超时,触发消费端重试)
    • 提供者7070: 正常响应
  • 问题: 使用ribbon得默认策略可以正常使用。但是使用NacosRule作为ribbon负载均衡策略情况下,会出现概率性失效。报错如下

  • 分析: 通过控制台RetryTemplate有执行日志,说明retry机制是有被触发。连接超时报错,说明第二次可能依然选择了"有故障的节点", 通过观察正常情况日志,服务提供者,默认使用1:1策略,并不是严格交替执行,而是整体保证1:1请求分发。因此可能重试时候取到的将能够出问题的7072服务,因此导致重试依然报错,为了验证假设,将故障服务权重提高到1000,几乎必现。

    原始日志无法显示ribbon实际选择的实例. 自定义RibbonLoadBalancerClient扩展默认实现输入日志。也印证结论

public class CustomRibbonLoadBalancerClient extends RibbonLoadBalancerClient {
    private static final Logger LOGGER = LoggerFactory.getLogger(CustomRibbonLoadBalancerClient.class);
    public CustomRibbonLoadBalancerClient(SpringClientFactory clientFactory) {
        super(clientFactory);
    }

    @Override
    public  T execute(String serviceId, ServiceInstance serviceInstance, LoadBalancerRequest request) throws IOException {
        Server server = null;
        if (serviceInstance instanceof RibbonServer) {
            server = ((RibbonServer) serviceInstance).getServer();
            LOGGER.info("请求实际地址:{}", server.getHostPort());
        }

        return super.execute(serviceId, serviceInstance, request);
    }
}

结论

导致spring-retry失败原因,并不是spring-retry bug.而是NacosRule本身机制导致的。

  • 建议
    线上环境如果开启重试机制不建议使用NacosRule作为ribbon的负载均衡策略, 尽量采用可轮询负载均衡策略。保证触发spring-retry ribbon获取到的是新的节点。因为出现超时的服务,可能出现的服务异常,短时间内再次请求可能依然存在问题。切换不同的实例重试更能够保证高可用。(参考ngnix机制)
源码分析 LoadBalancerAutoConfiguration.RetryInterceptorAutoConfiguration#restTemplateCustomizer 配置拦截器

RetryLoadBalancerInterceptor

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/972357.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号