栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Java

Kafka的数据有序性

Java 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

Kafka的数据有序性

一、Kafka的数据有序性
  • 单分区内有序,有条件的
  • 多分区内,分区与分区键无序
二、如何确保数据有序性 一、kafka发送数据流程

二、kafka1.x版本之前

kafka在1.x版本之前保证数据单分区有序,条件如下:

max.in.flight.requests.per.connection=1(不需要考虑是否开启幂等性)

三、kafka1.x及后续版本

kafka在1.x及后续版本保证数据单分区有序,条件如下:

  • 未开启幂等性:max.in.flight.request.per.conection需要设置为1
  • 开启幂等性:max.in.flight.requests.per.connection需要设置小于等于5
    • 说明:在kafka1.x以后,启用幂等性后,kafka服务端会缓存producer发来的最近5个request的元数据,故无论如何,都可以保证最近5个request的数据都是有序的
转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/975315.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号