栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

Flume事务和Agent内部原理

Flume事务和Agent内部原理

Flume进阶 1、Flume事务

2、Flume Agent内部原理

  • ChannelSelector:选出Event将要被发往哪个Channel。其共有两种类型,分别是Replicating(复制)和Multiplexing(多路复用)

    ReplicatingSelector会将同一个Event发往所有的Channel,Multiplexing会根据相应的原则,将不同的Event发往不同的Channel。

  • SinkProcessor:

    • DefaultSinkProcessor(默认1对1)
    • LoadBalancingSinkProcessor(负载均衡)
    • FailoverSinkProcessor(故障转移)

    DefaultSinkProcessor对应的是单个的Sink,LoadBalancingSinkProcessor和FailoverSinkProcessor对应的是Sink Group,LoadBalancingSinkProcessor可以实现负载均衡的功能,FailoverSinkProcessor可以错误恢复的功能。

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/681246.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号