栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

Flink 学习笔记前置

Flink 学习笔记前置

学习大数据有几年了,一直没有涉及到Flink部分,正好最近时间充裕,便学习整理一份个人学习笔记,仅供参考,学习资源来自于B站尚硅谷及其他网友。

实时处理框架值接触过sparkStreaming和flink所有只针对这两个所学框架先做些对比:

flink 相比较spark Streaming这种微批准实时处理,完全是两种不同的实现方式。flink 是一种完全无间断的流处理,而sparkStreaming 是无限的微小批次组成的“流”,是同一批次数据积累完再去做处理,而Flink是来一条处理一条数据。

flink框架整体设计思想、里面的语法实现要比spark更抽象、语法也更晦涩难懂。更多功能都是在底层去实现。两者都支持java和scala以及python去实现业务,我却更多倾向flink + java + sql 和spark + scala + sql 这种组合去开发。flink基于难度,更多的去用sql 和java去实现(自己熟悉、擅长的),而spark底层是scala 实现的,所以首选scala,但是scala语法标准比较多,所以做到统一性和团队开发还是比较困难,尤其是后期维护,所以配合sql使用会更佳。

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/389310.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号