什么样的专业大数据维护、RD、架构工程师可以学习大数据?涉及的专业岗位有:大数据工程师、大数据维护工程师、大数据RD工程师、大数据架构师等。大数据挖掘与分析涉及的主要岗位有:大数据分析师、大数据高级工程师、大数据分析专家、大数据挖掘师、大数据计算大师等。我还会给你一些大数据职业的详细信息:
大数据开发工程师
职责:主要负责收集、开发、构建、测试和维护使用大数据技术的架构;负责公司大数据平台的开发和维护,大数据平台持续整合的相关工具平台的架构设计和产品开发等。
数据挖掘工程师
职责:熟练搭建数据分析框架,掌握和使用相关常用分析工具,提取、分析和呈现数据的商业意义,需要业务理解和工具应用能力。
数据架构师
职责:需求分析、平台选择、技术架构设计、应用设计与开发、测试与部署;高级算法设计和优化;相关数据系统的设计和优化。技能要求:掌握Hadoop、Spark、Storm等生态系统,及其相关组件如Yarn、HBase、Hive、Pig等。
仓库盘点工程师
仓库工程师的日常工作一般不写代码,主要写SQL!仓库工程师是大数据领域的公司招的比较多的职位,工资也比较高,需要关注!
ETL工程师
ETL是三个单词的首字母,中文意思是提取、转换、加载。从开头的图可以看出,ETL工程师是业务和数据的接口,所以需要处理上下游的关系。对于上游来说,他们需要经常和业务系统的人打交道,所以要熟悉业务系统。比如他们有各种接口,无论是API级别还是数据库接口,都需要ETL工程师非常了解。其次是下游,也就是说你要和很多数据开发工程师、数据科学家打交道。比如把准备好的数据交给下游的数据开发和数据科学家。
当然还有很多相关的职业,因为大数据涉及的知识比较广泛,要学会所有的技能太难了。所以现在企业细分大数据岗位,集中在某个方向招聘。所以,先搞清楚大数据有哪些就业方向,然后在后续的学习过程中重点关注自己感兴趣的部分。



