在工作岗位上,大数据工程师需要基于Hadoop,Spark等构建数据分析平台,进行设计、开发分布式计算业务。负责大数据平台(Hadoop,HBase,Spark等)集群环境的搭建,性能调优和日常维护。负责数据仓库设计,数据ETL的设计、开发和性能优化。参与构建大数据平台,依托大数据技术建设用户画像。
除开以上是需要负责处理的工作,还需要负责分析新的数据需求,完成数据处理的设计(文档)和实现。对大数据应用产品设计及解决方案设计,通过大数据挖掘用户需求。负责数据处理程序设计框架改善,数据处理性能优化, 系统数据处理的能力提高等等。
能够纯熟处理以上工作的大数据工程师,月薪轻松突破15K不难。当下行业极缺人才,一名合格的大数据工程师是诸多企业争抢的对象,并且开出来的薪资都不菲。以北京为例,大数据工程师的起步薪资,都是10000起,随着工作能力的提升,薪资待遇也会跟着提升。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。
举报投诉
-
工程师
+关注
关注
59文章
1603浏览量
71224 -
大数据
+关注
关注
64文章
9099浏览量
144070
发布评论请先 登录
相关推荐
热点推荐
什么是BSP工程师
,全称Board Support Package,汉语意思即板级支持包。BSP工程师,顾名思义就是负责板级支持包的开发、调试和维护工作。那么什么是板级支持包呢?前面我们讲过,嵌入式硬件工程师负责设计硬件
发表于 01-13 06:54
电子工程师设计相关要点与案例分析
电子工程师设计相关要点与案例分析 作为电子工程师,在设计工作中会涉及到众多领域和不同类型的项目。下面结合一些实际案例,为大家分享电子工程师设计过程中的要点和思路。 文件下载: Litt
大数据工程师的日常工作是什么
评论