在工作崗位上,大數(shù)據(jù)工程師需要基于Hadoop,Spark等構建數(shù)據(jù)分析平臺,進行設計、開發(fā)分布式計算業(yè)務。負責大數(shù)據(jù)平臺(Hadoop,HBase,Spark等)集群環(huán)境的搭建,性能調(diào)優(yōu)和日常維護。負責數(shù)據(jù)倉庫設計,數(shù)據(jù)ETL的設計、開發(fā)和性能優(yōu)化。參與構建大數(shù)據(jù)平臺,依托大數(shù)據(jù)技術建設用戶畫像。
除開以上是需要負責處理的工作,還需要負責分析新的數(shù)據(jù)需求,完成數(shù)據(jù)處理的設計(文檔)和實現(xiàn)。對大數(shù)據(jù)應用產(chǎn)品設計及解決方案設計,通過大數(shù)據(jù)挖掘用戶需求。負責數(shù)據(jù)處理程序設計框架改善,數(shù)據(jù)處理性能優(yōu)化, 系統(tǒng)數(shù)據(jù)處理的能力提高等等。
能夠純熟處理以上工作的大數(shù)據(jù)工程師,月薪輕松突破15K不難。當下行業(yè)極缺人才,一名合格的大數(shù)據(jù)工程師是諸多企業(yè)爭搶的對象,并且開出來的薪資都不菲。以北京為例,大數(shù)據(jù)工程師的起步薪資,都是10000起,隨著工作能力的提升,薪資待遇也會跟著提升。
-
工程師
+關注
關注
59文章
1572瀏覽量
68652 -
大數(shù)據(jù)
+關注
關注
64文章
8908瀏覽量
137799
發(fā)布評論請先 登錄
相關推薦
評論