歡迎光臨管理者范文網
當前位置:管理者范文網 > 安全管理 > 崗位職責 > 工程崗位職責

高級大數據工程師崗位職責5篇

發(fā)布時間:2022-12-13 21:06:04 查看人數:68

高級大數據工程師崗位職責

第1篇 高級大數據開發(fā)工程師職位描述與崗位職責任職要求

職位描述:

崗位職責:

1. 基于公司大數據產品進行數據開發(fā),包括數據的采集,清洗,預處理,存儲,建模,分析挖掘等

2. 根據業(yè)務用戶需要分析數據,提供數據支持

3. 參與公司大數據產品的運維和監(jiān)控,保障數據質量和服務穩(wěn)定性

任職要求:

1. 具備本科以上學歷, 計算機, 軟件以及相關專業(yè), 5年以上大數據開發(fā)經驗

2. 熟悉數據倉庫維度建模, 并能根據客戶需求進行數據開發(fā), 向模型更新數據

3. 使用過至少一種以上的etl工具

4. 熟練掌握java, 對hadoop相關的技術和組件(hdfs, mr, hbase, hive, spark, storm, kafka等)有全面深入了解

5. 熟練掌握shell或者python中的一種

6. 具備spark開發(fā)經驗者優(yōu)先

7. 具備實時計算(kafka+storm/spark streaming) 經驗者優(yōu)先

8. 具備數據分析和數據挖掘方面經驗者優(yōu)先

第2篇 健康科技中心-高級大數據開發(fā)工程師職位描述與崗位職責任職要求

職位描述:

職位描述:

1. 基于hadoop生態(tài)系統進行大數據平臺建設;

2. 負責各業(yè)務條線相關指標數據的數據建模

3. 負責基于sqoop,hive、spark、sparksql、mysql進行大數據開發(fā)

4. 負責離線運算、實時計算平臺項目的設計、開發(fā)及運維

5. 負責對數據平臺進行性能調優(yōu)

任職要求:

1.統招本科或以上學歷,6年以上大數據開發(fā)工作經驗;

2.熟練掌握shell、python開發(fā)語言;

3.熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理,有相關的調優(yōu)、運維、開發(fā)經驗;

4.熟練掌握mysql數據庫集群;

5. 精通主流etl開發(fā)工具,如:informatica、data services、kettle;精通主流調度工具,如:azkaban, oozie;

6.有數據倉庫、分析系統、用戶畫像等產品開發(fā)經驗者優(yōu)先;

7.有較強的數據和業(yè)務結合能力;

8.有醫(yī)療或者大健康背景優(yōu)先;

9.有較強的獨立、主動的學習能力,良好的溝通表達能力。

第3篇 高級大數據研發(fā)工程師(數據可視化)職位描述與崗位職責任職要求

職位描述:

崗位職責:

1.負責全公司的數據平臺數據可視化研發(fā)工作

2.獨立完成數據可視化研發(fā)工作

任職要求:

1.計算機、電子通信、數學、統計或者相關專業(yè)本科及以上學歷

2.熟練掌握java/python中的一種語言

3.熟悉數據可視化開發(fā),熟悉echarts應用開發(fā)的優(yōu)先

4.熟悉web開發(fā),熟悉html,js,css

5.熟悉quick bi的優(yōu)先

6.具備良好的團隊合作精神,工作有激情

7.對數據敏感,有產品思維的優(yōu)先

第4篇 高級大數據產品研發(fā)工程師職位描述與崗位職責任職要求

職位描述:

崗位職責:

1. 參與公司數據開發(fā)平臺、bi產品等大數據產品的設計和開發(fā);

2. 負責數據開發(fā)平臺、bi產品等大數據產品的部署和維護,保證其穩(wěn)定和可靠;

3. 關注和參與大數據方向開源產品的技術動態(tài)與演進,推動產品與技術架構持續(xù)更新;

任職要求:

1. 計算機相關專業(yè),本科及以上學歷,5年以上軟件開發(fā)經驗,3年以上互聯網產品或分布式系統開發(fā)設計經驗;

2. 精通java, python, scala等一種或幾種編程語言, 并熟悉linu_操作系統及bash shell編程;

3. 有hadoop/spark/hive/presto/hbase/elasticsearch/kafka等使用經驗, 并熟悉上述常用的分布式系統架構設計和原理;

4. 熟悉微服務框架及相關技術, 如dubbo, springcloud等;

5. 熟悉mysql、redis, 并了解或接觸過其他數據庫如 oracle, sqlserver, postgresql, mongodb等;

6. 了解容器技術, 如docker, kubernetes;

7. 具有一定的軟件設計能力, 熱愛大數據和技術,相信技術改變世界,學習能力強,認同數據價值,有面向業(yè)務的思維, 較強的自主學習能力和英文技術文檔閱讀能力;

8. 良好的溝通能力、團隊精神及服務意識,勇于接受挑戰(zhàn),能承受較大的工作壓力;

9. 有生產環(huán)境快速trouble-shooting的經驗和能力者優(yōu)先;

10. 有olap,多維度數據分析經驗優(yōu)先,有對數據倉庫有較強的理論基礎和理解者優(yōu)先;

第5篇 高級大數據工程師職位描述與崗位職責任職要求

職位描述:

崗位職責:

1、參與大數據開放平臺基礎能力建設,承擔系統架構、組件開發(fā)、方案驗證等工作;

2、參與構建大數據系列產品,包括但不限于用戶畫像、用戶增長與用戶經營、數據分析挖掘、實時計算、數據分發(fā)、機器學習平臺、風控反欺詐等產品線;

任職要求:

1、 統招本科或以上學歷,5年以上大數據開發(fā)工作經驗;

2、扎實的java基礎,能熟練使用java進行軟件功能開發(fā);

3、熟練掌握基于hadoop生態(tài)的大數據開發(fā)工具,包括hive、spark、hbase、sqoop、es、impala、flink、storm等,有實時系統開發(fā)經驗優(yōu)先;

4、熟悉常用的數據挖掘算法,例如聚類、回歸、決策樹等,有過nlp項目經驗優(yōu)先;

5、有過互聯網公司數據倉庫、分析系統、用戶畫像、廣告平臺等產品開發(fā)經驗者優(yōu)先;

6、工作積極主動,善于合作,敏而好學;

高級大數據工程師崗位職責5篇

職位描述:崗位職責:1、參與大數據開放平臺基礎能力建設,承擔系統架構、組件開發(fā)、方案驗證等工作;2、參與構建大數據系列產品,包括但不限于用戶畫像、用戶增長與用戶經營、數據分析挖掘、實時計算、數據分發(fā)、機器學習平臺、風控反欺詐等產品線;任職要求:1、統招本科或以上學歷,5年以上大數據開發(fā)工作經驗;…
推薦度:
點擊下載文檔文檔為doc格式

相關高級大數據信息

  • 高級大數據工程師崗位職責5篇
  • 高級大數據工程師崗位職責5篇68人關注

    職位描述:崗位職責:1、參與大數據開放平臺基礎能力建設,承擔系統架構、組件開發(fā)、方案驗證等工作;2、參與構建大數據系列產品,包括但不限于用戶畫像、用戶增長與用戶 ...[更多]

工程崗位職責熱門信息