歡迎光臨管理者范文網
當前位置:管理者范文網 > 安全管理 > 安全管理 > 崗位要求

大數據開發(fā)崗位要求15篇

更新時間:2024-11-20 查看人數:29
  • 目錄

大數據開發(fā)崗位要求

第1篇 大數據開發(fā)工程師崗位職責職位要求

職責描述:

崗位職責:

1、運用大數據分析工具和技術解決風險管理業(yè)務中遇到的實際問題與需求,如風險評估、成長評價等,包括對模型進行設計、開發(fā)、驗證、測試、部署及監(jiān)控、優(yōu)化。。

2、基于海量用戶數據和特征,進行數據質量檢查、特征加工、數據清洗等,建立數據挖掘模型。

3、評估數據源的質量和價值,能結合業(yè)務需求和場景,從各種數據維度中挖掘數據價值,并設計不同的模型,應用于不同的業(yè)務場景中。

職位要求:

1. 計算機、統(tǒng)計學相關背景,熟悉常用各類機器學習算法的原理(如邏輯回歸、決策樹、svm、神經網絡、隨機森林、深度學習等);

2.熟練使用sas、r、python等至少一種分析工具;

3.熟悉大數據分析平臺和工具,如hive,hadoop, spark等優(yōu)先;

4.有較強的邏輯思維能力、優(yōu)秀的溝通表達能力及團隊合作能力。

崗位要求:

學歷要求:本科

語言要求:不限

年齡要求:不限

工作年限:5-7年經驗

第2篇 大數據開發(fā)工程師(數倉方向)職位描述與崗位職責任職要求

職位描述:

崗位職責:

1. 理解業(yè)務需求,負責數據倉庫建設、etl流程的開發(fā)和優(yōu)化工作;

2. 解決業(yè)務數據分析、數據報表、數據異常相關的技術問題;

3. spark/yarn/hdfs 的性能改進、功能擴展、故障分析;

任職資格:

1. 計算機相關專業(yè)本科及以上學歷;

2. 精通java編程語言,并熟悉scala、python、shell等一門以上腳本語言;

3. 熟悉hadoop大數據平臺架構,熟悉spark/spark sql/yarn開發(fā)調優(yōu)技術,具有相關項目經驗

4. 掌握數據倉庫(dw)/olap/商業(yè)智能(bi)/數據統(tǒng)計理論,熟悉oracle/mysql數據庫;

5. 思路清晰,具備良好的溝通能力和理解能力,較強的學習能力以及快速解決問題的能力;

6. 具有高度的責任感,工作認真、踏實。

福利待遇:

1、薪酬:有競爭力的薪酬體系,我們不止跟你談理想,錢也必須談一談~

2、交通:無論天涯,免費班車直達公司,驀然回首,地鐵就在公司不遠處。。。

3、工作時間:5天7小時工作制,充足的休息讓你一整天元氣滿滿!

4、各種福利:五險一金小case,節(jié)日禮物福利補貼說不完!

5、團建活動:下午茶,團隊活動,部門聚餐,經費充足不差錢,大公司就是這么壕!

6、發(fā)展平臺:想要升職加薪走向人生巔峰?上市公司晉升發(fā)展機會多多~

第3篇 大數據開發(fā)工程師 [數倉方向]職位描述與崗位職責任職要求

職位描述:

工作職責:

1、使用etl工具(如sqoop、kettle)進行數據加工、清洗等流程;

2、根據業(yè)務需求,進行數倉日常數據分析、數據報表開發(fā);

3、使用hive進行數據處理,及數據模型構建;

4、具備良好的分析問題和解決問題的能力;

5、具備較強的溝通能力和邏輯表達能力,具備良好的團隊合作精神和主動溝通意識;

任職要求:

1、計算機相關專業(yè)本科及以上學歷;

2、熟練使用sql(mysql / oracle);

3、熟練數據庫/數據倉庫分層設計、寬表設計、星型模型設計等;

4、熟練etl工具、sqoop、kettle、spark等;

5、熟悉hadoop、hive、hdfs等常用大數據組件;

6、有互聯(lián)網業(yè)務分布式數據倉庫、cube、大數據數據分析等相關經驗者加分;

第4篇 大數據開發(fā)架構師職位描述與崗位職責任職要求

職位描述:

大數據架構師

崗位描述:

1. 負責公司大數據基礎框架的整體架構設計,結合公司實際業(yè)務情況進行技術選型;

2. 負責數據存儲、計算平臺的整體評估、設計以及核心功能模塊的開發(fā);

3. 協(xié)助團隊解決開發(fā)過程中的技術難題,負責新技術的調研,并能在團隊內推廣應用;

崗位要求:

1. 計算機相關專業(yè)本科以上學歷,5年以上工作經驗,3年以上大數據相關經驗;

2. 熟悉常用的數據結構、算法以及數據建模理論;

3. 有過支撐每日億級別數據的大數據平臺建設經驗,了解數據倉庫實施方法論、了解數據倉庫體系,并支撐過實際業(yè)務場景;

4. 具備較強的編碼能力,掌握 java/scala/python 開發(fā)語言之一,熟練使用 sql 進行數據訪問;

5. 精通 hadoop 生態(tài)系統(tǒng)基礎設施,包括flume、kafka、hbase、hive、spark、storm等;

6. 有團隊管理經驗者優(yōu)先;

第5篇 健康科技中心-高級大數據開發(fā)工程師職位描述與崗位職責任職要求

職位描述:

職位描述:

1. 基于hadoop生態(tài)系統(tǒng)進行大數據平臺建設;

2. 負責各業(yè)務條線相關指標數據的數據建模

3. 負責基于sqoop,hive、spark、sparksql、mysql進行大數據開發(fā)

4. 負責離線運算、實時計算平臺項目的設計、開發(fā)及運維

5. 負責對數據平臺進行性能調優(yōu)

任職要求:

1.統(tǒng)招本科或以上學歷,6年以上大數據開發(fā)工作經驗;

2.熟練掌握shell、python開發(fā)語言;

3.熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理,有相關的調優(yōu)、運維、開發(fā)經驗;

4.熟練掌握mysql數據庫集群;

5. 精通主流etl開發(fā)工具,如:informatica、data services、kettle;精通主流調度工具,如:azkaban, oozie;

6.有數據倉庫、分析系統(tǒng)、用戶畫像等產品開發(fā)經驗者優(yōu)先;

7.有較強的數據和業(yè)務結合能力;

8.有醫(yī)療或者大健康背景優(yōu)先;

9.有較強的獨立、主動的學習能力,良好的溝通表達能力。

第6篇 高級大數據開發(fā)工程師職位描述與崗位職責任職要求

職位描述:

崗位職責:

1. 基于公司大數據產品進行數據開發(fā),包括數據的采集,清洗,預處理,存儲,建模,分析挖掘等

2. 根據業(yè)務用戶需要分析數據,提供數據支持

3. 參與公司大數據產品的運維和監(jiān)控,保障數據質量和服務穩(wěn)定性

任職要求:

1. 具備本科以上學歷, 計算機, 軟件以及相關專業(yè), 5年以上大數據開發(fā)經驗

2. 熟悉數據倉庫維度建模, 并能根據客戶需求進行數據開發(fā), 向模型更新數據

3. 使用過至少一種以上的etl工具

4. 熟練掌握java, 對hadoop相關的技術和組件(hdfs, mr, hbase, hive, spark, storm, kafka等)有全面深入了解

5. 熟練掌握shell或者python中的一種

6. 具備spark開發(fā)經驗者優(yōu)先

7. 具備實時計算(kafka+storm/spark streaming) 經驗者優(yōu)先

8. 具備數據分析和數據挖掘方面經驗者優(yōu)先

第7篇 大數據開發(fā)(實時計算)職位描述與崗位職責任職要求

職位描述:

崗位職責:

1、參與計算框架和服務的定制和改進,為公司批處理和流式計算能力提供支撐

2、基于業(yè)務需求和應用場景,設計和實現公司大數據相關產品

3、負責設計,開發(fā),優(yōu)化數據接入、數據存儲、數據計算服務框架

4、為公司所有業(yè)務線提供數據支持和服務

5、主要是為實時數倉計算提供數據支持和服務

任職要求:

1、本科以上學歷,3年以上大數據開發(fā)經驗,掌握數據倉庫理論、模型設計方法等

2、對大數據實時數倉建設有成熟的解決方案和實踐經驗

3、熟悉spark,flink、storm等大型分布式平臺組件

4、精通sql ,sparksql優(yōu)先,熟悉java,scala、python編程

5、有較強的性能優(yōu)化及問題排查、解決能力

6、具備良好的溝通能力,做事認真、仔細,有責任心,具有團隊協(xié)作能力

7、對kafka消息隊列中間件有過深度使用經驗、對于druid、kudu、presto有過項目經驗

8、對于數據采集、數據訂閱有成熟的解決方案或是項目經驗

第8篇 大數據開發(fā)高級工程師-etl方向職位描述與崗位職責任職要求

職位描述:

工作職責:

1、 根據公司數據分析需求進行基于hadoop 平臺的項目開發(fā);

2、 根據需求進行數據倉庫模型設計,熟練使用kettle工具進行etl程序的開發(fā);包括實時數據加工,計算,etl,管理, 監(jiān)控等;

3、 負責針對源系統(tǒng)進行數據抽取、處理、分析等相關工作,及項目中涉及到的數據庫創(chuàng)建、維護及提供數據接口工作;

4、 負責設計并優(yōu)化基于hive 的數據倉庫的建設;

5、 制定數據庫備份和恢復策略及工作流程與規(guī)范。

6、能出具消費品品牌制造行業(yè)應用的數據分析技術解決方案,并落地。

任職資格:

1.從事數據倉庫領域至少2年以上,熟悉數據倉庫模型設計與etl開發(fā)經驗 ,具備海量數據加工處理相關經驗;

2. 熟悉數據倉庫領域知識和技能者優(yōu)先,包括但不局限于:元數據管理、數據開發(fā)測試工具與方法、數據質量、主數據管理;

3.有從事分布式數據存儲與計算平臺應用開發(fā)經驗,熟悉hadoop生態(tài)相關技術并有相關實踐經驗著優(yōu)先,重點考察hive、hdfs、hbase;

4. 熟練掌握kettlesqoop、data_、airflow等;

5. 有消費品品牌制造、零售行業(yè)經驗,尤其快消品行業(yè)和財務領域數據項目經驗者優(yōu)先;

6. 熟悉分布式計算presto/imapa優(yōu)先;

7.有實時計算方面的經驗的優(yōu)先。

第9篇 大數據開發(fā)經理職位描述與崗位職責任職要求

職位描述:

崗位職責:

1、參與大數據平臺、工具平臺的架構、設計以及實現;

2、參與對項目的開發(fā)需求進行評審,制定項目的設計文檔、開發(fā)計劃文檔等;

3、負責公司各類數據產品數據抽取、清洗,以及數據算法與存儲的設計和優(yōu)化;

4、優(yōu)化大數據平臺的性能,提高穩(wěn)定性;

5、負責大數據平臺的組件升級與參數優(yōu)化。

崗位要求:

1、本科及以上學歷,3年以上相關技術背景,具備扎實的數據結構和算法基礎,扎實的工程實現能力;

2、熟悉hadoop大數據相關技術體系,包括但不限于hbase、hdfs、storm、kafka、spark、hive、flume等;

3、精通java或python,能熟練編寫規(guī)范代碼,有較強的數據庫及sql開發(fā)調優(yōu)能力;

4、熟悉自然語言處理/機器學習/數據挖掘領域,熟悉常用的機器學習算法優(yōu)先考慮;

5、有大規(guī)模數據收集,日志處理經驗,有電商數據分析背景優(yōu)先考慮;

6、深入研究過大數據框架的運行機制、實現原理、源碼者優(yōu)先考慮。

第10篇 大數據開發(fā)主管職位描述與崗位職責任職要求

職位描述:

崗位職責:

負責大數據平臺項目架構設計;

負責與客戶進行具體業(yè)務需求溝通,引導客戶需求并確認;

負責需求分析以及平臺設計、數據模型設計工作,并輸出相關文檔,與第三方進行溝通,并確認項目關鍵節(jié)點進度。

任職要求:

國家正規(guī)院校統(tǒng)招本科以上學歷,有5年以上工作經驗,至少1年以上大數據架構師工作經驗、熟悉大數據平臺項目的操作流程;

熟練掌握python、hadoop、spark、kafka等工具;

較好的溝通理解能力和主動性。

第11篇 java大數據開發(fā)高級工程師崗位職責職位要求

職責描述:

崗位要求:

1、計算機或相關專業(yè)本科以上學歷,3年以上專業(yè)java開發(fā)經驗,有過大型項目經驗優(yōu)先;

2、精通 jdbc、jsp / ibatis /spring/ struts2等java主流技術;

3、熟悉web容器及主流開源框架,熟悉http的基本工作原理;

4、熟悉io、多線程、集合類等基礎框架,熟悉緩存、消息、搜索等機制;

5、熟悉linu_操作系統(tǒng),熟悉mysql數據庫;,精通sql語言;

6、有大型項目架構設計開發(fā)和數據庫優(yōu)化經驗優(yōu)先;

7、具有良好的團隊協(xié)作精神,較強的溝通能力,具備良好的問題定位分析能力和新興技術學習能力。

崗位職責:

1.負責研發(fā)公司自主呼叫中心產品;

2.協(xié)助實施部門定位跟蹤產品問題;

3.客戶化項目定制開發(fā)

崗位要求:

學歷要求:大專

語言要求:不限

年齡要求:不限

工作年限:3-5年

第12篇 中級大數據開發(fā)工程師職位描述與崗位職責任職要求

職位描述:

職責描述:

1、參與公司商業(yè)智能平臺的研發(fā)工作;

2、參與公司商業(yè)智能平臺的升級改造工作,包括運維工作。

任職要求:

1、正規(guī)院校本科及以上學歷,軟件、計算機、通信、信息安全、網絡工程等相關專業(yè);

2、良好的java開發(fā)背景,熟悉spring/mybatis技術體系;

3、良好的sql功底,熟悉mysql或oracle數據庫;

4、熟悉linu_;

5、了解開源pentaho產品,包括prd、mondrian、saiku、kettle等;

6、熟悉hadoop、hive、hbase、storm、spark等大數據平臺;

7、溝通能力強,有較強的學習能力,有較強的責任心與良好的團隊協(xié)作能力。

第13篇 大數據開發(fā)工程師職位描述與崗位職責任職要求

職位描述:

工作職責:

1、根據業(yè)務需求進行數據模型的調研、設計、開發(fā)及驗證工作,并持續(xù)進行模型的優(yōu)化;

2、負責數據模型架構的構建,建立數據抽取、清洗、校驗等數據加工流程規(guī)范及olap多維數據分析模型;

3、持續(xù)對系統(tǒng)的技術架構進行改進和優(yōu)化,提升海量數據的查詢性能和用戶體驗。

任職資格:

1、統(tǒng)招本科或以上學歷,計算機、數據挖掘等相關專業(yè),工作至少3年以上;

2、熟悉java開發(fā),有腳本語言(shell,python)開發(fā)經驗者優(yōu)先;

3、至少熟悉一種大數據處理技術,如hadoop、spark;

4、掌握hbase、redis、elastic search等開源大數據存儲技術,并能結合不同的業(yè)務場景深入使用;

5、精通sql,精通mysql、oracle、sql server等一種大型數據庫,以及數據庫的維護和優(yōu)化。

6、熟悉常用java web開發(fā)框架,如:spring、mybatis等;

7、熟悉多線程編程,并對java自帶線程池有一定研究;

8、對解決具有挑戰(zhàn)性的問題充滿激情,具有良好的分析問題和解決問題的能力。

第14篇 java大數據開發(fā)職位描述與崗位職責任職要求

職位描述:

職責描述:

1. 參與大數據平臺和大數據處理框架的架構規(guī)劃設計;

2. 參與數據治理工作,提升數據易用性及數據質量;

3. 理解并合理抽象業(yè)務需求,發(fā)揮數據價值,主動思考不斷優(yōu)化,與業(yè)務團隊緊密合作;

4. 配合大數據負責人完成hadoop、spark等集群的管理、優(yōu)化和維護,保證集群規(guī)模持續(xù)、穩(wěn)定。

任職要求:

1. 兩年以上相關工作經驗;

2. 熟練掌握java語言,熟練使用linu_,強悍的編碼和處理問題能力;

3. 熟悉大數據開源棧spark/hadoop、hive、hbase、elasticsearch、kafka、redis, strom/spark-streaming/flink,有至少tb以上級大數據處理經驗. 有sparkstreaming的實時統(tǒng)計開發(fā)經驗優(yōu)先;

4. 對數據敏感,認真細致,善于從數據中發(fā)現疑點;

5. 善于溝通,具備優(yōu)秀的技術與業(yè)務結合能力;

6. 學習能力強,喜歡研究開源新技術,有團隊觀念,具備獨立解決問題的能力

第15篇 大數據開發(fā)(數據倉庫)職位描述與崗位職責任職要求

職位描述:

崗位職責:

1、參與計算框架和服務的定制和改進,為公司批處理和流式計算能力提供支撐

2、基于業(yè)務需求和應用場景,設計和實現公司大數據相關產品

3、負責設計,開發(fā),優(yōu)化數據接入、數據存儲、數據計算服務框架

4、為公司所有業(yè)務線提供數據支持和服務

任職要求:

1、本科以上學歷,3年以上大數據開發(fā)經驗,掌握數據倉庫理論、模型設計方法、etl設計理論等

2、對大數據離線數倉有成熟的解決方案和實踐經驗

3、深入理解公司業(yè)務,建立指標分析體系,利用數據分析,不斷驅動業(yè)務優(yōu)化,策略分析經驗豐富優(yōu)先

4、了解sql, hive sql,sparksql優(yōu)先,熟悉python編程,java基礎編程

5、有較強的性能優(yōu)化及問題排查、解決能力

6、具備良好的溝通能力,做事認真、仔細,有責任心,具有團隊協(xié)作能力

大數據開發(fā)崗位要求15篇

職位描述:職責描述:1、參與公司商業(yè)智能平臺的研發(fā)工作;2、參與公司商業(yè)智能平臺的升級改造工作,包括運維工作。任職要求:1、正規(guī)院校本科及以上學歷,軟件、計算機、通信、信息安全、網絡工程等相關專業(yè);2、良好的java開發(fā)背景,熟悉sringmybatis技術體系;3、…
推薦度:
點擊下載文檔文檔為doc格式

相關大數據開發(fā)信息

  • 大數據開發(fā)工程師崗位要求15篇
  • 大數據開發(fā)工程師崗位要求15篇31人關注

    職位描述:崗位職責:1.基于公司大數據產品進行數據開發(fā),包括數據的采集,清洗,預處理,存儲,建模,分析挖掘等2.根據業(yè)務用戶需要分析數據,提供數據支持3.參與公司大數據產品的運 ...[更多]

  • 大數據開發(fā)崗位要求15篇
  • 大數據開發(fā)崗位要求15篇29人關注

    職位描述:職責描述:1、參與公司商業(yè)智能平臺的研發(fā)工作;2、參與公司商業(yè)智能平臺的升級改造工作,包括運維工作。任職要求:1、正規(guī)院校本科及以上學歷,軟件、計算機、通 ...[更多]

相關專題

崗位要求熱門信息