- 目錄
第1篇 大數(shù)據(jù)開(kāi)發(fā)工程師 [數(shù)倉(cāng)方向]職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、使用etl工具(如sqoop、kettle)進(jìn)行數(shù)據(jù)加工、清洗等流程;
2、根據(jù)業(yè)務(wù)需求,進(jìn)行數(shù)倉(cāng)日常數(shù)據(jù)分析、數(shù)據(jù)報(bào)表開(kāi)發(fā);
3、使用hive進(jìn)行數(shù)據(jù)處理,及數(shù)據(jù)模型構(gòu)建;
4、具備良好的分析問(wèn)題和解決問(wèn)題的能力;
5、具備較強(qiáng)的溝通能力和邏輯表達(dá)能力,具備良好的團(tuán)隊(duì)合作精神和主動(dòng)溝通意識(shí);
任職要求:
1、計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;
2、熟練使用sql(mysql / oracle);
3、熟練數(shù)據(jù)庫(kù)/數(shù)據(jù)倉(cāng)庫(kù)分層設(shè)計(jì)、寬表設(shè)計(jì)、星型模型設(shè)計(jì)等;
4、熟練etl工具、sqoop、kettle、spark等;
5、熟悉hadoop、hive、hdfs等常用大數(shù)據(jù)組件;
6、有互聯(lián)網(wǎng)業(yè)務(wù)分布式數(shù)據(jù)倉(cāng)庫(kù)、cube、大數(shù)據(jù)數(shù)據(jù)分析等相關(guān)經(jīng)驗(yàn)者加分;
第2篇 大數(shù)據(jù)開(kāi)發(fā)工程師(數(shù)倉(cāng)方向)職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1. 理解業(yè)務(wù)需求,負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)、etl流程的開(kāi)發(fā)和優(yōu)化工作;
2. 解決業(yè)務(wù)數(shù)據(jù)分析、數(shù)據(jù)報(bào)表、數(shù)據(jù)異常相關(guān)的技術(shù)問(wèn)題;
3. spark/yarn/hdfs 的性能改進(jìn)、功能擴(kuò)展、故障分析;
任職資格:
1. 計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;
2. 精通java編程語(yǔ)言,并熟悉scala、python、shell等一門以上腳本語(yǔ)言;
3. 熟悉hadoop大數(shù)據(jù)平臺(tái)架構(gòu),熟悉spark/spark sql/yarn開(kāi)發(fā)調(diào)優(yōu)技術(shù),具有相關(guān)項(xiàng)目經(jīng)驗(yàn)
4. 掌握數(shù)據(jù)倉(cāng)庫(kù)(dw)/olap/商業(yè)智能(bi)/數(shù)據(jù)統(tǒng)計(jì)理論,熟悉oracle/mysql數(shù)據(jù)庫(kù);
5. 思路清晰,具備良好的溝通能力和理解能力,較強(qiáng)的學(xué)習(xí)能力以及快速解決問(wèn)題的能力;
6. 具有高度的責(zé)任感,工作認(rèn)真、踏實(shí)。
福利待遇:
1、薪酬:有競(jìng)爭(zhēng)力的薪酬體系,我們不止跟你談理想,錢也必須談一談~
2、交通:無(wú)論天涯,免費(fèi)班車直達(dá)公司,驀然回首,地鐵就在公司不遠(yuǎn)處。。。
3、工作時(shí)間:5天7小時(shí)工作制,充足的休息讓你一整天元?dú)鉂M滿!
4、各種福利:五險(xiǎn)一金小case,節(jié)日禮物福利補(bǔ)貼說(shuō)不完!
5、團(tuán)建活動(dòng):下午茶,團(tuán)隊(duì)活動(dòng),部門聚餐,經(jīng)費(fèi)充足不差錢,大公司就是這么壕!
6、發(fā)展平臺(tái):想要升職加薪走向人生巔峰?上市公司晉升發(fā)展機(jī)會(huì)多多~
第3篇 中級(jí)數(shù)倉(cāng)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)、維護(hù)及數(shù)據(jù)庫(kù)優(yōu)化工作;
2、數(shù)據(jù)倉(cāng)庫(kù)模型的etl實(shí)施,etl性能優(yōu)化以及相關(guān)技術(shù)問(wèn)題的解決;
3、滿足業(yè)務(wù)方的數(shù)據(jù)需求,提供面向業(yè)務(wù)的olap、報(bào)表、數(shù)據(jù)提取等數(shù)據(jù)服務(wù) 。
任職資格
1、至少熟悉hive/hadoop/spark/storm/flink分布式計(jì)算框架中的一種,有tb級(jí)海量數(shù)據(jù)處理經(jīng)驗(yàn)者優(yōu)先。
2、優(yōu)秀的數(shù)據(jù)敏感性和業(yè)務(wù)理解能力,可以對(duì)復(fù)雜業(yè)務(wù)邏輯快速抽象建模;期望通過(guò)對(duì)業(yè)務(wù)的深入理解,發(fā)揮數(shù)據(jù)價(jià)值,并反哺數(shù)據(jù)體系的建設(shè)。
3、具有3年以上數(shù)據(jù)倉(cāng)庫(kù)工作經(jīng)驗(yàn)。
4、熟練數(shù)據(jù)倉(cāng)庫(kù)的etl的開(kāi)發(fā)和數(shù)據(jù)建模。
第4篇 高級(jí)數(shù)據(jù)工程師(數(shù)倉(cāng)方向)職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1.負(fù)責(zé)全司數(shù)據(jù)的數(shù)據(jù)調(diào)研,數(shù)據(jù)模型設(shè)計(jì),etl開(kāi)發(fā),任務(wù)監(jiān)控和優(yōu)化等
2.負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)多場(chǎng)景的基礎(chǔ)服務(wù)層建設(shè),如多維分析,即席查詢,實(shí)時(shí)推送等
3.負(fù)責(zé)基于數(shù)據(jù)倉(cāng)庫(kù)之上的數(shù)據(jù)中臺(tái)建設(shè),如數(shù)據(jù)管控系統(tǒng),特征工程,指標(biāo)庫(kù)等數(shù)據(jù)分析相關(guān)的通用服務(wù)
4.負(fù)責(zé)數(shù)據(jù)管理共享系統(tǒng)的設(shè)計(jì),開(kāi)發(fā)和實(shí)施;
任職資格:
1、計(jì)算機(jī)、數(shù)學(xué)相關(guān)專業(yè)全日制本科以上學(xué)歷;
2、熟悉數(shù)據(jù)治理方法論,了解數(shù)據(jù)質(zhì)量、數(shù)據(jù)模型和元數(shù)據(jù)管理等相關(guān)技術(shù)
3、5年以上具備大型數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)(離線&實(shí)時(shí))、模型設(shè)計(jì)、etl設(shè)計(jì)的相關(guān)經(jīng)驗(yàn)
4、要求至少精通一種主流的etl產(chǎn)品,如:datastage或infomatica
5、精通oracle存儲(chǔ)過(guò)程的開(kāi)發(fā)
6、具有豐富的etl實(shí)施經(jīng)驗(yàn),熟悉金融投資行業(yè)優(yōu)先