- 目錄
第1篇 高級大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1. 基于公司大數(shù)據(jù)產(chǎn)品進(jìn)行數(shù)據(jù)開發(fā),包括數(shù)據(jù)的采集,清洗,預(yù)處理,存儲,建模,分析挖掘等
2. 根據(jù)業(yè)務(wù)用戶需要分析數(shù)據(jù),提供數(shù)據(jù)支持
3. 參與公司大數(shù)據(jù)產(chǎn)品的運維和監(jiān)控,保障數(shù)據(jù)質(zhì)量和服務(wù)穩(wěn)定性
任職要求:
1. 具備本科以上學(xué)歷, 計算機(jī), 軟件以及相關(guān)專業(yè), 5年以上大數(shù)據(jù)開發(fā)經(jīng)驗
2. 熟悉數(shù)據(jù)倉庫維度建模, 并能根據(jù)客戶需求進(jìn)行數(shù)據(jù)開發(fā), 向模型更新數(shù)據(jù)
3. 使用過至少一種以上的etl工具
4. 熟練掌握java, 對hadoop相關(guān)的技術(shù)和組件(hdfs, mr, hbase, hive, spark, storm, kafka等)有全面深入了解
5. 熟練掌握shell或者python中的一種
6. 具備spark開發(fā)經(jīng)驗者優(yōu)先
7. 具備實時計算(kafka+storm/spark streaming) 經(jīng)驗者優(yōu)先
8. 具備數(shù)據(jù)分析和數(shù)據(jù)挖掘方面經(jīng)驗者優(yōu)先
第2篇 健康科技中心-高級大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職位描述:
1. 基于hadoop生態(tài)系統(tǒng)進(jìn)行大數(shù)據(jù)平臺建設(shè);
2. 負(fù)責(zé)各業(yè)務(wù)條線相關(guān)指標(biāo)數(shù)據(jù)的數(shù)據(jù)建模
3. 負(fù)責(zé)基于sqoop,hive、spark、sparksql、mysql進(jìn)行大數(shù)據(jù)開發(fā)
4. 負(fù)責(zé)離線運算、實時計算平臺項目的設(shè)計、開發(fā)及運維
5. 負(fù)責(zé)對數(shù)據(jù)平臺進(jìn)行性能調(diào)優(yōu)
任職要求:
1.統(tǒng)招本科或以上學(xué)歷,6年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗;
2.熟練掌握shell、python開發(fā)語言;
3.熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理,有相關(guān)的調(diào)優(yōu)、運維、開發(fā)經(jīng)驗;
4.熟練掌握mysql數(shù)據(jù)庫集群;
5. 精通主流etl開發(fā)工具,如:informatica、data services、kettle;精通主流調(diào)度工具,如:azkaban, oozie;
6.有數(shù)據(jù)倉庫、分析系統(tǒng)、用戶畫像等產(chǎn)品開發(fā)經(jīng)驗者優(yōu)先;
7.有較強(qiáng)的數(shù)據(jù)和業(yè)務(wù)結(jié)合能力;
8.有醫(yī)療或者大健康背景優(yōu)先;
9.有較強(qiáng)的獨立、主動的學(xué)習(xí)能力,良好的溝通表達(dá)能力。
第3篇 高級大數(shù)據(jù)研發(fā)工程師(數(shù)據(jù)可視化)職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1.負(fù)責(zé)全公司的數(shù)據(jù)平臺數(shù)據(jù)可視化研發(fā)工作
2.獨立完成數(shù)據(jù)可視化研發(fā)工作
任職要求:
1.計算機(jī)、電子通信、數(shù)學(xué)、統(tǒng)計或者相關(guān)專業(yè)本科及以上學(xué)歷
2.熟練掌握java/python中的一種語言
3.熟悉數(shù)據(jù)可視化開發(fā),熟悉echarts應(yīng)用開發(fā)的優(yōu)先
4.熟悉web開發(fā),熟悉html,js,css
5.熟悉quick bi的優(yōu)先
6.具備良好的團(tuán)隊合作精神,工作有激情
7.對數(shù)據(jù)敏感,有產(chǎn)品思維的優(yōu)先
第4篇 高級大數(shù)據(jù)產(chǎn)品研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1. 參與公司數(shù)據(jù)開發(fā)平臺、bi產(chǎn)品等大數(shù)據(jù)產(chǎn)品的設(shè)計和開發(fā);
2. 負(fù)責(zé)數(shù)據(jù)開發(fā)平臺、bi產(chǎn)品等大數(shù)據(jù)產(chǎn)品的部署和維護(hù),保證其穩(wěn)定和可靠;
3. 關(guān)注和參與大數(shù)據(jù)方向開源產(chǎn)品的技術(shù)動態(tài)與演進(jìn),推動產(chǎn)品與技術(shù)架構(gòu)持續(xù)更新;
任職要求:
1. 計算機(jī)相關(guān)專業(yè),本科及以上學(xué)歷,5年以上軟件開發(fā)經(jīng)驗,3年以上互聯(lián)網(wǎng)產(chǎn)品或分布式系統(tǒng)開發(fā)設(shè)計經(jīng)驗;
2. 精通java, python, scala等一種或幾種編程語言, 并熟悉linu_操作系統(tǒng)及bash shell編程;
3. 有hadoop/spark/hive/presto/hbase/elasticsearch/kafka等使用經(jīng)驗, 并熟悉上述常用的分布式系統(tǒng)架構(gòu)設(shè)計和原理;
4. 熟悉微服務(wù)框架及相關(guān)技術(shù), 如dubbo, springcloud等;
5. 熟悉mysql、redis, 并了解或接觸過其他數(shù)據(jù)庫如 oracle, sqlserver, postgresql, mongodb等;
6. 了解容器技術(shù), 如docker, kubernetes;
7. 具有一定的軟件設(shè)計能力, 熱愛大數(shù)據(jù)和技術(shù),相信技術(shù)改變世界,學(xué)習(xí)能力強(qiáng),認(rèn)同數(shù)據(jù)價值,有面向業(yè)務(wù)的思維, 較強(qiáng)的自主學(xué)習(xí)能力和英文技術(shù)文檔閱讀能力;
8. 良好的溝通能力、團(tuán)隊精神及服務(wù)意識,勇于接受挑戰(zhàn),能承受較大的工作壓力;
9. 有生產(chǎn)環(huán)境快速trouble-shooting的經(jīng)驗和能力者優(yōu)先;
10. 有olap,多維度數(shù)據(jù)分析經(jīng)驗優(yōu)先,有對數(shù)據(jù)倉庫有較強(qiáng)的理論基礎(chǔ)和理解者優(yōu)先;
第5篇 高級大數(shù)據(jù)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1、參與大數(shù)據(jù)開放平臺基礎(chǔ)能力建設(shè),承擔(dān)系統(tǒng)架構(gòu)、組件開發(fā)、方案驗證等工作;
2、參與構(gòu)建大數(shù)據(jù)系列產(chǎn)品,包括但不限于用戶畫像、用戶增長與用戶經(jīng)營、數(shù)據(jù)分析挖掘、實時計算、數(shù)據(jù)分發(fā)、機(jī)器學(xué)習(xí)平臺、風(fēng)控反欺詐等產(chǎn)品線;
任職要求:
1、 統(tǒng)招本科或以上學(xué)歷,5年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗;
2、扎實的java基礎(chǔ),能熟練使用java進(jìn)行軟件功能開發(fā);
3、熟練掌握基于hadoop生態(tài)的大數(shù)據(jù)開發(fā)工具,包括hive、spark、hbase、sqoop、es、impala、flink、storm等,有實時系統(tǒng)開發(fā)經(jīng)驗優(yōu)先;
4、熟悉常用的數(shù)據(jù)挖掘算法,例如聚類、回歸、決策樹等,有過nlp項目經(jīng)驗優(yōu)先;
5、有過互聯(lián)網(wǎng)公司數(shù)據(jù)倉庫、分析系統(tǒng)、用戶畫像、廣告平臺等產(chǎn)品開發(fā)經(jīng)驗者優(yōu)先;
6、工作積極主動,善于合作,敏而好學(xué);