- 目錄
-
第1篇 大數(shù)據(jù)開發(fā)工程師崗位職責職位要求
職責描述：
崗位職責：
1、運用大數(shù)據(jù)分析工具和技術(shù)解決風(fēng)險管理業(yè)務(wù)中遇到的實際問題與需求，如風(fēng)險評估、成長評價等，包括對模型進行設(shè)計、開發(fā)、驗證、測試、部署及監(jiān)控、優(yōu)化。。
2、基于海量用戶數(shù)據(jù)和特征，進行數(shù)據(jù)質(zhì)量檢查、特征加工、數(shù)據(jù)清洗等，建立數(shù)據(jù)挖掘模型。
3、評估數(shù)據(jù)源的質(zhì)量和價值，能結(jié)合業(yè)務(wù)需求和場景，從各種數(shù)據(jù)維度中挖掘數(shù)據(jù)價值，并設(shè)計不同的模型，應(yīng)用于不同的業(yè)務(wù)場景中。
職位要求：
1. 計算機、統(tǒng)計學(xué)相關(guān)背景，熟悉常用各類機器學(xué)習(xí)算法的原理（如邏輯回歸、決策樹、svm、神經(jīng)網(wǎng)絡(luò)、隨機森林、深度學(xué)習(xí)等）；
2.熟練使用sas、r、python等至少一種分析工具；
3.熟悉大數(shù)據(jù)分析平臺和工具，如hive，hadoop， spark等優(yōu)先；
4.有較強的邏輯思維能力、優(yōu)秀的溝通表達能力及團隊合作能力。
崗位要求：
學(xué)歷要求：本科
語言要求：不限
年齡要求：不限
工作年限：5-7年經(jīng)驗
第2篇 大數(shù)據(jù)開發(fā)工程師（數(shù)倉方向）職位描述與崗位職責任職要求
職位描述：
崗位職責：
1. 理解業(yè)務(wù)需求，負責數(shù)據(jù)倉庫建設(shè)、etl流程的開發(fā)和優(yōu)化工作；
2. 解決業(yè)務(wù)數(shù)據(jù)分析、數(shù)據(jù)報表、數(shù)據(jù)異常相關(guān)的技術(shù)問題；
3. spark/yarn/hdfs 的性能改進、功能擴展、故障分析；
任職資格：
1. 計算機相關(guān)專業(yè)本科及以上學(xué)歷；
2. 精通java編程語言，并熟悉scala、python、shell等一門以上腳本語言；
3. 熟悉hadoop大數(shù)據(jù)平臺架構(gòu)，熟悉spark/spark sql/yarn開發(fā)調(diào)優(yōu)技術(shù)，具有相關(guān)項目經(jīng)驗
4. 掌握數(shù)據(jù)倉庫(dw)/olap/商業(yè)智能(bi)/數(shù)據(jù)統(tǒng)計理論，熟悉oracle/mysql數(shù)據(jù)庫；
5. 思路清晰，具備良好的溝通能力和理解能力，較強的學(xué)習(xí)能力以及快速解決問題的能力；
6. 具有高度的責任感，工作認真、踏實。
福利待遇：
1、薪酬：有競爭力的薪酬體系，我們不止跟你談理想，錢也必須談一談~
2、交通：無論天涯，免費班車直達公司，驀然回首，地鐵就在公司不遠處。。。
3、工作時間：5天7小時工作制，充足的休息讓你一整天元氣滿滿！
4、各種福利：五險一金小case，節(jié)日禮物福利補貼說不完！
5、團建活動：下午茶，團隊活動，部門聚餐，經(jīng)費充足不差錢，大公司就是這么壕！
6、發(fā)展平臺：想要升職加薪走向人生巔峰？上市公司晉升發(fā)展機會多多~
第3篇 大數(shù)據(jù)開發(fā)工程師 [數(shù)倉方向]職位描述與崗位職責任職要求
職位描述：
工作職責：
1、使用etl工具（如sqoop、kettle）進行數(shù)據(jù)加工、清洗等流程；
2、根據(jù)業(yè)務(wù)需求，進行數(shù)倉日常數(shù)據(jù)分析、數(shù)據(jù)報表開發(fā)；
3、使用hive進行數(shù)據(jù)處理，及數(shù)據(jù)模型構(gòu)建；
4、具備良好的分析問題和解決問題的能力；
5、具備較強的溝通能力和邏輯表達能力，具備良好的團隊合作精神和主動溝通意識；
任職要求：
1、計算機相關(guān)專業(yè)本科及以上學(xué)歷；
2、熟練使用sql（mysql / oracle）；
3、熟練數(shù)據(jù)庫/數(shù)據(jù)倉庫分層設(shè)計、寬表設(shè)計、星型模型設(shè)計等；
4、熟練etl工具、sqoop、kettle、spark等；
5、熟悉hadoop、hive、hdfs等常用大數(shù)據(jù)組件；
6、有互聯(lián)網(wǎng)業(yè)務(wù)分布式數(shù)據(jù)倉庫、cube、大數(shù)據(jù)數(shù)據(jù)分析等相關(guān)經(jīng)驗者加分；
第4篇 大數(shù)據(jù)開發(fā)架構(gòu)師職位描述與崗位職責任職要求
職位描述：
大數(shù)據(jù)架構(gòu)師
崗位描述：
1. 負責公司大數(shù)據(jù)基礎(chǔ)框架的整體架構(gòu)設(shè)計，結(jié)合公司實際業(yè)務(wù)情況進行技術(shù)選型；
2. 負責數(shù)據(jù)存儲、計算平臺的整體評估、設(shè)計以及核心功能模塊的開發(fā)；
3. 協(xié)助團隊解決開發(fā)過程中的技術(shù)難題，負責新技術(shù)的調(diào)研，并能在團隊內(nèi)推廣應(yīng)用；
崗位要求：
1. 計算機相關(guān)專業(yè)本科以上學(xué)歷，5年以上工作經(jīng)驗，3年以上大數(shù)據(jù)相關(guān)經(jīng)驗；
2. 熟悉常用的數(shù)據(jù)結(jié)構(gòu)、算法以及數(shù)據(jù)建模理論；
3. 有過支撐每日億級別數(shù)據(jù)的大數(shù)據(jù)平臺建設(shè)經(jīng)驗，了解數(shù)據(jù)倉庫實施方法論、了解數(shù)據(jù)倉庫體系，并支撐過實際業(yè)務(wù)場景；
4. 具備較強的編碼能力，掌握 java/scala/python 開發(fā)語言之一，熟練使用 sql 進行數(shù)據(jù)訪問；
5. 精通 hadoop 生態(tài)系統(tǒng)基礎(chǔ)設(shè)施，包括flume、kafka、hbase、hive、spark、storm等；
6. 有團隊管理經(jīng)驗者優(yōu)先；
第5篇 健康科技中心-高級大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責任職要求
職位描述：
職位描述：
1. 基于hadoop生態(tài)系統(tǒng)進行大數(shù)據(jù)平臺建設(shè)；
2. 負責各業(yè)務(wù)條線相關(guān)指標數(shù)據(jù)的數(shù)據(jù)建模
3. 負責基于sqoop，hive、spark、sparksql、mysql進行大數(shù)據(jù)開發(fā)
4. 負責離線運算、實時計算平臺項目的設(shè)計、開發(fā)及運維
5. 負責對數(shù)據(jù)平臺進行性能調(diào)優(yōu)
任職要求：
1.統(tǒng)招本科或以上學(xué)歷，6年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗；
2.熟練掌握shell、python開發(fā)語言；
3.熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理，有相關(guān)的調(diào)優(yōu)、運維、開發(fā)經(jīng)驗；
4.熟練掌握mysql數(shù)據(jù)庫集群；
5. 精通主流etl開發(fā)工具，如：informatica、data services、kettle;精通主流調(diào)度工具，如：azkaban， oozie；
6.有數(shù)據(jù)倉庫、分析系統(tǒng)、用戶畫像等產(chǎn)品開發(fā)經(jīng)驗者優(yōu)先；
7.有較強的數(shù)據(jù)和業(yè)務(wù)結(jié)合能力；
8.有醫(yī)療或者大健康背景優(yōu)先；
9.有較強的獨立、主動的學(xué)習(xí)能力，良好的溝通表達能力。
第6篇 高級大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責任職要求
職位描述：
崗位職責：
1. 基于公司大數(shù)據(jù)產(chǎn)品進行數(shù)據(jù)開發(fā)，包括數(shù)據(jù)的采集，清洗，預(yù)處理，存儲，建模，分析挖掘等
2. 根據(jù)業(yè)務(wù)用戶需要分析數(shù)據(jù)，提供數(shù)據(jù)支持
3. 參與公司大數(shù)據(jù)產(chǎn)品的運維和監(jiān)控，保障數(shù)據(jù)質(zhì)量和服務(wù)穩(wěn)定性
任職要求：
1. 具備本科以上學(xué)歷， 計算機， 軟件以及相關(guān)專業(yè)， 5年以上大數(shù)據(jù)開發(fā)經(jīng)驗
2. 熟悉數(shù)據(jù)倉庫維度建模， 并能根據(jù)客戶需求進行數(shù)據(jù)開發(fā)， 向模型更新數(shù)據(jù)
3. 使用過至少一種以上的etl工具
4. 熟練掌握java， 對hadoop相關(guān)的技術(shù)和組件(hdfs， mr， hbase， hive， spark， storm， kafka等）有全面深入了解
5. 熟練掌握shell或者python中的一種
6. 具備spark開發(fā)經(jīng)驗者優(yōu)先
7. 具備實時計算(kafka+storm/spark streaming) 經(jīng)驗者優(yōu)先
8. 具備數(shù)據(jù)分析和數(shù)據(jù)挖掘方面經(jīng)驗者優(yōu)先
第7篇 大數(shù)據(jù)開發(fā)（實時計算）職位描述與崗位職責任職要求
職位描述：
崗位職責：
1、參與計算框架和服務(wù)的定制和改進，為公司批處理和流式計算能力提供支撐
2、基于業(yè)務(wù)需求和應(yīng)用場景，設(shè)計和實現(xiàn)公司大數(shù)據(jù)相關(guān)產(chǎn)品
3、負責設(shè)計，開發(fā)，優(yōu)化數(shù)據(jù)接入、數(shù)據(jù)存儲、數(shù)據(jù)計算服務(wù)框架
4、為公司所有業(yè)務(wù)線提供數(shù)據(jù)支持和服務(wù)
5、主要是為實時數(shù)倉計算提供數(shù)據(jù)支持和服務(wù)
任職要求：
1、本科以上學(xué)歷，3年以上大數(shù)據(jù)開發(fā)經(jīng)驗，掌握數(shù)據(jù)倉庫理論、模型設(shè)計方法等
2、對大數(shù)據(jù)實時數(shù)倉建設(shè)有成熟的解決方案和實踐經(jīng)驗
3、熟悉spark，flink、storm等大型分布式平臺組件
4、精通sql ，sparksql優(yōu)先，熟悉java，scala、python編程
5、有較強的性能優(yōu)化及問題排查、解決能力
6、具備良好的溝通能力，做事認真、仔細，有責任心，具有團隊協(xié)作能力
7、對kafka消息隊列中間件有過深度使用經(jīng)驗、對于druid、kudu、presto有過項目經(jīng)驗
8、對于數(shù)據(jù)采集、數(shù)據(jù)訂閱有成熟的解決方案或是項目經(jīng)驗
第8篇 大數(shù)據(jù)開發(fā)高級工程師-etl方向職位描述與崗位職責任職要求
職位描述：
工作職責:
1、 根據(jù)公司數(shù)據(jù)分析需求進行基于hadoop 平臺的項目開發(fā)；
2、 根據(jù)需求進行數(shù)據(jù)倉庫模型設(shè)計，熟練使用kettle工具進行etl程序的開發(fā)；包括實時數(shù)據(jù)加工，計算，etl，管理， 監(jiān)控等；
3、 負責針對源系統(tǒng)進行數(shù)據(jù)抽取、處理、分析等相關(guān)工作，及項目中涉及到的數(shù)據(jù)庫創(chuàng)建、維護及提供數(shù)據(jù)接口工作；
4、 負責設(shè)計并優(yōu)化基于hive 的數(shù)據(jù)倉庫的建設(shè)；
5、 制定數(shù)據(jù)庫備份和恢復(fù)策略及工作流程與規(guī)范。
6、能出具消費品品牌制造行業(yè)應(yīng)用的數(shù)據(jù)分析技術(shù)解決方案，并落地。
任職資格:
1．從事數(shù)據(jù)倉庫領(lǐng)域至少2年以上，熟悉數(shù)據(jù)倉庫模型設(shè)計與etl開發(fā)經(jīng)驗 ，具備海量數(shù)據(jù)加工處理相關(guān)經(jīng)驗；
2. 熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先，包括但不局限于：元數(shù)據(jù)管理、數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理；
3．有從事分布式數(shù)據(jù)存儲與計算平臺應(yīng)用開發(fā)經(jīng)驗，熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實踐經(jīng)驗著優(yōu)先，重點考察hive、hdfs、hbase;
4. 熟練掌握kettlesqoop、data_、airflow等;
5. 有消費品品牌制造、零售行業(yè)經(jīng)驗，尤其快消品行業(yè)和財務(wù)領(lǐng)域數(shù)據(jù)項目經(jīng)驗者優(yōu)先;
6. 熟悉分布式計算presto/imapa優(yōu)先;
7．有實時計算方面的經(jīng)驗的優(yōu)先。
第9篇 大數(shù)據(jù)開發(fā)經(jīng)理職位描述與崗位職責任職要求
職位描述：
崗位職責：
1、參與大數(shù)據(jù)平臺、工具平臺的架構(gòu)、設(shè)計以及實現(xiàn)；
2、參與對項目的開發(fā)需求進行評審，制定項目的設(shè)計文檔、開發(fā)計劃文檔等；
3、負責公司各類數(shù)據(jù)產(chǎn)品數(shù)據(jù)抽取、清洗，以及數(shù)據(jù)算法與存儲的設(shè)計和優(yōu)化；
4、優(yōu)化大數(shù)據(jù)平臺的性能，提高穩(wěn)定性；
5、負責大數(shù)據(jù)平臺的組件升級與參數(shù)優(yōu)化。
崗位要求：
1、本科及以上學(xué)歷，3年以上相關(guān)技術(shù)背景，具備扎實的數(shù)據(jù)結(jié)構(gòu)和算法基礎(chǔ)，扎實的工程實現(xiàn)能力；
2、熟悉hadoop大數(shù)據(jù)相關(guān)技術(shù)體系，包括但不限于hbase、hdfs、storm、kafka、spark、hive、flume等；
3、精通java或python，能熟練編寫規(guī)范代碼，有較強的數(shù)據(jù)庫及sql開發(fā)調(diào)優(yōu)能力；
4、熟悉自然語言處理/機器學(xué)習(xí)/數(shù)據(jù)挖掘領(lǐng)域，熟悉常用的機器學(xué)習(xí)算法優(yōu)先考慮；
5、有大規(guī)模數(shù)據(jù)收集，日志處理經(jīng)驗，有電商數(shù)據(jù)分析背景優(yōu)先考慮；
6、深入研究過大數(shù)據(jù)框架的運行機制、實現(xiàn)原理、源碼者優(yōu)先考慮。
第10篇 大數(shù)據(jù)開發(fā)主管職位描述與崗位職責任職要求
職位描述：
崗位職責：
負責大數(shù)據(jù)平臺項目架構(gòu)設(shè)計；
負責與客戶進行具體業(yè)務(wù)需求溝通，引導(dǎo)客戶需求并確認；
負責需求分析以及平臺設(shè)計、數(shù)據(jù)模型設(shè)計工作，并輸出相關(guān)文檔，與第三方進行溝通，并確認項目關(guān)鍵節(jié)點進度。
任職要求：
國家正規(guī)院校統(tǒng)招本科以上學(xué)歷，有5年以上工作經(jīng)驗，至少1年以上大數(shù)據(jù)架構(gòu)師工作經(jīng)驗、熟悉大數(shù)據(jù)平臺項目的操作流程；
熟練掌握python、hadoop、spark、kafka等工具；
較好的溝通理解能力和主動性。
第11篇 java大數(shù)據(jù)開發(fā)高級工程師崗位職責職位要求
職責描述：
崗位要求:
1、計算機或相關(guān)專業(yè)本科以上學(xué)歷，3年以上專業(yè)java開發(fā)經(jīng)驗，有過大型項目經(jīng)驗優(yōu)先；
2、精通 jdbc、jsp / ibatis /spring/ struts2等java主流技術(shù)；
3、熟悉web容器及主流開源框架，熟悉http的基本工作原理；
4、熟悉io、多線程、集合類等基礎(chǔ)框架，熟悉緩存、消息、搜索等機制；
5、熟悉linu_操作系統(tǒng)，熟悉mysql數(shù)據(jù)庫；，精通sql語言；
6、有大型項目架構(gòu)設(shè)計開發(fā)和數(shù)據(jù)庫優(yōu)化經(jīng)驗優(yōu)先；
7、具有良好的團隊協(xié)作精神，較強的溝通能力，具備良好的問題定位分析能力和新興技術(shù)學(xué)習(xí)能力。
崗位職責：
1.負責研發(fā)公司自主呼叫中心產(chǎn)品；
2.協(xié)助實施部門定位跟蹤產(chǎn)品問題；
3.客戶化項目定制開發(fā)
崗位要求：
學(xué)歷要求：大專
語言要求：不限
年齡要求：不限
工作年限：3-5年
第12篇 中級大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責任職要求
職位描述：
職責描述：
1、參與公司商業(yè)智能平臺的研發(fā)工作；
2、參與公司商業(yè)智能平臺的升級改造工作，包括運維工作。
任職要求：
1、正規(guī)院校本科及以上學(xué)歷，軟件、計算機、通信、信息安全、網(wǎng)絡(luò)工程等相關(guān)專業(yè)；
2、良好的java開發(fā)背景，熟悉spring/mybatis技術(shù)體系；
3、良好的sql功底，熟悉mysql或oracle數(shù)據(jù)庫；
4、熟悉linu_；
5、了解開源pentaho產(chǎn)品，包括prd、mondrian、saiku、kettle等；
6、熟悉hadoop、hive、hbase、storm、spark等大數(shù)據(jù)平臺；
7、溝通能力強，有較強的學(xué)習(xí)能力，有較強的責任心與良好的團隊協(xié)作能力。
第13篇 大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責任職要求
職位描述：
工作職責:
1、根據(jù)業(yè)務(wù)需求進行數(shù)據(jù)模型的調(diào)研、設(shè)計、開發(fā)及驗證工作，并持續(xù)進行模型的優(yōu)化；
2、負責數(shù)據(jù)模型架構(gòu)的構(gòu)建，建立數(shù)據(jù)抽取、清洗、校驗等數(shù)據(jù)加工流程規(guī)范及olap多維數(shù)據(jù)分析模型；
3、持續(xù)對系統(tǒng)的技術(shù)架構(gòu)進行改進和優(yōu)化，提升海量數(shù)據(jù)的查詢性能和用戶體驗。
任職資格:
1、統(tǒng)招本科或以上學(xué)歷，計算機、數(shù)據(jù)挖掘等相關(guān)專業(yè)，工作至少3年以上；
2、熟悉java開發(fā)，有腳本語言（shell，python)開發(fā)經(jīng)驗者優(yōu)先；
3、至少熟悉一種大數(shù)據(jù)處理技術(shù)，如hadoop、spark；
4、掌握hbase、redis、elastic search等開源大數(shù)據(jù)存儲技術(shù)，并能結(jié)合不同的業(yè)務(wù)場景深入使用；
5、精通sql，精通mysql、oracle、sql server等一種大型數(shù)據(jù)庫，以及數(shù)據(jù)庫的維護和優(yōu)化。
6、熟悉常用java web開發(fā)框架，如：spring、mybatis等；
7、熟悉多線程編程，并對java自帶線程池有一定研究；
8、對解決具有挑戰(zhàn)性的問題充滿激情，具有良好的分析問題和解決問題的能力。
第14篇 java大數(shù)據(jù)開發(fā)職位描述與崗位職責任職要求
職位描述：
職責描述：
1. 參與大數(shù)據(jù)平臺和大數(shù)據(jù)處理框架的架構(gòu)規(guī)劃設(shè)計；
2. 參與數(shù)據(jù)治理工作，提升數(shù)據(jù)易用性及數(shù)據(jù)質(zhì)量；
3. 理解并合理抽象業(yè)務(wù)需求，發(fā)揮數(shù)據(jù)價值，主動思考不斷優(yōu)化，與業(yè)務(wù)團隊緊密合作；
4. 配合大數(shù)據(jù)負責人完成hadoop、spark等集群的管理、優(yōu)化和維護，保證集群規(guī)模持續(xù)、穩(wěn)定。
任職要求：
1. 兩年以上相關(guān)工作經(jīng)驗；
2. 熟練掌握java語言，熟練使用linu_，強悍的編碼和處理問題能力；
3. 熟悉大數(shù)據(jù)開源棧spark/hadoop、hive、hbase、elasticsearch、kafka、redis， strom/spark-streaming/flink，有至少tb以上級大數(shù)據(jù)處理經(jīng)驗. 有sparkstreaming的實時統(tǒng)計開發(fā)經(jīng)驗優(yōu)先；
4. 對數(shù)據(jù)敏感，認真細致，善于從數(shù)據(jù)中發(fā)現(xiàn)疑點；
5. 善于溝通，具備優(yōu)秀的技術(shù)與業(yè)務(wù)結(jié)合能力；
6. 學(xué)習(xí)能力強，喜歡研究開源新技術(shù)，有團隊觀念，具備獨立解決問題的能力
第15篇 大數(shù)據(jù)開發(fā)（數(shù)據(jù)倉庫）職位描述與崗位職責任職要求
職位描述：
崗位職責：
1、參與計算框架和服務(wù)的定制和改進，為公司批處理和流式計算能力提供支撐
2、基于業(yè)務(wù)需求和應(yīng)用場景，設(shè)計和實現(xiàn)公司大數(shù)據(jù)相關(guān)產(chǎn)品
3、負責設(shè)計，開發(fā)，優(yōu)化數(shù)據(jù)接入、數(shù)據(jù)存儲、數(shù)據(jù)計算服務(wù)框架
4、為公司所有業(yè)務(wù)線提供數(shù)據(jù)支持和服務(wù)
任職要求：
1、本科以上學(xué)歷，3年以上大數(shù)據(jù)開發(fā)經(jīng)驗，掌握數(shù)據(jù)倉庫理論、模型設(shè)計方法、etl設(shè)計理論等
2、對大數(shù)據(jù)離線數(shù)倉有成熟的解決方案和實踐經(jīng)驗
3、深入理解公司業(yè)務(wù)，建立指標分析體系，利用數(shù)據(jù)分析，不斷驅(qū)動業(yè)務(wù)優(yōu)化，策略分析經(jīng)驗豐富優(yōu)先
4、了解sql， hive sql，sparksql優(yōu)先，熟悉python編程，java基礎(chǔ)編程
5、有較強的性能優(yōu)化及問題排查、解決能力
6、具備良好的溝通能力，做事認真、仔細，有責任心，具有團隊協(xié)作能力
