- 目錄
-
第1篇 大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、根據(jù)業(yè)務(wù)需求進(jìn)行數(shù)據(jù)模型的調(diào)研、設(shè)計(jì)、開(kāi)發(fā)及驗(yàn)證工作,并持續(xù)進(jìn)行模型的優(yōu)化;
2、負(fù)責(zé)數(shù)據(jù)模型架構(gòu)的構(gòu)建,建立數(shù)據(jù)抽取、清洗、校驗(yàn)等數(shù)據(jù)加工流程規(guī)范及olap多維數(shù)據(jù)分析模型;
3、持續(xù)對(duì)系統(tǒng)的技術(shù)架構(gòu)進(jìn)行改進(jìn)和優(yōu)化,提升海量數(shù)據(jù)的查詢性能和用戶體驗(yàn)。
任職資格:
1、統(tǒng)招本科或以上學(xué)歷,計(jì)算機(jī)、數(shù)據(jù)挖掘等相關(guān)專業(yè),工作至少3年以上;
2、熟悉java開(kāi)發(fā),有腳本語(yǔ)言(shell,python)開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先;
3、至少熟悉一種大數(shù)據(jù)處理技術(shù),如hadoop、spark;
4、掌握hbase、redis、elastic search等開(kāi)源大數(shù)據(jù)存儲(chǔ)技術(shù),并能結(jié)合不同的業(yè)務(wù)場(chǎng)景深入使用;
5、精通sql,精通mysql、oracle、sql server等一種大型數(shù)據(jù)庫(kù),以及數(shù)據(jù)庫(kù)的維護(hù)和優(yōu)化。
6、熟悉常用java web開(kāi)發(fā)框架,如:spring、mybatis等;
7、熟悉多線程編程,并對(duì)java自帶線程池有一定研究;
8、對(duì)解決具有挑戰(zhàn)性的問(wèn)題充滿激情,具有良好的分析問(wèn)題和解決問(wèn)題的能力。
第2篇 大數(shù)據(jù)開(kāi)發(fā)工程師/架構(gòu)師職位描述與崗位職責(zé)任職要求
職位描述:
1、8年以上后端開(kāi)發(fā)經(jīng)驗(yàn),有大數(shù)據(jù)處理經(jīng)驗(yàn);有實(shí)時(shí)處理工作經(jīng)歷并有一定解決方案者優(yōu)先;
2、熟悉大數(shù)據(jù)開(kāi)源技術(shù),包含(不限于)hadoop/spark/storm/hive/hbase/impala /flume/kafka/solr/es分布式框架/計(jì)算/存儲(chǔ)/檢索等相關(guān)技術(shù),并有一定的hadoop生態(tài)系統(tǒng)運(yùn)維經(jīng)驗(yàn);
3、至少掌握java/scala/python其中一門開(kāi)發(fā)語(yǔ)言;
4、掌握sql,sparksql進(jìn)行數(shù)據(jù)開(kāi)發(fā);較好的sql性能調(diào)優(yōu)經(jīng)驗(yàn);
5、優(yōu)秀的分析、解決問(wèn)題能力,充分的數(shù)據(jù)敏感度;有一定的高性能支撐經(jīng)驗(yàn)和故障排除能力;
6、具備強(qiáng)烈的工作責(zé)任感,喜歡鉆研,態(tài)度樂(lè)觀,團(tuán)隊(duì)意識(shí)強(qiáng)。
第3篇 數(shù)據(jù)開(kāi)發(fā)工程師-olap方向職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負(fù)責(zé) olap 引擎核心模塊的開(kāi)發(fā)工作,保障平臺(tái)的穩(wěn)定和可靠;
2、負(fù)責(zé)各開(kāi)源 olap 引擎的二次開(kāi)發(fā)、性能調(diào)優(yōu)和疑難問(wèn)題解決。
任職資格:
0、計(jì)算機(jī),數(shù)學(xué)等計(jì)算機(jī)相關(guān)專業(yè),本科及以上;
1、學(xué)習(xí)能力和編碼能力,對(duì)大數(shù)據(jù)技術(shù)有鉆研熱情;
2、熟悉分布式系統(tǒng),有良好的java基礎(chǔ);
3、熟悉hadoop生態(tài)圈大數(shù)據(jù)組件,參與開(kāi)源社區(qū)者優(yōu)先;
4、有使用 hadoop、hdfs、hbase、allu_io、druid、es、hive、spark、yarn、mapreduce、kafka、flink、presto 等經(jīng)驗(yàn)。
第4篇 bi數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1. 負(fù)責(zé)數(shù)據(jù)bi系統(tǒng)的整體工作,包括對(duì)接需求、架構(gòu)設(shè)計(jì)、項(xiàng)目研發(fā)、性能調(diào)優(yōu)等
2. 負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)的日常運(yùn)維工作,包括環(huán)境維護(hù)、采集數(shù)據(jù)、安全存儲(chǔ)等
任職要求:
1. 計(jì)算機(jī)相關(guān)專業(yè)大專以上學(xué)歷,3年以上大數(shù)據(jù)相關(guān)的工作經(jīng)驗(yàn)
2. 具備據(jù)庫(kù)系統(tǒng)的基本理論知識(shí),至少熟悉一種傳統(tǒng)的數(shù)據(jù)庫(kù)產(chǎn)品如mysql等,并熟練使用sql語(yǔ)句
3. 掌握hadoop、hive、mapreduce、spark等大數(shù)據(jù)相關(guān)技術(shù),熟練使用hql了解其原理并可完成調(diào)優(yōu)工作
4. 熟悉linu_操作系統(tǒng),熟練shell編程
5. 至少掌握python、java其中一種
6. 熟悉數(shù)據(jù)收集工具,如logstash、flume、kafka等
7. 熟悉主流的nosql數(shù)據(jù)庫(kù)系統(tǒng),如mongodb等
8. 有責(zé)任心,能承受一定的工作壓力,有良好的溝通能力和團(tuán)隊(duì)合作能力
9. 工作積極主動(dòng),能獨(dú)立分析和解決問(wèn)題
第5篇 高級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1. 基于公司大數(shù)據(jù)產(chǎn)品進(jìn)行數(shù)據(jù)開(kāi)發(fā),包括數(shù)據(jù)的采集,清洗,預(yù)處理,存儲(chǔ),建模,分析挖掘等
2. 根據(jù)業(yè)務(wù)用戶需要分析數(shù)據(jù),提供數(shù)據(jù)支持
3. 參與公司大數(shù)據(jù)產(chǎn)品的運(yùn)維和監(jiān)控,保障數(shù)據(jù)質(zhì)量和服務(wù)穩(wěn)定性
任職要求:
1. 具備本科以上學(xué)歷, 計(jì)算機(jī), 軟件以及相關(guān)專業(yè), 5年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)
2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)維度建模, 并能根據(jù)客戶需求進(jìn)行數(shù)據(jù)開(kāi)發(fā), 向模型更新數(shù)據(jù)
3. 使用過(guò)至少一種以上的etl工具
4. 熟練掌握java, 對(duì)hadoop相關(guān)的技術(shù)和組件(hdfs, mr, hbase, hive, spark, storm, kafka等)有全面深入了解
5. 熟練掌握shell或者python中的一種
6. 具備spark開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先
7. 具備實(shí)時(shí)計(jì)算(kafka+storm/spark streaming) 經(jīng)驗(yàn)者優(yōu)先
8. 具備數(shù)據(jù)分析和數(shù)據(jù)挖掘方面經(jīng)驗(yàn)者優(yōu)先
第6篇 大數(shù)據(jù)開(kāi)發(fā)工程師(面向2020年畢業(yè)生)職位描述與崗位職責(zé)任職要求
職位描述:
此崗位面向2020年畢業(yè)生,坐標(biāo)深圳南山科技園,實(shí)習(xí)期薪資為3.5-4.5k;要求在公司全職實(shí)習(xí)半年以上,實(shí)習(xí)滿3個(gè)月且評(píng)審?fù)ㄟ^(guò)后可簽訂三方協(xié)議,實(shí)習(xí)滿6個(gè)月且評(píng)審?fù)ㄟ^(guò)后簽訂勞動(dòng)合同,無(wú)試用期。
崗位職責(zé):
1、從事大數(shù)據(jù)分布式存儲(chǔ)/應(yīng)用服務(wù)的設(shè)計(jì)和開(kāi)發(fā),挑戰(zhàn)大規(guī)模、高并發(fā)、易運(yùn)維的分布式系統(tǒng)設(shè)計(jì)構(gòu)建;
2、參與負(fù)責(zé)大數(shù)據(jù)運(yùn)營(yíng)/風(fēng)控/分析等數(shù)據(jù)應(yīng)用產(chǎn)品開(kāi)發(fā)迭代,包括需求討論需求/系統(tǒng)/算法的討論、設(shè)計(jì)及實(shí)現(xiàn);
3、定位和解決集群組件如spark、hive、hbase、kafka的性能和高可用問(wèn)題,協(xié)助集群監(jiān)控系統(tǒng)的開(kāi)發(fā)。
任職要求:
1、2020年統(tǒng)招本科及以上學(xué)歷,計(jì)科類相關(guān)專業(yè);
2、良好的計(jì)算機(jī)基礎(chǔ);了解面向?qū)ο蠛驮O(shè)計(jì)模式,了解 spring , mybatis 等常用框架,數(shù)據(jù)庫(kù)基礎(chǔ)扎實(shí);
3、對(duì)技術(shù)有強(qiáng)烈的興趣,喜歡鉆研,具有良好的學(xué)習(xí)能力、溝通和團(tuán)隊(duì)合作能力。
加分項(xiàng):
1、熟悉python、ruby等語(yǔ)言;
2、熟練掌握常見(jiàn)linu_ shell命令;
3、喜歡在mac/linu_下進(jìn)行開(kāi)發(fā);
4、有代碼潔癖,看到代碼中的壞味道有渾身不自在的感覺(jué);
5、自我驅(qū)動(dòng)、喜歡coding。
第7篇 hive數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
1、大學(xué)???年以上工作經(jīng)驗(yàn),計(jì)算機(jī)相關(guān)專業(yè);
2、至少2年大數(shù)據(jù)類項(xiàng)目數(shù)據(jù)開(kāi)發(fā)支撐經(jīng)驗(yàn);
3、熟悉hadoop相關(guān)技術(shù),深刻理解mr原理和過(guò)程;
4、精通hive sql,掌握基本的hql優(yōu)化技能;
5、良好的服務(wù)意識(shí)和積極的溝通能力;
6、熟悉電信運(yùn)營(yíng)商業(yè)務(wù),具備運(yùn)營(yíng)商項(xiàng)目駐點(diǎn)支撐經(jīng)驗(yàn)優(yōu)先。
第8篇 大數(shù)據(jù)開(kāi)發(fā)工程師-spark職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1. 參與公司大數(shù)據(jù)產(chǎn)品規(guī)劃,大數(shù)據(jù)處理分析平臺(tái)的設(shè)計(jì);
2. 負(fù)責(zé)數(shù)據(jù)分析、加工、清理、處理程序的開(kāi)發(fā);
3. 負(fù)責(zé)數(shù)據(jù)相關(guān)平臺(tái)的搭建、維護(hù)和優(yōu)化。
4. 負(fù)責(zé)基于hadoop/spark/hive/kafka等分布式計(jì)算平臺(tái)實(shí)現(xiàn)離線分析、實(shí)時(shí)分析的計(jì)算框架的開(kāi)發(fā);
職位要求:
1. 熟悉java和scala語(yǔ)言、熟悉常用設(shè)計(jì)模式、具有代碼重構(gòu)意識(shí);
2. 熟練使用hadoop、hbase、kafka、hive、spark、presto,熟悉底層框架和實(shí)現(xiàn)原理;
3. 使用spark streaming和spark sql進(jìn)行數(shù)據(jù)處理, 并具有spark sql優(yōu)化經(jīng)驗(yàn);
4. 熟悉mysql數(shù)據(jù)庫(kù)性能優(yōu)化方法, 了解常見(jiàn)no-sql數(shù)據(jù)庫(kù);
5. 有大規(guī)模hbase集群運(yùn)維經(jīng)驗(yàn)或?qū)base存儲(chǔ)原理熟悉者優(yōu)先;
6. 有數(shù)據(jù)挖掘、數(shù)據(jù)分析、機(jī)器學(xué)習(xí)研發(fā)實(shí)踐經(jīng)驗(yàn)者優(yōu)先。
有機(jī)會(huì)接觸千億級(jí)海量數(shù)據(jù)的離線和實(shí)時(shí)的數(shù)據(jù)處理,涉及java,spark,hive,spark streaming,hbase,elasticsearch,flink等大數(shù)據(jù)的前沿技術(shù)和多云的統(tǒng)一架構(gòu)。
第9篇 大數(shù)據(jù)開(kāi)發(fā)工程師(數(shù)據(jù)分析、信息安全、前端開(kāi)發(fā)、數(shù)據(jù)對(duì)接)職位描述與崗位職責(zé)任職要求
職位描述:
數(shù)據(jù)分析工程師:
崗位職責(zé):
1、負(fù)責(zé)結(jié)構(gòu)化數(shù)據(jù)和文本的數(shù)據(jù)處理、建模、分析等工作,如:數(shù)據(jù)清洗、中文分詞、情感分析、文本分類等;
2、負(fù)責(zé)數(shù)據(jù)需求的收集、整理和分析,配合其他同事完成結(jié)構(gòu)化數(shù)據(jù)和文本的需求分析;
3、負(fù)責(zé)分析結(jié)果的可視化展現(xiàn);
4、負(fù)責(zé)核心算法的設(shè)計(jì)與優(yōu)化。
任職要求:
1、全日制本科畢業(yè);
2、計(jì)算機(jī)或數(shù)學(xué)或軟件類或統(tǒng)計(jì)相關(guān)專業(yè);
3、熟悉數(shù)據(jù)挖掘和文本挖掘的理論基礎(chǔ),掌握統(tǒng)計(jì)模型、機(jī)器學(xué)習(xí)相關(guān)原理;
4、熟悉r/python/java等編程語(yǔ)言,熟悉常用數(shù)據(jù)結(jié)構(gòu)和算法,熟悉正則表達(dá)式的使用。
web前端開(kāi)發(fā)工程師:
崗位職責(zé):
1、負(fù)責(zé)前端框架設(shè)計(jì)及組件庫(kù)開(kāi)發(fā)、前端開(kāi)發(fā)工作統(tǒng)籌;
2、與后端工程師緊密配合,高效率、高質(zhì)量地完成頁(yè)面展現(xiàn)研發(fā)工作;
3、負(fù)責(zé)對(duì)產(chǎn)品頁(yè)面性能的優(yōu)化和維護(hù);
4、負(fù)責(zé)數(shù)據(jù)可視化圖表顯示。
任職要求:
1、本科及以上學(xué)歷,專業(yè)不限。3年以上前端開(kāi)發(fā)經(jīng)驗(yàn);
2、精通html5/css3、_html/_ml,熟悉頁(yè)面架構(gòu)和布局,對(duì)表現(xiàn)與數(shù)據(jù)分離、web語(yǔ)義化等有深刻理解;
3、在多瀏覽器兼容性問(wèn)題及css/javascript性能優(yōu)化方面有一定的經(jīng)驗(yàn);
4、熟練掌握至少一種前端框架及工具、庫(kù)。如jquery、angular、webpack;
5、有echars、highcahrts、d3js等數(shù)據(jù)可視化框架開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先。
信息安全架構(gòu)工程師:
崗位職責(zé):
1、 規(guī)劃車聯(lián)網(wǎng)安全架構(gòu),不斷完善車聯(lián)網(wǎng)產(chǎn)品的安全規(guī)范和要求,跟進(jìn)、解決存在的安全隱患;
2、 對(duì)上線前的軟件或者車上產(chǎn)品進(jìn)行安全方面驗(yàn)證及測(cè)試;
3、 跟進(jìn)最新漏洞的研究工作,理解漏洞的原理,編制漏洞研究報(bào)告和防范措施;
4、 負(fù)責(zé)行業(yè)/國(guó)家車聯(lián)網(wǎng)汽車網(wǎng)絡(luò)安全部分的技術(shù)及標(biāo)準(zhǔn)規(guī)范的研究工作。
任職要求:
1、本科以上學(xué)歷,信息安全,計(jì)算機(jī),通信等相關(guān)專業(yè);
2、 擁有網(wǎng)絡(luò)安全專業(yè)技能,熟悉車載網(wǎng)絡(luò)架構(gòu),模塊及協(xié)議;
3、 熟悉常見(jiàn)網(wǎng)絡(luò)/車輛安全漏洞,掌握漏洞原理以及解決方案具備獨(dú)立開(kāi)展?jié)B透工作的能力;
4、 熟悉常見(jiàn)黑客攻擊手法,具備對(duì)黑客行為的入侵檢測(cè)能力;
5、 精通安全測(cè)試框架,理解網(wǎng)絡(luò),應(yīng)用,數(shù)據(jù)等不同層面的安全。
數(shù)據(jù)對(duì)接工程師:
崗位職責(zé):
1、負(fù)責(zé)內(nèi)部系統(tǒng)的對(duì)接工作;
2、第三方平臺(tái)的數(shù)據(jù)對(duì)接及程序維護(hù);
3、負(fù)責(zé)各車型的數(shù)據(jù)采集要求整理及規(guī)劃;
4、熟悉數(shù)據(jù)結(jié)構(gòu)和常用算法,有良好的代碼規(guī)范,能對(duì)接入數(shù)據(jù)/系統(tǒng)提出優(yōu)化方案。
任職要求:
1、 本科以上學(xué)歷,信息化項(xiàng)目,計(jì)算機(jī),無(wú)線傳輸?shù)认嚓P(guān)專業(yè);
2、擁有信息化相關(guān)技能,熟悉系統(tǒng)間的交互對(duì)接流程;
3、熟悉數(shù)據(jù)庫(kù)的管理及查詢、同步工作;
4、熟悉信息對(duì)接的方式,能用api、視圖等進(jìn)行對(duì)接工作。
第10篇 健康科技中心-高級(jí)大數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職位描述:
1. 基于hadoop生態(tài)系統(tǒng)進(jìn)行大數(shù)據(jù)平臺(tái)建設(shè);
2. 負(fù)責(zé)各業(yè)務(wù)條線相關(guān)指標(biāo)數(shù)據(jù)的數(shù)據(jù)建模
3. 負(fù)責(zé)基于sqoop,hive、spark、sparksql、mysql進(jìn)行大數(shù)據(jù)開(kāi)發(fā)
4. 負(fù)責(zé)離線運(yùn)算、實(shí)時(shí)計(jì)算平臺(tái)項(xiàng)目的設(shè)計(jì)、開(kāi)發(fā)及運(yùn)維
5. 負(fù)責(zé)對(duì)數(shù)據(jù)平臺(tái)進(jìn)行性能調(diào)優(yōu)
任職要求:
1.統(tǒng)招本科或以上學(xué)歷,6年以上大數(shù)據(jù)開(kāi)發(fā)工作經(jīng)驗(yàn);
2.熟練掌握shell、python開(kāi)發(fā)語(yǔ)言;
3.熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理,有相關(guān)的調(diào)優(yōu)、運(yùn)維、開(kāi)發(fā)經(jīng)驗(yàn);
4.熟練掌握mysql數(shù)據(jù)庫(kù)集群;
5. 精通主流etl開(kāi)發(fā)工具,如:informatica、data services、kettle;精通主流調(diào)度工具,如:azkaban, oozie;
6.有數(shù)據(jù)倉(cāng)庫(kù)、分析系統(tǒng)、用戶畫(huà)像等產(chǎn)品開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先;
7.有較強(qiáng)的數(shù)據(jù)和業(yè)務(wù)結(jié)合能力;
8.有醫(yī)療或者大健康背景優(yōu)先;
9.有較強(qiáng)的獨(dú)立、主動(dòng)的學(xué)習(xí)能力,良好的溝通表達(dá)能力。
第11篇 數(shù)據(jù)開(kāi)發(fā)工程師/python/c++(p6-p7)3職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
'負(fù)責(zé)內(nèi)部數(shù)據(jù)分析平臺(tái)建設(shè);
開(kāi)發(fā)數(shù)據(jù)分析算法,提升計(jì)算效率和準(zhǔn)確率;
對(duì)平臺(tái)進(jìn)行運(yùn)營(yíng),滿足用戶需求。'
任職要求:
'計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷,3年以上工作經(jīng)驗(yàn);
精通python, c/c++開(kāi)發(fā),熟悉的常見(jiàn)的設(shè)計(jì)模式;
精通spark,hadoop,es 等大數(shù)據(jù)平臺(tái)的原理,做過(guò)大數(shù)據(jù)分析平臺(tái)項(xiàng)目,對(duì)性能調(diào)優(yōu)有經(jīng)驗(yàn);
熟悉mysql,postgresql,mogodb,redis等數(shù)據(jù)管理系統(tǒng);
擁有良好的發(fā)現(xiàn)、分析與解決問(wèn)題的能力,責(zé)任感強(qiáng)、具有團(tuán)隊(duì)精神與服務(wù)意識(shí);
具有良好的學(xué)習(xí)能力,對(duì)互聯(lián)網(wǎng)的新技術(shù)有很強(qiáng)求知欲望。'
第12篇 后端數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1. 配合產(chǎn)品經(jīng)理,參與數(shù)據(jù)平臺(tái)發(fā)展各階段產(chǎn)品需求分析和功能設(shè)計(jì);
2. 基于確定的產(chǎn)品功能需求,參與平臺(tái)后端系統(tǒng)架構(gòu)設(shè)計(jì)、接口定義實(shí)現(xiàn)及測(cè)試、構(gòu)建部署和運(yùn)維等各階段工作;
3. 根據(jù)產(chǎn)品或技術(shù)實(shí)現(xiàn)發(fā)展需要,按需進(jìn)行一些新技術(shù)的研究,并評(píng)估將其引入現(xiàn)有平臺(tái)實(shí)現(xiàn)的可行性。
任職要求:
1. 本科及以上學(xué)歷,至少3年及以上的實(shí)際開(kāi)發(fā)經(jīng)驗(yàn);
2. 熟練掌握c/c++/python/java/go/javascript其中至少2種及以上程序設(shè)計(jì)語(yǔ)言,并且自認(rèn)為具有良好的編程素養(yǎng);
3. 熟練掌握常用的數(shù)據(jù)結(jié)構(gòu)及算法;
4. 熟悉linu_系統(tǒng)開(kāi)發(fā),熟悉網(wǎng)絡(luò)編程、文件系統(tǒng),有分布式系統(tǒng)開(kāi)發(fā)經(jīng)驗(yàn);
5. 應(yīng)具有熟練的技術(shù)領(lǐng)域相關(guān)的英文文獻(xiàn)閱讀能力;
6. 有良好的溝通能力和團(tuán)隊(duì)合作能力,能夠自主驅(qū)動(dòng),具備良好的問(wèn)題定位分析能力。
優(yōu)先考慮:
1. 熟悉containerization和virtual machine平臺(tái)和相關(guān)技術(shù),熟悉docker、kubernetes和kvm等,并具有相關(guān)的實(shí)際運(yùn)用經(jīng)驗(yàn);
2. 熟悉當(dāng)前主流的云計(jì)算平臺(tái),如應(yīng)熟悉aws、azure和阿里云其中至少一種平臺(tái)的iaas,并具有相關(guān)的項(xiàng)目經(jīng)驗(yàn);
3. 有開(kāi)源項(xiàng)目實(shí)際參與經(jīng)驗(yàn)。
第13篇 大數(shù)據(jù)開(kāi)發(fā)工程師崗位職責(zé)職位要求
職責(zé)描述:
崗位職責(zé):
1、運(yùn)用大數(shù)據(jù)分析工具和技術(shù)解決風(fēng)險(xiǎn)管理業(yè)務(wù)中遇到的實(shí)際問(wèn)題與需求,如風(fēng)險(xiǎn)評(píng)估、成長(zhǎng)評(píng)價(jià)等,包括對(duì)模型進(jìn)行設(shè)計(jì)、開(kāi)發(fā)、驗(yàn)證、測(cè)試、部署及監(jiān)控、優(yōu)化。。
2、基于海量用戶數(shù)據(jù)和特征,進(jìn)行數(shù)據(jù)質(zhì)量檢查、特征加工、數(shù)據(jù)清洗等,建立數(shù)據(jù)挖掘模型。
3、評(píng)估數(shù)據(jù)源的質(zhì)量和價(jià)值,能結(jié)合業(yè)務(wù)需求和場(chǎng)景,從各種數(shù)據(jù)維度中挖掘數(shù)據(jù)價(jià)值,并設(shè)計(jì)不同的模型,應(yīng)用于不同的業(yè)務(wù)場(chǎng)景中。
職位要求:
1. 計(jì)算機(jī)、統(tǒng)計(jì)學(xué)相關(guān)背景,熟悉常用各類機(jī)器學(xué)習(xí)算法的原理(如邏輯回歸、決策樹(shù)、svm、神經(jīng)網(wǎng)絡(luò)、隨機(jī)森林、深度學(xué)習(xí)等);
2.熟練使用sas、r、python等至少一種分析工具;
3.熟悉大數(shù)據(jù)分析平臺(tái)和工具,如hive,hadoop, spark等優(yōu)先;
4.有較強(qiáng)的邏輯思維能力、優(yōu)秀的溝通表達(dá)能力及團(tuán)隊(duì)合作能力。
崗位要求:
學(xué)歷要求:本科
語(yǔ)言要求:不限
年齡要求:不限
工作年限:5-7年經(jīng)驗(yàn)
第14篇 oracle 數(shù)據(jù)開(kāi)發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1. 數(shù)據(jù)倉(cāng)庫(kù)和業(yè)務(wù)數(shù)據(jù)集市建設(shè)
2. 業(yè)務(wù)模型抽象、數(shù)據(jù)模型設(shè)計(jì)開(kāi)發(fā)
3. 支持業(yè)務(wù)的數(shù)據(jù)需求,跟pm一起完善業(yè)務(wù)的數(shù)據(jù)分析體系和工具
4. etl、數(shù)據(jù)應(yīng)用和服務(wù)的設(shè)計(jì)開(kāi)發(fā)
5. 積累數(shù)據(jù)生產(chǎn)、分析工具,不斷提高數(shù)據(jù)生產(chǎn)效率
6. 實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)、開(kāi)發(fā)與服務(wù)
崗位要求:
1. 快速的業(yè)務(wù)學(xué)習(xí)和理解能力,有良好的自驅(qū)能力,對(duì)工作充滿熱情
2. 熟悉數(shù)據(jù)倉(cāng)庫(kù)各類模型建模理論,了解數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)分層架構(gòu),熟悉多維數(shù)據(jù)模型設(shè)計(jì)
3. 具備大型數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)設(shè)計(jì)、模型設(shè)計(jì)、etl設(shè)計(jì)的相關(guān)經(jīng)驗(yàn)
4. 精通oracle數(shù)據(jù)庫(kù)技術(shù),深刻理解數(shù)據(jù)庫(kù)/oracle特性,有過(guò)硬的sql能力,能編寫(xiě)高性能的數(shù)據(jù)處理程序。
5. 具備hadoop、hive、hbase,spark等大數(shù)據(jù)技術(shù)背景,并具有開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先
6. 具備海量數(shù)據(jù)處理經(jīng)驗(yàn)者優(yōu)先
第15篇 大數(shù)據(jù)開(kāi)發(fā)工程師 [數(shù)倉(cāng)方向]職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、使用etl工具(如sqoop、kettle)進(jìn)行數(shù)據(jù)加工、清洗等流程;
2、根據(jù)業(yè)務(wù)需求,進(jìn)行數(shù)倉(cāng)日常數(shù)據(jù)分析、數(shù)據(jù)報(bào)表開(kāi)發(fā);
3、使用hive進(jìn)行數(shù)據(jù)處理,及數(shù)據(jù)模型構(gòu)建;
4、具備良好的分析問(wèn)題和解決問(wèn)題的能力;
5、具備較強(qiáng)的溝通能力和邏輯表達(dá)能力,具備良好的團(tuán)隊(duì)合作精神和主動(dòng)溝通意識(shí);
任職要求:
1、計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;
2、熟練使用sql(mysql / oracle);
3、熟練數(shù)據(jù)庫(kù)/數(shù)據(jù)倉(cāng)庫(kù)分層設(shè)計(jì)、寬表設(shè)計(jì)、星型模型設(shè)計(jì)等;
4、熟練etl工具、sqoop、kettle、spark等;
5、熟悉hadoop、hive、hdfs等常用大數(shù)據(jù)組件;
6、有互聯(lián)網(wǎng)業(yè)務(wù)分布式數(shù)據(jù)倉(cāng)庫(kù)、cube、大數(shù)據(jù)數(shù)據(jù)分析等相關(guān)經(jīng)驗(yàn)者加分;