- 目錄
第1篇 高級etl開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負(fù)責(zé)數(shù)據(jù)平臺的etl設(shè)計(jì)開發(fā)、工作流調(diào)度設(shè)計(jì)、存儲過程開發(fā)、自定義函數(shù)開發(fā)。
2、負(fù)責(zé)各業(yè)務(wù)系統(tǒng)數(shù)據(jù)源業(yè)務(wù)調(diào)研、數(shù)據(jù)調(diào)研、準(zhǔn)確性完整性驗(yàn)證。
3、負(fù)責(zé)項(xiàng)目中與第三方系統(tǒng)基于數(shù)據(jù)庫的數(shù)據(jù)對接、數(shù)據(jù)預(yù)處理、數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)導(dǎo)入、數(shù)據(jù)校驗(yàn)相關(guān)開發(fā)工作。
4、負(fù)責(zé)數(shù)據(jù)平臺的etl相關(guān)軟件和工具的研發(fā)和改進(jìn)。
5、負(fù)責(zé)數(shù)據(jù)平臺日常管理、跑批、維護(hù)、監(jiān)控、處理臨時(shí)數(shù)據(jù)需求。
任職資格:
1、本科計(jì)算機(jī)相關(guān)專業(yè),5年工作經(jīng)驗(yàn)
2、具備3年或以上etl數(shù)據(jù)處理相關(guān)開發(fā)經(jīng)驗(yàn)
3、擁有3年以上sql開發(fā)
4、掌握hadoop?hive-hql?基礎(chǔ)技能
第2篇 高級etl開發(fā)經(jīng)理職位描述與崗位職責(zé)任職要求
職位描述:
崗位職能:
1. 基于公司數(shù)據(jù)建設(shè)需要,完成數(shù)據(jù)平臺構(gòu)建、數(shù)據(jù)內(nèi)容開發(fā)等工作。包括:數(shù)據(jù)平臺基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開發(fā)工作;
2. 充分理解需求文檔,基于此進(jìn)行自測,交付高質(zhì)量的開發(fā)代碼和數(shù)據(jù)內(nèi)容;
3. 工作中對數(shù)據(jù)平臺基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動深度思考,提升效能并積極建言、促進(jìn)組織和系統(tǒng)發(fā)展;
4. 團(tuán)隊(duì)日常管理,及其他根據(jù)部門需要安排事宜。
崗位要求:
1. 信息技術(shù)類、數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)量經(jīng)濟(jì)學(xué)類專業(yè),本科,工作年限5年以上;
2. 熟悉數(shù)據(jù)倉庫模型設(shè)計(jì)和精通etl開發(fā)經(jīng)驗(yàn) ,掌握3nf,kimball的維度建模設(shè)計(jì)方法,具備海量數(shù)據(jù)加工處理(etl)相關(guān)經(jīng)驗(yàn) ;
3. 掌握至少一種數(shù)據(jù)庫開發(fā)技術(shù):oracle、teradata、db2、mysql等,精通并靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理 ;
4. 熟悉linu_系統(tǒng)常規(guī)shell處理命令,靈活運(yùn)用shell做的文本處理和系統(tǒng)操作 ;
5. 有從事分布式數(shù)據(jù)存儲與計(jì)算平臺應(yīng)用開發(fā)經(jīng)驗(yàn) ;
6. 熟練掌握一門或多門編程語言,并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先,重點(diǎn)考察python、perl、java ;
7. 熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先,包括但不局限于:數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量等;
8. 良好的語言溝通與表達(dá)能力和自我驅(qū)動動力。
注:此崗位需在杭州一個(gè)月
第3篇 高級etl工程師崗位職責(zé)
高級etl 工程師 職責(zé)描述:
1. 負(fù)責(zé)基于spark技術(shù)的海量數(shù)據(jù)處理和建設(shè)工作;
2. 參與流式數(shù)據(jù)處理系統(tǒng)的開發(fā)和維護(hù);
3. 協(xié)同數(shù)據(jù)采集團(tuán)隊(duì)和數(shù)據(jù)應(yīng)用團(tuán)隊(duì)進(jìn)行系統(tǒng)和代碼間對接;
4. 跟蹤新的大數(shù)據(jù)處理技術(shù),并將新的大數(shù)據(jù)處理技術(shù)應(yīng)用到醫(yī)療業(yè)務(wù)場景中;
任職要求:
1. 計(jì)算機(jī)軟件相關(guān)專業(yè),本科以上學(xué)歷
2. 兩年及以上spark相關(guān)開發(fā)經(jīng)驗(yàn)
3. 熟練掌握java,scala,python,c++語言中的一種
4. 熟悉linu_/uni_操作系統(tǒng)
5. 熟悉 mysql/hbase/hive/kafka/elasticsearch/redis 中一種或多種技術(shù)
6. 扎實(shí)的數(shù)據(jù)結(jié)構(gòu)及算法基礎(chǔ), 良好的英文文檔閱讀能力
7. 思路敏捷清晰,良好的語言表達(dá)和理解能力,良好的學(xué)習(xí)能力及創(chuàng)新意識
8. 具有優(yōu)良的問題分析及解決能力
9. 具有良好的團(tuán)隊(duì)合作精神及協(xié)調(diào)能力
職責(zé)描述:
1. 負(fù)責(zé)基于spark技術(shù)的海量數(shù)據(jù)處理和建設(shè)工作;
2. 參與流式數(shù)據(jù)處理系統(tǒng)的開發(fā)和維護(hù);
3. 協(xié)同數(shù)據(jù)采集團(tuán)隊(duì)和數(shù)據(jù)應(yīng)用團(tuán)隊(duì)進(jìn)行系統(tǒng)和代碼間對接;
4. 跟蹤新的大數(shù)據(jù)處理技術(shù),并將新的大數(shù)據(jù)處理技術(shù)應(yīng)用到醫(yī)療業(yè)務(wù)場景中;
任職要求:
1. 計(jì)算機(jī)軟件相關(guān)專業(yè),本科以上學(xué)歷
2. 兩年及以上spark相關(guān)開發(fā)經(jīng)驗(yàn)
3. 熟練掌握java,scala,python,c++語言中的一種
4. 熟悉linu_/uni_操作系統(tǒng)
5. 熟悉 mysql/hbase/hive/kafka/elasticsearch/redis 中一種或多種技術(shù)
6. 扎實(shí)的數(shù)據(jù)結(jié)構(gòu)及算法基礎(chǔ), 良好的英文文檔閱讀能力
7. 思路敏捷清晰,良好的語言表達(dá)和理解能力,良好的學(xué)習(xí)能力及創(chuàng)新意識
8. 具有優(yōu)良的問題分析及解決能力
9. 具有良好的團(tuán)隊(duì)合作精神及協(xié)調(diào)能力
第4篇 高級etl工程師職位描述與崗位職責(zé)任職要求
職位描述:
1、負(fù)責(zé)公司數(shù)據(jù)平臺項(xiàng)目的etl設(shè)計(jì)、實(shí)現(xiàn)以及優(yōu)化。
2、負(fù)責(zé)etl流程優(yōu)化,關(guān)鍵問題解決、團(tuán)隊(duì)技術(shù)與引導(dǎo)和前瞻性技術(shù)研究;
3、參與數(shù)據(jù)倉庫數(shù)據(jù)模型設(shè)計(jì),進(jìn)行數(shù)據(jù)質(zhì)量監(jiān)測、校驗(yàn)和提升;
4、使用etl技術(shù)對醫(yī)院信息系統(tǒng)數(shù)據(jù)進(jìn)行提取、清洗、轉(zhuǎn)換和整合;
崗位要求:
1、至少三年以上etl數(shù)據(jù)開發(fā)經(jīng)驗(yàn);計(jì)算機(jī)相關(guān)專業(yè)本科以上學(xué)歷,熟悉數(shù)據(jù)分析與數(shù)據(jù)挖掘理論;
2、熟悉dw實(shí)施方法論和常規(guī)etl構(gòu)架,有整體etl開發(fā)經(jīng)驗(yàn),深刻理解元數(shù)據(jù)管理;
3、熟練掌握oracle、sql server、mysql、postgresql等至少兩種主流數(shù)據(jù)庫的使用;
4、熟練掌握ssis、kettle、informatica等至少一種etl工具的使用;
5、精通sql、存儲過程、函數(shù)的使用,具備編寫、優(yōu)化復(fù)雜sql的能力;
6、對數(shù)字,數(shù)據(jù)敏感,具備良好的邏輯思維能力;
7、具備專業(yè)的業(yè)務(wù)研究、分析能力,能夠獨(dú)立開展業(yè)務(wù)調(diào)研、數(shù)據(jù)分析、數(shù)據(jù)建模、報(bào)告編寫工作;
8、有醫(yī)療衛(wèi)生數(shù)據(jù)平臺開發(fā)、實(shí)施經(jīng)驗(yàn)優(yōu)先;
9、能適應(yīng)長期出差。
第5篇 高級etl技術(shù)經(jīng)理職位描述與崗位職責(zé)任職要求
職位描述:
崗位職能:
1. 基于公司數(shù)據(jù)建設(shè)需要,完成數(shù)據(jù)平臺構(gòu)建、數(shù)據(jù)內(nèi)容開發(fā)等工作。包括:數(shù)據(jù)平臺基礎(chǔ)設(shè)施建設(shè)、數(shù)據(jù)采集、etl、數(shù)倉及數(shù)據(jù)集市、數(shù)據(jù)應(yīng)用產(chǎn)品等開發(fā)工作;
2. 充分理解需求文檔,基于此進(jìn)行自測,交付高質(zhì)量的開發(fā)代碼和數(shù)據(jù)內(nèi)容;
3. 工作中對數(shù)據(jù)平臺基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動深度思考,提升效能并積極建言、促進(jìn)組織和系統(tǒng)發(fā)展;
4. 團(tuán)隊(duì)日常管理,及其他根據(jù)部門需要安排事宜。
崗位要求:
1. 信息技術(shù)類、數(shù)學(xué)、統(tǒng)計(jì)學(xué)、計(jì)量經(jīng)濟(jì)學(xué)類專業(yè),本科,工作年限5年以上;
2. 熟悉數(shù)據(jù)倉庫模型設(shè)計(jì)和精通etl開發(fā)經(jīng)驗(yàn) ,掌握3nf,kimball的維度建模設(shè)計(jì)方法,具備海量數(shù)據(jù)加工處理(etl)相關(guān)經(jīng)驗(yàn) ;
3. 掌握至少一種數(shù)據(jù)庫開發(fā)技術(shù):oracle、teradata、db2、mysql等,精通并靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理 ;
4. 熟悉linu_系統(tǒng)常規(guī)shell處理命令,靈活運(yùn)用shell做的文本處理和系統(tǒng)操作 ;
5. 有從事分布式數(shù)據(jù)存儲與計(jì)算平臺應(yīng)用開發(fā)經(jīng)驗(yàn) ;
6. 熟練掌握一門或多門編程語言,并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先,重點(diǎn)考察python、perl、java ;
7. 熟悉數(shù)據(jù)倉庫領(lǐng)域知識和技能者優(yōu)先,包括但不局限于:數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量等;
8. 良好的語言溝通與表達(dá)能力和自我驅(qū)動動力。
注:此崗位需在杭州一個(gè)月