- 目錄
-
第1篇 高級數(shù)據(jù)倉庫開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1.能夠獨(dú)立的分析和設(shè)計數(shù)據(jù)倉庫需求解決方案;
2.善于和用戶溝通、準(zhǔn)確了解和定義業(yè)務(wù)需求并設(shè)計解決方案;
3.熟練掌握mysql數(shù)據(jù)庫,精通sql語句編寫;
5.有數(shù)據(jù)倉庫/數(shù)據(jù)集市相關(guān)項(xiàng)目背景者有限考慮;
6.5年以上數(shù)據(jù)庫實(shí)際項(xiàng)目開發(fā)經(jīng)驗(yàn);
7.熟練掌握etl工具,掌握kettle/informatica開發(fā)者優(yōu)先;
8.熟悉shell、perl等腳本語言者優(yōu)先;
9.良好的溝通和學(xué)習(xí)能力。
第2篇 數(shù)據(jù)倉庫工程師—(杭州)營銷服務(wù)事業(yè)部職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1、負(fù)責(zé)金融行業(yè)數(shù)據(jù)倉庫開發(fā)工作
2、負(fù)責(zé)與多個應(yīng)用對接的接口和框架設(shè)計
3、充分理解產(chǎn)品需求,能夠結(jié)合需求進(jìn)行任務(wù)設(shè)計,完成詳細(xì)設(shè)計文檔的編寫。
崗位要求:
1. 從事數(shù)據(jù)倉庫及商業(yè)智能(bi)領(lǐng)域工作至少3年以上,熟悉數(shù)據(jù)倉庫模型設(shè)計方法論,并有實(shí)際的模型設(shè)計經(jīng)驗(yàn),有大型數(shù)倉建設(shè)經(jīng)驗(yàn)優(yōu)先;
2. 精通數(shù)據(jù)倉庫領(lǐng)域知識和管理技能,包括但不局限于:元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理、性能調(diào)優(yōu)等;
3.有主流商業(yè)/開源etl工具(informatica、datastage、kettle等)使用經(jīng)驗(yàn)者優(yōu)先;
4. 熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn),包括hdfs、map-reduce、hive、hbase、spark等,具備海量數(shù)據(jù)加工處理(etl)相關(guān)經(jīng)驗(yàn);
5. 具有較強(qiáng)的團(tuán)隊(duì)意識與良好的溝通能力及高度的工作責(zé)任感,熱愛技術(shù),有很強(qiáng)的鉆研能力,樂于接受有挑戰(zhàn)性的任務(wù);
6、有團(tuán)隊(duì)管理經(jīng)驗(yàn)優(yōu)先。
第3篇 數(shù)據(jù)倉庫需求開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1)負(fù)責(zé)數(shù)據(jù)需求溝通、需求調(diào)研、需求分析、需求跟蹤;
2)負(fù)責(zé)業(yè)務(wù)源系統(tǒng)業(yè)務(wù)梳理、 信息調(diào)研、數(shù)據(jù)分析;
3)負(fù)責(zé)邏輯數(shù)據(jù)模型設(shè)計、業(yè)務(wù)映射規(guī)則整理,數(shù)據(jù)業(yè)務(wù)規(guī)則、數(shù)據(jù)準(zhǔn)確性等質(zhì)量核對、校驗(yàn);
4)負(fù)責(zé)數(shù)據(jù)業(yè)務(wù)開發(fā);
任職要求:
1)本科以上及同等學(xué)歷,計算機(jī)、軟件等相關(guān)專業(yè)畢業(yè);
2)五年以上工作經(jīng)驗(yàn);
3)熟練數(shù)據(jù)庫sql語言,掌握數(shù)據(jù)庫中mysql/oracle/gp等至少2種;
4)熟悉linu_系統(tǒng),具備shell編程等開發(fā)能力;
5)熟悉通信行業(yè)基本業(yè)務(wù)及業(yè)務(wù)流程從事通信行業(yè)數(shù)模型設(shè)計經(jīng)驗(yàn)優(yōu)先;
6)熟悉大數(shù)據(jù)技術(shù)(hadoop、hive等),并具備一定的數(shù)據(jù)處理開發(fā)經(jīng)驗(yàn);
7)熟悉數(shù)據(jù)倉庫模型優(yōu)先具有較強(qiáng)的邏輯分析能力、文字表達(dá)能力;
8)具有較強(qiáng)的需求判斷、引導(dǎo)能力,邏輯思維能力強(qiáng),良好的溝通表達(dá)和文檔交付能力
加分項(xiàng):
有移動通信行業(yè)(移動、電信、聯(lián)通)tb、pb級數(shù)據(jù)分析和處理經(jīng)驗(yàn);
有java,python等開發(fā)基礎(chǔ);
第4篇 數(shù)據(jù)倉庫etl開發(fā)工程師崗位職責(zé)
數(shù)據(jù)倉庫etl資深開發(fā)工程師 1.5年以上做bi、數(shù)據(jù)倉庫etl開發(fā)方向,行業(yè)不限;
2.過去做北京汽車項(xiàng)目;
3.英語能基本讀寫;
4.開發(fā)經(jīng)驗(yàn)豐富,能迅速完成交辦相關(guān)工作;
5.溝通能力良好,具備團(tuán)隊(duì)合作精神,能適應(yīng)一定壓力開展工作。 1.5年以上做bi、數(shù)據(jù)倉庫etl開發(fā)方向,行業(yè)不限;
2.過去做北京汽車項(xiàng)目;
3.英語能基本讀寫;
4.開發(fā)經(jīng)驗(yàn)豐富,能迅速完成交辦相關(guān)工作;
5.溝通能力良好,具備團(tuán)隊(duì)合作精神,能適應(yīng)一定壓力開展工作。
第5篇 外包高級數(shù)據(jù)倉庫開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1.能夠獨(dú)立的分析和設(shè)計數(shù)據(jù)倉庫需求解決方案;
2.善于和用戶溝通、準(zhǔn)確了解和定義業(yè)務(wù)需求并設(shè)計解決方案;
3.熟練掌握mysql數(shù)據(jù)庫,精通sql語句編寫;
5.有數(shù)據(jù)倉庫/數(shù)據(jù)集市相關(guān)項(xiàng)目背景者有限考慮;
6.5年以上數(shù)據(jù)庫實(shí)際項(xiàng)目開發(fā)經(jīng)驗(yàn);
7.熟練掌握etl工具,掌握kettle/informatica開發(fā)者優(yōu)先;
8.熟悉shell、perl等腳本語言者優(yōu)先;
9.良好的溝通和學(xué)習(xí)能力。
第6篇 etl工程師(中級數(shù)據(jù)倉庫工程師)職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1、 負(fù)責(zé)數(shù)據(jù)倉庫建模和etl技術(shù)工作,參與數(shù)據(jù)項(xiàng)目各類數(shù)據(jù)源etl的接口設(shè)計和文檔、流程規(guī)范;
2、負(fù)責(zé)項(xiàng)目中數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)校驗(yàn)相關(guān)開發(fā)工作;
3. 配合使用主流數(shù)據(jù)挖掘工具、etl工具、bi展現(xiàn)的設(shè)計和開發(fā);
4、 能夠按照公司全面質(zhì)量管理的要求,高質(zhì)量地完成各類技術(shù)支持工作。
任職要求:
1.計算機(jī)相關(guān)專業(yè)本科以上學(xué)歷,3年以上工作經(jīng)驗(yàn);
2.熟悉etl開發(fā)、數(shù)據(jù)倉庫設(shè)計流程,熟悉mysql、oracle, ms sql server等主流數(shù)據(jù)庫,表結(jié)構(gòu)設(shè)計,存儲過程編寫;
3.有一定的sql調(diào)優(yōu)知識和經(jīng)驗(yàn),具有bi相關(guān)知識;
4.有hana、hive經(jīng)驗(yàn)優(yōu)先;
5.具備財務(wù)基礎(chǔ)知識或者erp基礎(chǔ)知識者優(yōu)先;
第7篇 數(shù)據(jù)倉庫工程師職位描述與崗位職責(zé)任職要求
職位描述:
【職位描述】
1.負(fù)責(zé)數(shù)據(jù)分析模型設(shè)計,進(jìn)行維度建模,數(shù)據(jù)倉庫設(shè)計、優(yōu)化,etl數(shù)據(jù)處理;
2.負(fù)責(zé)公司各業(yè)務(wù)底層數(shù)據(jù)標(biāo)準(zhǔn)化處理,挖掘不同業(yè)務(wù)場景的業(yè)務(wù)標(biāo)簽;
3.基于業(yè)務(wù),對業(yè)務(wù)數(shù)據(jù)與用戶行為數(shù)據(jù)進(jìn)行整合,分析并挖掘數(shù)據(jù)業(yè)務(wù)價值;
【職位要求】
1、本科及以上學(xué)歷,計算機(jī)、數(shù)學(xué)、統(tǒng)計及相關(guān)專業(yè),3年以上工作經(jīng)驗(yàn);
2、有1-3年數(shù)據(jù)倉庫相關(guān)開發(fā)經(jīng)驗(yàn),需要有互聯(lián)網(wǎng)金融行業(yè)經(jīng)驗(yàn);
3、精通數(shù)據(jù)倉庫模型,能夠熟練進(jìn)行事實(shí)表、維度表、匯總表的建模,具備大型數(shù)據(jù)倉庫開發(fā)實(shí)際經(jīng)驗(yàn);
4、有豐富的 sql 編程經(jīng)驗(yàn)及 etl 流程,有spark sql/hive相關(guān)開發(fā)經(jīng)驗(yàn),有ma_compute 使用經(jīng)驗(yàn)更佳;
5、了解結(jié)構(gòu)化數(shù)據(jù)與非結(jié)構(gòu)化數(shù)據(jù)處理方法;
6、熟練使用java/scala/python等開發(fā)語言中的一種;
7、有強(qiáng)烈的責(zé)任心,良好的溝通能力,團(tuán)隊(duì)合作精神和優(yōu)秀的執(zhí)行能力。
【更多福利】
定期:組織行業(yè)或?qū)I(yè)會,共同學(xué)習(xí)才能有進(jìn)步
職業(yè)發(fā)展:優(yōu)秀員工、優(yōu)秀團(tuán)隊(duì)、靈活的晉升與調(diào)薪機(jī)制
豐厚獎金:項(xiàng)目獎金、年終獎、期權(quán)計劃
員工關(guān)懷:年度體檢、生日會、節(jié)日禮物、team building、結(jié)婚生育禮金、撫恤金
節(jié)日假期:法定假期、額外補(bǔ)充年假、帶薪病假、姨媽假、“38”節(jié)假期
【我們的團(tuán)隊(duì)】
信用飛是一家垂直于航旅領(lǐng)域的消費(fèi)金融科技公司,致力于“科技讓金融更簡單”來提高飛行人群的金融體驗(yàn)。在金融領(lǐng)域,信用飛是京東金融戰(zhàn)略合作伙伴;在航空領(lǐng)域,信用飛是春秋航空、航班管家、東方航空、首都航空等多家航司的優(yōu)質(zhì)合作伙伴,為飛行人群提供在航空場景支付、分期、借貸等金融服務(wù)。信用飛致力于用科技優(yōu)化航空金融,讓更多人在飛行過程中享受更好的權(quán)益和服務(wù),越飛越有錢。團(tuán)隊(duì)由來自春秋航空、攜程、騰訊、阿里巴巴、網(wǎng)易、渣打銀行、滴滴出行等行業(yè)精英組成,目前業(yè)務(wù)迅速擴(kuò)張中。
【技術(shù)團(tuán)隊(duì)】
技術(shù)氛圍濃厚,團(tuán)隊(duì)成員背景及技術(shù)水平優(yōu)秀,由來自騰訊、阿里、2345、富友支付等行業(yè)技術(shù)精英組成,團(tuán)隊(duì)不定期舉辦各類技術(shù)會以及外部技術(shù)大牛培訓(xùn)會,擅于,一起學(xué)習(xí),共同成長~
【工作地點(diǎn)】
長寧區(qū)淮海西路432號凱利大廈4樓
(地鐵3號線、4號線、10號線虹橋路站4號出口步行400米,地鐵11號線交通大學(xué)站5號出口步行800米)
第8篇 資深數(shù)據(jù)倉庫研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1.負(fù)責(zé)數(shù)據(jù)倉庫研發(fā)工作
2.負(fù)責(zé)數(shù)據(jù)建模以及數(shù)據(jù)倉庫應(yīng)用產(chǎn)品的設(shè)計和開發(fā)
3.負(fù)責(zé)數(shù)據(jù)倉庫etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問題
4.負(fù)責(zé)數(shù)據(jù)倉庫和業(yè)務(wù)數(shù)據(jù)集市建設(shè)
5.業(yè)務(wù)模型抽象、數(shù)據(jù)模型設(shè)計開發(fā)
6.參與業(yè)務(wù)指標(biāo)體系建設(shè)
任職要求:
1.本科及以上學(xué)歷,計算機(jī)、電子通信、數(shù)學(xué)、統(tǒng)計或者相關(guān)專業(yè)
2.三年以上工作經(jīng)驗(yàn)
3.熟練掌握hiveql
4.熟悉hadoop生態(tài),掌握hive/spark/storm/kafka 等的使用和性能調(diào)優(yōu)
5.具備大型數(shù)據(jù)倉庫架構(gòu)設(shè)計、模型設(shè)計、etl 設(shè)計的相關(guān)經(jīng)驗(yàn)
6.扎實(shí)的 java/scala 基礎(chǔ)
7.具備海量數(shù)據(jù)處理和數(shù)據(jù)挖掘研發(fā)經(jīng)驗(yàn)的優(yōu)先
8.具備良好的團(tuán)隊(duì)合作精神,工作有激情
第9篇 資深數(shù)據(jù)倉庫工程師崗位職責(zé)資深數(shù)據(jù)倉庫工程師職責(zé)任職要求
資深數(shù)據(jù)倉庫工程師崗位職責(zé)
資深數(shù)據(jù)倉庫工程師職位描述:
1、負(fù)責(zé)數(shù)據(jù)平臺架構(gòu)的整體規(guī)劃和設(shè)計;
2、根據(jù)上層業(yè)務(wù)邏輯整合優(yōu)化平臺數(shù)據(jù)流程,技術(shù)難點(diǎn)攻關(guān);
3、對數(shù)據(jù)及業(yè)務(wù)開發(fā)團(tuán)隊(duì)提供技術(shù)支持,協(xié)助方案規(guī)劃。
任職要求
1、精通數(shù)據(jù)倉庫實(shí)施方法論、深入了解數(shù)據(jù)倉庫體系架構(gòu),精通邏輯模型和物理模型建模、中間層模型理論以及多維模型的設(shè)計;
2、對hive、hbase、hadoop、map/reduce、spark有深入了解;
3、精通主流數(shù)據(jù)庫技術(shù)(如oracle、sqlserver、mysql等),精通sql,有較強(qiáng)的sql編碼及數(shù)據(jù)存儲、性能調(diào)優(yōu)經(jīng)驗(yàn);
4、能夠?qū)I(yè)務(wù)需求進(jìn)行抽象并據(jù)此進(jìn)行架構(gòu)設(shè)計;
5、具有較強(qiáng)的溝通,表達(dá)及文檔編寫能力,有大數(shù)據(jù)建設(shè)經(jīng)驗(yàn)者優(yōu)先;
6、數(shù)據(jù)java開發(fā),有相關(guān)的工作經(jīng)驗(yàn);
7、熟悉數(shù)據(jù)倉庫相關(guān)技術(shù),如 etl、調(diào)度相關(guān)、報表開發(fā)。
職位描述:
1、負(fù)責(zé)數(shù)據(jù)平臺架構(gòu)的整體規(guī)劃和設(shè)計;
2、根據(jù)上層業(yè)務(wù)邏輯整合優(yōu)化平臺數(shù)據(jù)流程,技術(shù)難點(diǎn)攻關(guān);
3、對數(shù)據(jù)及業(yè)務(wù)開發(fā)團(tuán)隊(duì)提供技術(shù)支持,協(xié)助方案規(guī)劃。
任職要求
1、精通數(shù)據(jù)倉庫實(shí)施方法論、深入了解數(shù)據(jù)倉庫體系架構(gòu),精通邏輯模型和物理模型建模、中間層模型理論以及多維模型的設(shè)計;
2、對hive、hbase、hadoop、map/reduce、spark有深入了解;
3、精通主流數(shù)據(jù)庫技術(shù)(如oracle、sqlserver、mysql等),精通sql,有較強(qiáng)的sql編碼及數(shù)據(jù)存儲、性能調(diào)優(yōu)經(jīng)驗(yàn);
4、能夠?qū)I(yè)務(wù)需求進(jìn)行抽象并據(jù)此進(jìn)行架構(gòu)設(shè)計;
5、具有較強(qiáng)的溝通,表達(dá)及文檔編寫能力,有大數(shù)據(jù)建設(shè)經(jīng)驗(yàn)者優(yōu)先;
6、數(shù)據(jù)java開發(fā),有相關(guān)的工作經(jīng)驗(yàn);
7、熟悉數(shù)據(jù)倉庫相關(guān)技術(shù),如 etl、調(diào)度相關(guān)、報表開發(fā)。
第10篇 bi數(shù)據(jù)倉庫工程師崗位職責(zé)
bi工程師-數(shù)據(jù)倉庫 涂鴉智能 杭州涂鴉科技有限公司,涂鴉智能,愛相機(jī) 崗位職責(zé):
1. 負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)調(diào)研、需求理解,數(shù)據(jù)采集方案設(shè)計及實(shí)現(xiàn);
2. 負(fù)責(zé)建立數(shù)據(jù)模型,根據(jù)業(yè)務(wù)設(shè)計數(shù)據(jù)主題;
3. 負(fù)責(zé)數(shù)據(jù)模型的etl編寫,參與團(tuán)隊(duì)etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問題;
4. 理解業(yè)務(wù)方的數(shù)據(jù)需求,提供面向業(yè)務(wù)的olap、報表、數(shù)據(jù)提取等數(shù)據(jù)服務(wù);
任職要求:
1. 本科及以上學(xué)歷,計算機(jī)相關(guān)專業(yè),2-5年企業(yè)級數(shù)據(jù)平臺相關(guān)系統(tǒng)開發(fā)經(jīng)驗(yàn);
2. sql技能嫻熟,精通hive-sql,presto-sql
3. 具有扎實(shí)的計算機(jī)操作系統(tǒng)、數(shù)據(jù)結(jié)構(gòu)等編程基礎(chǔ),熟悉java或scala語言;
4. 有過2年以上bi項(xiàng)目經(jīng)驗(yàn),熟悉開源的bi工具如:metabase,superset,redash.有實(shí)際操作經(jīng)驗(yàn)。
7. 有良好的溝通能力,善于主動思考和行動,有極強(qiáng)的責(zé)任心和自驅(qū)力。
第11篇 數(shù)據(jù)倉庫工程師崗位職責(zé)
資深數(shù)據(jù)倉庫工程師(嚴(yán)選)-郵件事業(yè)部172 網(wǎng)易集團(tuán) 網(wǎng)易(杭州)網(wǎng)絡(luò)有限公司,杭州網(wǎng)易,網(wǎng)易,網(wǎng)易杭州,網(wǎng)易游戲,網(wǎng)易網(wǎng)絡(luò),網(wǎng)易集團(tuán),網(wǎng)易 工作職責(zé):
1. 負(fù)責(zé)電商數(shù)據(jù)倉庫搭建、etl開發(fā)與維護(hù);
2. 完成數(shù)據(jù)統(tǒng)計、編寫計算任務(wù)、接口開發(fā);
3. 參于數(shù)據(jù)規(guī)范制定、文檔編寫。
任職要求:
1.本科以上學(xué)歷,軟件工程/計算機(jī)/通信/數(shù)學(xué)等相關(guān)專業(yè);
2.熟悉hive sql語言,熟悉shell, python等至少一種腳本語言;
3.有hadoop、spark、flink等至少一種大數(shù)據(jù)平臺的使用經(jīng)驗(yàn);
4.理解能力強(qiáng),善于溝通,有責(zé)任心和團(tuán)隊(duì)精神;
5.有數(shù)據(jù)倉庫建設(shè)、商業(yè)數(shù)據(jù)分析、增長項(xiàng)目經(jīng)驗(yàn)者優(yōu)先。
第12篇 數(shù)據(jù)倉庫開發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1、負(fù)責(zé)數(shù)據(jù)倉庫的模型規(guī)劃設(shè)計工作;
2、負(fù)責(zé)數(shù)據(jù)倉庫etl規(guī)則設(shè)計、數(shù)據(jù)映射工作;
3、負(fù)責(zé)數(shù)據(jù)倉庫建設(shè)需求調(diào)研、業(yè)務(wù)溝通;
4、負(fù)責(zé)業(yè)務(wù)模型抽象和數(shù)據(jù)模型的設(shè)計開發(fā)。
任職要求:
1、計算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;
2、5年以上數(shù)據(jù)倉庫建模經(jīng)驗(yàn);
3、熟悉etl、數(shù)據(jù)倉庫開發(fā)及相關(guān)技術(shù),熟悉hive等主流數(shù)據(jù)庫技術(shù),精通sql開發(fā)與優(yōu)化;
4、熟練掌握維度建模理論,有能力分析業(yè)務(wù)數(shù)據(jù),完成數(shù)據(jù)倉庫模型設(shè)計;
5、有實(shí)時數(shù)據(jù)處理開發(fā)經(jīng)驗(yàn)(如flink/sparkstreaming/storm)優(yōu)先;
6、對apache kylin以及其他olap技術(shù)深入了解者優(yōu)先;
7、工作態(tài)度踏實(shí)認(rèn)真、積極主動,可接受較高強(qiáng)度工作,具備良好的溝通能力和協(xié)調(diào)能力。
第13篇 dw數(shù)據(jù)倉庫etl工程師職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1. 負(fù)責(zé)數(shù)據(jù)倉庫開發(fā)需求收集和分析;
2. 負(fù)責(zé)數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計和開發(fā);
3. 負(fù)責(zé)數(shù)據(jù)抽取、清洗、轉(zhuǎn)化等數(shù)據(jù)處理程序開發(fā);
4. 負(fù)責(zé)對公司數(shù)據(jù)倉庫平臺整體架構(gòu)改進(jìn)與流程優(yōu)化;
5. 負(fù)責(zé)bi報表開發(fā)和優(yōu)化。
任職資格:
1. 2年以上數(shù)據(jù)倉庫工作經(jīng)驗(yàn);
2. 熟悉數(shù)據(jù)庫、etl、bi建模等工具;
3. 良好編程習(xí)慣,以及較強(qiáng)的學(xué)習(xí)能力和溝通能力。
第14篇 資深數(shù)據(jù)倉庫工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé)
1、基于公司數(shù)據(jù)建設(shè)需要,完成數(shù)據(jù)內(nèi)容開發(fā)等工作,維護(hù)與完善數(shù)據(jù)模型各類信息;
2、負(fù)責(zé)各業(yè)務(wù)線系統(tǒng)的信息調(diào)研、表與字段的關(guān)系梳理,根據(jù)業(yè)務(wù)及日常需求來優(yōu)化模型;
3、工作中對數(shù)據(jù)平臺基礎(chǔ)設(shè)施、數(shù)據(jù)內(nèi)容建設(shè)等工作主動深度思考,提升效能、促進(jìn)組織和系統(tǒng)發(fā)展;
4、負(fù)責(zé)核心數(shù)據(jù)倉庫模型代碼開發(fā),跟進(jìn)etl的完成。負(fù)責(zé)接入源系統(tǒng)數(shù)據(jù)的腳本開發(fā)、數(shù)據(jù)測試與驗(yàn)證、以及調(diào)度開發(fā)等工作;
5、與上游系統(tǒng)與下游應(yīng)用同事溝通協(xié)作,推動各類需求在數(shù)據(jù)模型中的落地;
6、跟蹤、監(jiān)測、維護(hù)及優(yōu)化數(shù)據(jù)模型,確保數(shù)據(jù)模型被使用。
任職資格
1、本科以上學(xué)歷,5年或以上金融行業(yè)數(shù)據(jù)類工作經(jīng)驗(yàn);
2、熟悉hadoop生態(tài)系統(tǒng)組件,如:hive、mapreduce、spark、hbase等;具備編寫、優(yōu)化復(fù)雜sql的能力;
3、負(fù)責(zé)過大型數(shù)據(jù)平臺或數(shù)據(jù)倉庫設(shè)計,具有扎實(shí)的大數(shù)據(jù)和數(shù)據(jù)倉庫的理論功底;
4、掌握一定的數(shù)據(jù)質(zhì)量管理方法論、評估模型設(shè)計、質(zhì)量報表設(shè)計,能夠根據(jù)數(shù)據(jù)質(zhì)量要求制定數(shù)據(jù)質(zhì)量探查規(guī)則并進(jìn)行實(shí)施;
5、掌握一定元數(shù)據(jù)管理方法論、元數(shù)據(jù)管理設(shè)計。
6、能夠圍繞業(yè)務(wù)和產(chǎn)品特征建模并解決問題;
7、具有豐富的數(shù)據(jù)實(shí)踐經(jīng)驗(yàn);
8、基于公司數(shù)據(jù)建設(shè)需要,完成數(shù)據(jù)內(nèi)容開發(fā)等工作,維護(hù)與完善數(shù)據(jù)模型各類信息。
第15篇 數(shù)據(jù)倉庫/etl/bi工程師職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1、負(fù)責(zé)數(shù)據(jù)倉庫建模,業(yè)務(wù)數(shù)據(jù)集市建設(shè)開發(fā)
2、負(fù)責(zé)數(shù)據(jù)倉庫etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問題、etl流程監(jiān)控,保障數(shù)據(jù)平臺架構(gòu)穩(wěn)定性
3、建立數(shù)據(jù)分析指標(biāo)體系,不斷完善指標(biāo)體系和分析模型;
4、通過專項(xiàng)分析,輸出專項(xiàng)分析報告
5、負(fù)責(zé)數(shù)據(jù)分析相關(guān)需求和數(shù)據(jù)測試的工作
任職要求:
學(xué)歷要求:
全日制統(tǒng)考類本科及以上學(xué)歷,計算機(jī)、通信、電子、軟件工程、統(tǒng)計學(xué)、應(yīng)用數(shù)學(xué)、數(shù)據(jù)分析等相關(guān)專業(yè)
專業(yè)技能:
1、熟悉數(shù)據(jù)倉庫各類模型建模理論,熟悉數(shù)據(jù)倉庫數(shù)據(jù)分層架構(gòu)和多維數(shù)據(jù)模型設(shè)計;
2、豐富的數(shù)據(jù)分析經(jīng)驗(yàn),熟練掌握sql、hql、sparksql,擅長運(yùn)用其分析并完成復(fù)雜業(yè)務(wù)數(shù)據(jù)查詢
3、掌握至少一種數(shù)據(jù)庫開發(fā)技術(shù):mysql/oracle/db2等,靈活運(yùn)用sql實(shí)現(xiàn)海量數(shù)據(jù)etl加工處理;
4、熟悉hadoop生態(tài)(如:hdfs/mapreduce/hive/hbase等),并有相關(guān)實(shí)踐經(jīng)驗(yàn);
5、熟練掌握一門或多門編程語言(如:python/shell/java/c++等),并有大型項(xiàng)目建設(shè)經(jīng)驗(yàn)者優(yōu)先;
素質(zhì):
1、敏銳的數(shù)據(jù)觀察和分析能力,及時發(fā)現(xiàn)和分析其中隱含的變化和問題并給出建議;
2、良好的溝通能力和團(tuán)隊(duì)精神,較強(qiáng)的學(xué)習(xí)能力,能承擔(dān)一定的工作壓力。
經(jīng)驗(yàn):
至少2年以上數(shù)據(jù)倉庫(離線&實(shí)時)模型設(shè)計開發(fā)、etl設(shè)計開發(fā)的相關(guān)經(jīng)驗(yàn),有通信運(yùn)營商o域/b域大數(shù)據(jù)、智慧城市大數(shù)據(jù)的數(shù)據(jù)倉庫、etl設(shè)計研發(fā)經(jīng)驗(yàn)者優(yōu)先'
第16篇 數(shù)據(jù)倉庫架構(gòu)工程師崗位職責(zé)
數(shù)據(jù)倉庫架構(gòu)師/etl工程師 同程藝龍 同程網(wǎng)絡(luò)科技股份有限公司,同程旅游,同程藝龍,同程 位職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉庫數(shù)據(jù)采集、處理、存儲以及挖掘分析的架構(gòu)實(shí)現(xiàn),負(fù)責(zé)架構(gòu)設(shè)計和指導(dǎo)團(tuán)隊(duì)落地;
2、參與數(shù)據(jù)平臺建設(shè),包括環(huán)境和框架的規(guī)劃搭建以及部分核心編碼工作;設(shè)計并實(shí)現(xiàn)對bi分析、數(shù)據(jù)產(chǎn)品開發(fā)、算法開發(fā)的系統(tǒng)性支持;
3、研究未來數(shù)據(jù)模型和計算框架的創(chuàng)新與落地,包括但不限于以下領(lǐng)域:大規(guī)模數(shù)據(jù)實(shí)時化、研發(fā)模式敏捷化、數(shù)據(jù)計算框架輕量化、數(shù)據(jù)模型組織方式業(yè)務(wù)化等方面。
職位要求:
1、具備5年以上dw系統(tǒng)建設(shè)經(jīng)驗(yàn);了解數(shù)據(jù)倉庫建設(shè)過程中的挑戰(zhàn)與問題,有實(shí)際架構(gòu)設(shè)計和數(shù)據(jù)建模經(jīng)驗(yàn),有作為技術(shù)負(fù)責(zé)人系統(tǒng)化解決問題的成功案例;
2、有dw/bi架構(gòu)體系中某些領(lǐng)域的專項(xiàng)建設(shè)經(jīng)驗(yàn),包括但不限于:數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理、主數(shù)據(jù)管理、數(shù)據(jù)監(jiān)控、流計算、分布式計算、分布式文件系統(tǒng)、分布式存儲、大規(guī)模數(shù)據(jù)實(shí)時化、跨平臺資源調(diào)度;
3、熟悉hadoop生態(tài)圈,包括但不限于:hadoop、hive、storm、spark、dremel、kylin等;
4、有海量數(shù)據(jù)建模實(shí)踐經(jīng)驗(yàn)優(yōu)先。