歡迎光臨管理者范文網
當前位置:管理者范文網 > 安全管理 > 崗位職責 > 工程崗位職責

數據倉庫工程師崗位職責16篇

更新時間:2024-11-20 查看人數:95
  • 目錄

數據倉庫工程師崗位職責

第1篇 高級數據倉庫開發(fā)工程師職位描述與崗位職責任職要求

職位描述:

職責描述:

1.能夠獨立的分析和設計數據倉庫需求解決方案;

2.善于和用戶溝通、準確了解和定義業(yè)務需求并設計解決方案;

3.熟練掌握mysql數據庫,精通sql語句編寫;

5.有數據倉庫/數據集市相關項目背景者有限考慮;

6.5年以上數據庫實際項目開發(fā)經驗;

7.熟練掌握etl工具,掌握kettle/informatica開發(fā)者優(yōu)先;

8.熟悉shell、perl等腳本語言者優(yōu)先;

9.良好的溝通和學習能力。

第2篇 數據倉庫工程師—(杭州)營銷服務事業(yè)部職位描述與崗位職責任職要求

職位描述:

崗位職責:

1、負責金融行業(yè)數據倉庫開發(fā)工作

2、負責與多個應用對接的接口和框架設計

3、充分理解產品需求,能夠結合需求進行任務設計,完成詳細設計文檔的編寫。

崗位要求:

1. 從事數據倉庫及商業(yè)智能(bi)領域工作至少3年以上,熟悉數據倉庫模型設計方法論,并有實際的模型設計經驗,有大型數倉建設經驗優(yōu)先;

2. 精通數據倉庫領域知識和管理技能,包括但不局限于:元數據管理、數據質量、主數據管理、性能調優(yōu)等;

3.有主流商業(yè)/開源etl工具(informatica、datastage、kettle等)使用經驗者優(yōu)先;

4. 熟悉hadoop生態(tài)相關技術并有相關實踐經驗,包括hdfs、map-reduce、hive、hbase、spark等,具備海量數據加工處理(etl)相關經驗;

5. 具有較強的團隊意識與良好的溝通能力及高度的工作責任感,熱愛技術,有很強的鉆研能力,樂于接受有挑戰(zhàn)性的任務;

6、有團隊管理經驗優(yōu)先。

第3篇 數據倉庫需求開發(fā)工程師職位描述與崗位職責任職要求

職位描述:

崗位職責:

1)負責數據需求溝通、需求調研、需求分析、需求跟蹤;

2)負責業(yè)務源系統業(yè)務梳理、 信息調研、數據分析;

3)負責邏輯數據模型設計、業(yè)務映射規(guī)則整理,數據業(yè)務規(guī)則、數據準確性等質量核對、校驗;

4)負責數據業(yè)務開發(fā);

任職要求:

1)本科以上及同等學歷,計算機、軟件等相關專業(yè)畢業(yè);

2)五年以上工作經驗;

3)熟練數據庫sql語言,掌握數據庫中mysql/oracle/gp等至少2種;

4)熟悉linu_系統,具備shell編程等開發(fā)能力;

5)熟悉通信行業(yè)基本業(yè)務及業(yè)務流程從事通信行業(yè)數模型設計經驗優(yōu)先;

6)熟悉大數據技術(hadoop、hive等),并具備一定的數據處理開發(fā)經驗;

7)熟悉數據倉庫模型優(yōu)先具有較強的邏輯分析能力、文字表達能力;

8)具有較強的需求判斷、引導能力,邏輯思維能力強,良好的溝通表達和文檔交付能力

加分項:

有移動通信行業(yè)(移動、電信、聯通)tb、pb級數據分析和處理經驗;

有java,python等開發(fā)基礎;

第4篇 數據倉庫etl開發(fā)工程師崗位職責

數據倉庫etl資深開發(fā)工程師 1.5年以上做bi、數據倉庫etl開發(fā)方向,行業(yè)不限;

2.過去做北京汽車項目;

3.英語能基本讀寫;

4.開發(fā)經驗豐富,能迅速完成交辦相關工作;

5.溝通能力良好,具備團隊合作精神,能適應一定壓力開展工作。 1.5年以上做bi、數據倉庫etl開發(fā)方向,行業(yè)不限;

2.過去做北京汽車項目;

3.英語能基本讀寫;

4.開發(fā)經驗豐富,能迅速完成交辦相關工作;

5.溝通能力良好,具備團隊合作精神,能適應一定壓力開展工作。

第5篇 外包高級數據倉庫開發(fā)工程師職位描述與崗位職責任職要求

職位描述:

職責描述:

1.能夠獨立的分析和設計數據倉庫需求解決方案;

2.善于和用戶溝通、準確了解和定義業(yè)務需求并設計解決方案;

3.熟練掌握mysql數據庫,精通sql語句編寫;

5.有數據倉庫/數據集市相關項目背景者有限考慮;

6.5年以上數據庫實際項目開發(fā)經驗;

7.熟練掌握etl工具,掌握kettle/informatica開發(fā)者優(yōu)先;

8.熟悉shell、perl等腳本語言者優(yōu)先;

9.良好的溝通和學習能力。

第6篇 etl工程師(中級數據倉庫工程師)職位描述與崗位職責任職要求

職位描述:

職責描述:

1、 負責數據倉庫建模和etl技術工作,參與數據項目各類數據源etl的接口設計和文檔、流程規(guī)范;

2、負責項目中數據清洗、數據處理、數據校驗相關開發(fā)工作;

3. 配合使用主流數據挖掘工具、etl工具、bi展現的設計和開發(fā);

4、 能夠按照公司全面質量管理的要求,高質量地完成各類技術支持工作。

任職要求:

1.計算機相關專業(yè)本科以上學歷,3年以上工作經驗;

2.熟悉etl開發(fā)、數據倉庫設計流程,熟悉mysql、oracle, ms sql server等主流數據庫,表結構設計,存儲過程編寫;

3.有一定的sql調優(yōu)知識和經驗,具有bi相關知識;

4.有hana、hive經驗優(yōu)先;

5.具備財務基礎知識或者erp基礎知識者優(yōu)先;

第7篇 數據倉庫工程師職位描述與崗位職責任職要求

職位描述:

【職位描述】

1.負責數據分析模型設計,進行維度建模,數據倉庫設計、優(yōu)化,etl數據處理;

2.負責公司各業(yè)務底層數據標準化處理,挖掘不同業(yè)務場景的業(yè)務標簽;

3.基于業(yè)務,對業(yè)務數據與用戶行為數據進行整合,分析并挖掘數據業(yè)務價值;

【職位要求】

1、本科及以上學歷,計算機、數學、統計及相關專業(yè),3年以上工作經驗;

2、有1-3年數據倉庫相關開發(fā)經驗,需要有互聯網金融行業(yè)經驗;

3、精通數據倉庫模型,能夠熟練進行事實表、維度表、匯總表的建模,具備大型數據倉庫開發(fā)實際經驗;

4、有豐富的 sql 編程經驗及 etl 流程,有spark sql/hive相關開發(fā)經驗,有ma_compute 使用經驗更佳;

5、了解結構化數據與非結構化數據處理方法;

6、熟練使用java/scala/python等開發(fā)語言中的一種;

7、有強烈的責任心,良好的溝通能力,團隊合作精神和優(yōu)秀的執(zhí)行能力。

【更多福利】

定期:組織行業(yè)或專業(yè)會,共同學習才能有進步

職業(yè)發(fā)展:優(yōu)秀員工、優(yōu)秀團隊、靈活的晉升與調薪機制

豐厚獎金:項目獎金、年終獎、期權計劃

員工關懷:年度體檢、生日會、節(jié)日禮物、team building、結婚生育禮金、撫恤金

節(jié)日假期:法定假期、額外補充年假、帶薪病假、姨媽假、“38”節(jié)假期

【我們的團隊】

信用飛是一家垂直于航旅領域的消費金融科技公司,致力于“科技讓金融更簡單”來提高飛行人群的金融體驗。在金融領域,信用飛是京東金融戰(zhàn)略合作伙伴;在航空領域,信用飛是春秋航空、航班管家、東方航空、首都航空等多家航司的優(yōu)質合作伙伴,為飛行人群提供在航空場景支付、分期、借貸等金融服務。信用飛致力于用科技優(yōu)化航空金融,讓更多人在飛行過程中享受更好的權益和服務,越飛越有錢。團隊由來自春秋航空、攜程、騰訊、阿里巴巴、網易、渣打銀行、滴滴出行等行業(yè)精英組成,目前業(yè)務迅速擴張中。

【技術團隊】

技術氛圍濃厚,團隊成員背景及技術水平優(yōu)秀,由來自騰訊、阿里、2345、富友支付等行業(yè)技術精英組成,團隊不定期舉辦各類技術會以及外部技術大牛培訓會,擅于,一起學習,共同成長~

【工作地點】

長寧區(qū)淮海西路432號凱利大廈4樓

(地鐵3號線、4號線、10號線虹橋路站4號出口步行400米,地鐵11號線交通大學站5號出口步行800米)

第8篇 資深數據倉庫研發(fā)工程師職位描述與崗位職責任職要求

職位描述:

崗位職責:

1.負責數據倉庫研發(fā)工作

2.負責數據建模以及數據倉庫應用產品的設計和開發(fā)

3.負責數據倉庫etl流程的優(yōu)化及解決etl相關技術問題

4.負責數據倉庫和業(yè)務數據集市建設

5.業(yè)務模型抽象、數據模型設計開發(fā)

6.參與業(yè)務指標體系建設

任職要求:

1.本科及以上學歷,計算機、電子通信、數學、統計或者相關專業(yè)

2.三年以上工作經驗

3.熟練掌握hiveql

4.熟悉hadoop生態(tài),掌握hive/spark/storm/kafka 等的使用和性能調優(yōu)

5.具備大型數據倉庫架構設計、模型設計、etl 設計的相關經驗

6.扎實的 java/scala 基礎

7.具備海量數據處理和數據挖掘研發(fā)經驗的優(yōu)先

8.具備良好的團隊合作精神,工作有激情

第9篇 資深數據倉庫工程師崗位職責資深數據倉庫工程師職責任職要求

資深數據倉庫工程師崗位職責

資深數據倉庫工程師職位描述:

1、負責數據平臺架構的整體規(guī)劃和設計;

2、根據上層業(yè)務邏輯整合優(yōu)化平臺數據流程,技術難點攻關;

3、對數據及業(yè)務開發(fā)團隊提供技術支持,協助方案規(guī)劃。

任職要求

1、精通數據倉庫實施方法論、深入了解數據倉庫體系架構,精通邏輯模型和物理模型建模、中間層模型理論以及多維模型的設計;

2、對hive、hbase、hadoop、map/reduce、spark有深入了解;

3、精通主流數據庫技術(如oracle、sqlserver、mysql等),精通sql,有較強的sql編碼及數據存儲、性能調優(yōu)經驗;

4、能夠對業(yè)務需求進行抽象并據此進行架構設計;

5、具有較強的溝通,表達及文檔編寫能力,有大數據建設經驗者優(yōu)先;

6、數據java開發(fā),有相關的工作經驗;

7、熟悉數據倉庫相關技術,如 etl、調度相關、報表開發(fā)。

職位描述:

1、負責數據平臺架構的整體規(guī)劃和設計;

2、根據上層業(yè)務邏輯整合優(yōu)化平臺數據流程,技術難點攻關;

3、對數據及業(yè)務開發(fā)團隊提供技術支持,協助方案規(guī)劃。

任職要求

1、精通數據倉庫實施方法論、深入了解數據倉庫體系架構,精通邏輯模型和物理模型建模、中間層模型理論以及多維模型的設計;

2、對hive、hbase、hadoop、map/reduce、spark有深入了解;

3、精通主流數據庫技術(如oracle、sqlserver、mysql等),精通sql,有較強的sql編碼及數據存儲、性能調優(yōu)經驗;

4、能夠對業(yè)務需求進行抽象并據此進行架構設計;

5、具有較強的溝通,表達及文檔編寫能力,有大數據建設經驗者優(yōu)先;

6、數據java開發(fā),有相關的工作經驗;

7、熟悉數據倉庫相關技術,如 etl、調度相關、報表開發(fā)。

第10篇 bi數據倉庫工程師崗位職責

bi工程師-數據倉庫 涂鴉智能 杭州涂鴉科技有限公司,涂鴉智能,愛相機 崗位職責:

1. 負責業(yè)務數據調研、需求理解,數據采集方案設計及實現;

2. 負責建立數據模型,根據業(yè)務設計數據主題;

3. 負責數據模型的etl編寫,參與團隊etl流程的優(yōu)化及解決etl相關技術問題;

4. 理解業(yè)務方的數據需求,提供面向業(yè)務的olap、報表、數據提取等數據服務;

任職要求:

1. 本科及以上學歷,計算機相關專業(yè),2-5年企業(yè)級數據平臺相關系統開發(fā)經驗;

2. sql技能嫻熟,精通hive-sql,presto-sql

3. 具有扎實的計算機操作系統、數據結構等編程基礎,熟悉java或scala語言;

4. 有過2年以上bi項目經驗,熟悉開源的bi工具如:metabase,superset,redash.有實際操作經驗。

7. 有良好的溝通能力,善于主動思考和行動,有極強的責任心和自驅力。

第11篇 數據倉庫工程師崗位職責

資深數據倉庫工程師(嚴選)-郵件事業(yè)部172 網易集團 網易(杭州)網絡有限公司,杭州網易,網易,網易杭州,網易游戲,網易網絡,網易集團,網易 工作職責:

1. 負責電商數據倉庫搭建、etl開發(fā)與維護;

2. 完成數據統計、編寫計算任務、接口開發(fā);

3. 參于數據規(guī)范制定、文檔編寫。

任職要求:

1.本科以上學歷,軟件工程/計算機/通信/數學等相關專業(yè);

2.熟悉hive sql語言,熟悉shell, python等至少一種腳本語言;

3.有hadoop、spark、flink等至少一種大數據平臺的使用經驗;

4.理解能力強,善于溝通,有責任心和團隊精神;

5.有數據倉庫建設、商業(yè)數據分析、增長項目經驗者優(yōu)先。

第12篇 數據倉庫開發(fā)工程師職位描述與崗位職責任職要求

職位描述:

職責描述:

1、負責數據倉庫的模型規(guī)劃設計工作;

2、負責數據倉庫etl規(guī)則設計、數據映射工作;

3、負責數據倉庫建設需求調研、業(yè)務溝通;

4、負責業(yè)務模型抽象和數據模型的設計開發(fā)。

任職要求:

1、計算機相關專業(yè)本科及以上學歷;

2、5年以上數據倉庫建模經驗;

3、熟悉etl、數據倉庫開發(fā)及相關技術,熟悉hive等主流數據庫技術,精通sql開發(fā)與優(yōu)化;

4、熟練掌握維度建模理論,有能力分析業(yè)務數據,完成數據倉庫模型設計;

5、有實時數據處理開發(fā)經驗(如flink/sparkstreaming/storm)優(yōu)先;

6、對apache kylin以及其他olap技術深入了解者優(yōu)先;

7、工作態(tài)度踏實認真、積極主動,可接受較高強度工作,具備良好的溝通能力和協調能力。

第13篇 dw數據倉庫etl工程師職位描述與崗位職責任職要求

職位描述:

職責描述:

1. 負責數據倉庫開發(fā)需求收集和分析;

2. 負責數據模型體系構建及數據主題設計和開發(fā);

3. 負責數據抽取、清洗、轉化等數據處理程序開發(fā);

4. 負責對公司數據倉庫平臺整體架構改進與流程優(yōu)化;

5. 負責bi報表開發(fā)和優(yōu)化。

任職資格:

1. 2年以上數據倉庫工作經驗;

2. 熟悉數據庫、etl、bi建模等工具;

3. 良好編程習慣,以及較強的學習能力和溝通能力。

第14篇 資深數據倉庫工程師職位描述與崗位職責任職要求

職位描述:

工作職責

1、基于公司數據建設需要,完成數據內容開發(fā)等工作,維護與完善數據模型各類信息;

2、負責各業(yè)務線系統的信息調研、表與字段的關系梳理,根據業(yè)務及日常需求來優(yōu)化模型;

3、工作中對數據平臺基礎設施、數據內容建設等工作主動深度思考,提升效能、促進組織和系統發(fā)展;

4、負責核心數據倉庫模型代碼開發(fā),跟進etl的完成。負責接入源系統數據的腳本開發(fā)、數據測試與驗證、以及調度開發(fā)等工作;

5、與上游系統與下游應用同事溝通協作,推動各類需求在數據模型中的落地;

6、跟蹤、監(jiān)測、維護及優(yōu)化數據模型,確保數據模型被使用。

任職資格

1、本科以上學歷,5年或以上金融行業(yè)數據類工作經驗;

2、熟悉hadoop生態(tài)系統組件,如:hive、mapreduce、spark、hbase等;具備編寫、優(yōu)化復雜sql的能力;

3、負責過大型數據平臺或數據倉庫設計,具有扎實的大數據和數據倉庫的理論功底;

4、掌握一定的數據質量管理方法論、評估模型設計、質量報表設計,能夠根據數據質量要求制定數據質量探查規(guī)則并進行實施;

5、掌握一定元數據管理方法論、元數據管理設計。

6、能夠圍繞業(yè)務和產品特征建模并解決問題;

7、具有豐富的數據實踐經驗;

8、基于公司數據建設需要,完成數據內容開發(fā)等工作,維護與完善數據模型各類信息。

第15篇 數據倉庫/etl/bi工程師職位描述與崗位職責任職要求

職位描述:

職責描述:

1、負責數據倉庫建模,業(yè)務數據集市建設開發(fā)

2、負責數據倉庫etl流程的優(yōu)化及解決etl相關技術問題、etl流程監(jiān)控,保障數據平臺架構穩(wěn)定性

3、建立數據分析指標體系,不斷完善指標體系和分析模型;

4、通過專項分析,輸出專項分析報告

5、負責數據分析相關需求和數據測試的工作

任職要求:

學歷要求:

全日制統考類本科及以上學歷,計算機、通信、電子、軟件工程、統計學、應用數學、數據分析等相關專業(yè)

專業(yè)技能:

1、熟悉數據倉庫各類模型建模理論,熟悉數據倉庫數據分層架構和多維數據模型設計;

2、豐富的數據分析經驗,熟練掌握sql、hql、sparksql,擅長運用其分析并完成復雜業(yè)務數據查詢

3、掌握至少一種數據庫開發(fā)技術:mysql/oracle/db2等,靈活運用sql實現海量數據etl加工處理;

4、熟悉hadoop生態(tài)(如:hdfs/mapreduce/hive/hbase等),并有相關實踐經驗;

5、熟練掌握一門或多門編程語言(如:python/shell/java/c++等),并有大型項目建設經驗者優(yōu)先;

素質:

1、敏銳的數據觀察和分析能力,及時發(fā)現和分析其中隱含的變化和問題并給出建議;

2、良好的溝通能力和團隊精神,較強的學習能力,能承擔一定的工作壓力。

經驗:

至少2年以上數據倉庫(離線&實時)模型設計開發(fā)、etl設計開發(fā)的相關經驗,有通信運營商o域/b域大數據、智慧城市大數據的數據倉庫、etl設計研發(fā)經驗者優(yōu)先'

第16篇 數據倉庫架構工程師崗位職責

數據倉庫架構師/etl工程師 同程藝龍 同程網絡科技股份有限公司,同程旅游,同程藝龍,同程 位職責:

1、負責數據倉庫數據采集、處理、存儲以及挖掘分析的架構實現,負責架構設計和指導團隊落地;

2、參與數據平臺建設,包括環(huán)境和框架的規(guī)劃搭建以及部分核心編碼工作;設計并實現對bi分析、數據產品開發(fā)、算法開發(fā)的系統性支持;

3、研究未來數據模型和計算框架的創(chuàng)新與落地,包括但不限于以下領域:大規(guī)模數據實時化、研發(fā)模式敏捷化、數據計算框架輕量化、數據模型組織方式業(yè)務化等方面。

職位要求:

1、具備5年以上dw系統建設經驗;了解數據倉庫建設過程中的挑戰(zhàn)與問題,有實際架構設計和數據建模經驗,有作為技術負責人系統化解決問題的成功案例;

2、有dw/bi架構體系中某些領域的專項建設經驗,包括但不限于:數據質量、元數據管理、主數據管理、數據監(jiān)控、流計算、分布式計算、分布式文件系統、分布式存儲、大規(guī)模數據實時化、跨平臺資源調度;

3、熟悉hadoop生態(tài)圈,包括但不限于:hadoop、hive、storm、spark、dremel、kylin等;

4、有海量數據建模實踐經驗優(yōu)先。

數據倉庫工程師崗位職責16篇

職位描述:工作職責:1、負責字節(jié)跳動旗下的用戶產品線的數據倉庫架構設計、建模和etl開發(fā);2、參與數據治理工作,提升數據易用性及數據質量,與數據工具團隊緊密合作;3、理解并合理抽象業(yè)務需求,發(fā)揮數據價值,與業(yè)務團隊緊密合作。任職要求:1、精通數據倉庫實施方法論、深入了解數據倉庫體系,并…
推薦度:
點擊下載文檔文檔為doc格式

相關數據倉庫信息

  • 數據倉庫工程師崗位職責16篇
  • 數據倉庫工程師崗位職責16篇95人關注

    職位描述:工作職責:1、負責字節(jié)跳動旗下的用戶產品線的數據倉庫架構設計、建模和etl開發(fā);2、參與數據治理工作,提升數據易用性及數據質量,與數據工具團隊緊密合作;3、理 ...[更多]

數據倉庫崗位職責專題

工程崗位職責熱門信息