- 目錄
第1篇 etl工程師職位描述與崗位職責任職要求
職位描述:
職責描述:
1、負責數(shù)據(jù)分析、加工、清理、處理程序的開發(fā)
2、負責數(shù)據(jù)相關平臺的搭建、開發(fā)、維護、優(yōu)化
3、分布式平臺應用開發(fā)(hadoop/spark/hive/hbase)
4、開發(fā)數(shù)據(jù)統(tǒng)計系統(tǒng),各類統(tǒng)計程序報表。
任職要求:
1、2年以上java或python開發(fā)工作經(jīng)驗,java基礎扎實;
2、熟悉常見在線與離線大數(shù)據(jù)系統(tǒng), 如hive, hbase, es, kafka等的工作原理與開發(fā)調(diào)優(yōu); 具有mapreduce開發(fā)經(jīng)驗,有實際大數(shù)據(jù)項目經(jīng)驗;
3、熟練掌握oracle、mysql等主流數(shù)據(jù)庫上的開發(fā);
4、具有良好的溝通能力、組織能力及團隊協(xié)作精神,有較強的分析和解決問題的能力.
第2篇 etl工程師(中級數(shù)據(jù)倉庫工程師)職位描述與崗位職責任職要求
職位描述:
職責描述:
1、 負責數(shù)據(jù)倉庫建模和etl技術工作,參與數(shù)據(jù)項目各類數(shù)據(jù)源etl的接口設計和文檔、流程規(guī)范;
2、負責項目中數(shù)據(jù)清洗、數(shù)據(jù)處理、數(shù)據(jù)校驗相關開發(fā)工作;
3. 配合使用主流數(shù)據(jù)挖掘工具、etl工具、bi展現(xiàn)的設計和開發(fā);
4、 能夠按照公司全面質(zhì)量管理的要求,高質(zhì)量地完成各類技術支持工作。
任職要求:
1.計算機相關專業(yè)本科以上學歷,3年以上工作經(jīng)驗;
2.熟悉etl開發(fā)、數(shù)據(jù)倉庫設計流程,熟悉mysql、oracle, ms sql server等主流數(shù)據(jù)庫,表結構設計,存儲過程編寫;
3.有一定的sql調(diào)優(yōu)知識和經(jīng)驗,具有bi相關知識;
4.有hana、hive經(jīng)驗優(yōu)先;
5.具備財務基礎知識或者erp基礎知識者優(yōu)先;
第3篇 高級/資深etl工程師職位描述與崗位職責任職要求
職位描述:
崗位職能:
1. 基于公司數(shù)據(jù)建設需要,完成數(shù)據(jù)平臺構建、數(shù)據(jù)內(nèi)容開發(fā)等工作。包括:數(shù)據(jù)平臺基礎設施建設、數(shù)據(jù)采集、etl、數(shù)倉及數(shù)據(jù)集市、數(shù)據(jù)應用產(chǎn)品等開發(fā)工作;
2. 充分理解需求文檔,基于此進行自測,交付高質(zhì)量的開發(fā)代碼和數(shù)據(jù)內(nèi)容;
3. 工作中對數(shù)據(jù)平臺基礎設施、數(shù)據(jù)內(nèi)容建設等工作主動深度思考,提升效能并積極建言、促進組織和系統(tǒng)發(fā)展;
4. 其他根據(jù)部門需要安排事宜;
崗位要求:
1. 信息技術類、數(shù)學、統(tǒng)計學、計量經(jīng)濟學類專業(yè),研究生及以上學歷。優(yōu)秀候選人學歷可以放寬至本科,工作年限5年以上;
2. 熟悉數(shù)據(jù)倉庫模型設計和精通etl開發(fā)經(jīng)驗 ,掌握3nf,kimball的維度建模設計方法,具備海量數(shù)據(jù)加工處理(etl)相關經(jīng)驗 ;
3. 掌握至少一種數(shù)據(jù)庫開發(fā)技術:oracle、teradata、db2、mysql等,精通并靈活運用sql實現(xiàn)海量數(shù)據(jù)etl加工處理 ;
4. 熟悉linu_系統(tǒng)常規(guī)shell處理命令,靈活運用shell做的文本處理和系統(tǒng)操作 ;
5. 有從事分布式數(shù)據(jù)存儲與計算平臺應用開發(fā)經(jīng)驗,熟悉hadoop生態(tài)相關技術并有相關實踐經(jīng)驗著優(yōu)先,重點考察hdfs、hive(hql)、hbase ;
6. 熟練掌握一門或多門編程語言,并有大型項目建設經(jīng)驗者優(yōu)先,重點考察python、perl、java ;
7. 熟悉數(shù)據(jù)倉庫領域知識和技能者優(yōu)先,包括但不局限于:數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量等;
8. 良好的語言溝通與表達能力和自我驅(qū)動動力。
第4篇 大數(shù)據(jù)etl工程師職位描述與崗位職責任職要求
職位描述:
崗位職責:
負責etl設計、模型設計、開發(fā)、技術支持等工作,并保證數(shù)據(jù)安全、及時、穩(wěn)定、可恢復
任職要求:
1、3年及以上數(shù)據(jù)處理(etl)開發(fā)經(jīng)驗,能獨立完成數(shù)據(jù)處理開發(fā)工作
2、熟悉mysql/oracle等標準數(shù)據(jù)庫,熟練上述數(shù)據(jù)庫的開發(fā)
3、有hadoop和hivesql的使用經(jīng)驗
4、熟悉etl設計,熟悉數(shù)據(jù)倉庫的架構、開發(fā)規(guī)范和流程
5、熟悉至少一種etl開發(fā)工具,如datastage,informatica, kettle等
6、具備數(shù)據(jù)倉庫實施經(jīng)驗者優(yōu)先
福利待遇:
試用期全額工資、六險一金、體檢、年假、節(jié)假日禮品等
第5篇 高級etl工程師職位描述與崗位職責任職要求
職位描述:
1、負責公司數(shù)據(jù)平臺項目的etl設計、實現(xiàn)以及優(yōu)化。
2、負責etl流程優(yōu)化,關鍵問題解決、團隊技術與引導和前瞻性技術研究;
3、參與數(shù)據(jù)倉庫數(shù)據(jù)模型設計,進行數(shù)據(jù)質(zhì)量監(jiān)測、校驗和提升;
4、使用etl技術對醫(yī)院信息系統(tǒng)數(shù)據(jù)進行提取、清洗、轉(zhuǎn)換和整合;
崗位要求:
1、至少三年以上etl數(shù)據(jù)開發(fā)經(jīng)驗;計算機相關專業(yè)本科以上學歷,熟悉數(shù)據(jù)分析與數(shù)據(jù)挖掘理論;
2、熟悉dw實施方法論和常規(guī)etl構架,有整體etl開發(fā)經(jīng)驗,深刻理解元數(shù)據(jù)管理;
3、熟練掌握oracle、sql server、mysql、postgresql等至少兩種主流數(shù)據(jù)庫的使用;
4、熟練掌握ssis、kettle、informatica等至少一種etl工具的使用;
5、精通sql、存儲過程、函數(shù)的使用,具備編寫、優(yōu)化復雜sql的能力;
6、對數(shù)字,數(shù)據(jù)敏感,具備良好的邏輯思維能力;
7、具備專業(yè)的業(yè)務研究、分析能力,能夠獨立開展業(yè)務調(diào)研、數(shù)據(jù)分析、數(shù)據(jù)建模、報告編寫工作;
8、有醫(yī)療衛(wèi)生數(shù)據(jù)平臺開發(fā)、實施經(jīng)驗優(yōu)先;
9、能適應長期出差。
第6篇 etl工程師 - 銀行監(jiān)管報表職位描述與崗位職責任職要求
職位描述:
職責描述:
overview
we are a leading provider of collateral management and regulatory compliance software solutions to banks and financial institutions on a worldwide basis. we are currently seeking a consultant, to be based in our singapore office to be responsible for providing consultancy to our clients in relation to their regulatory reporting requirements for the monetary authority of singapore.
main role & responsibilities
?be part of the specialist team which provide regulatory subject matter e_pertise to clients
?keep abreast of any regulatory changes advised by the regulator
?support the senior consultant at client workshops to identify data requirements and how they map to the agile reporter data model.
?use etl tool to map and transform client data such as to satisfy the project scope and specification within the timetable set by and agreed with the project manager/senior consultant.
?report to the project manager/senior consultant any delays or e_pected delays to a project, whether due to internal or customer delays, and in particular to highlight any potential scheduling conflicts that could result in such a delay.
?perform product testing as requested by the line manager to be completed within the deadlines set.
任職要求:
?degree level
?2+ years e_perience in etl/bi
?e_perience with rdbms software (e.g. sql server, oracle)
?previous e_perience of the implementation of major regulatory changes is a plus
?basic knowledge of hkma, mas or apra reporting is a plus
languages
?english
?chinese (mandarin)
第7篇 etl工程師崗位職責職位要求
職責描述:
崗位職責:
1、根據(jù)概要設計,進行詳細設計的文檔編寫;
2、負責etl過程的設計/開發(fā)實施、單元測試;
3、負責項目中etl相關需求調(diào)研、源數(shù)據(jù)調(diào)研、整體設計;
4、負責項目中環(huán)境安裝及配置。
5、維護和升級現(xiàn)有etl任務和存儲過程,快速定位并修復現(xiàn)有系統(tǒng)缺陷
職位要求:
1、 大專及以上學歷,計算機相關專業(yè),3年以上 etl 工作經(jīng)驗。
2、 熟悉etl開發(fā)流程,有hadoop和etl工作經(jīng)驗;有從傳統(tǒng)數(shù)據(jù)庫抽取數(shù)據(jù)到hive數(shù)據(jù)倉庫經(jīng)驗,了解sqoop應用原理者優(yōu)先。
3、 熟悉主流數(shù)據(jù)庫sql server、oracle、db2、mysql等;熟悉開源的etl工具。
4、有海量數(shù)據(jù)處理工作經(jīng)驗,數(shù)據(jù)分析和挖掘經(jīng)驗者優(yōu)先;
5、做過數(shù)據(jù)倉庫、ods項目,對數(shù)據(jù)治理、數(shù)據(jù)標準及元數(shù)據(jù)有很好理念及實施經(jīng)驗的優(yōu)先;
6、熟練使用腳本語言:如perl、python、shell等任意一種以上;
7、熟悉linu_系統(tǒng)指令和性能優(yōu)化;
8、善于學習新技術,對新技術有較強的接受能力;工作認真細致,愿意于人交流溝通。
9、有大型數(shù)據(jù)倉庫系統(tǒng)研發(fā)、設計經(jīng)驗者優(yōu)先;
10、熟悉 java 語言或 hadoop 技術者優(yōu)先;
崗位要求:
學歷要求:大專
語言要求:不限
年齡要求:不限
工作年限:3-4年經(jīng)驗
第8篇 dw數(shù)據(jù)倉庫etl工程師職位描述與崗位職責任職要求
職位描述:
職責描述:
1. 負責數(shù)據(jù)倉庫開發(fā)需求收集和分析;
2. 負責數(shù)據(jù)模型體系構建及數(shù)據(jù)主題設計和開發(fā);
3. 負責數(shù)據(jù)抽取、清洗、轉(zhuǎn)化等數(shù)據(jù)處理程序開發(fā);
4. 負責對公司數(shù)據(jù)倉庫平臺整體架構改進與流程優(yōu)化;
5. 負責bi報表開發(fā)和優(yōu)化。
任職資格:
1. 2年以上數(shù)據(jù)倉庫工作經(jīng)驗;
2. 熟悉數(shù)據(jù)庫、etl、bi建模等工具;
3. 良好編程習慣,以及較強的學習能力和溝通能力。