ETL工程師崗位職責優(yōu)秀(通用13篇)
ETL工程師崗位職責優(yōu)秀 篇1
1、參與數(shù)據(jù)平臺相關應用項目的ETL設計、開發(fā)、維護工作;
2、參與ETL調(diào)度架構的開發(fā)優(yōu)化工作;
4、與團隊內(nèi)部以及需求部門進行有效溝通,跟進項目進度以及解決相關數(shù)據(jù)問題;
5、完成上級主管分配的工作任務,并達到公司制度規(guī)定的考核要求;
6、參與Informatica服務工作,包括Informatica性能調(diào)優(yōu),服務的安裝發(fā)布,及Informatica工具的相關培訓。
ETL工程師崗位職責優(yōu)秀 篇2
1、 參與數(shù)據(jù)平臺的定義,規(guī)劃,設計和項目監(jiān)督;
3、 與技術部和基礎設施團隊協(xié)助,完成數(shù)據(jù)倉庫的建設與推進;
4、 協(xié)助經(jīng)理從技術層面完成所有的技術實施架構,包括hadoop大數(shù)據(jù)平臺、數(shù)據(jù)倉庫、數(shù)據(jù)模型、etl、olap、報表平臺、元數(shù)據(jù)管理、主數(shù)據(jù)管理、分布式數(shù)據(jù)平臺等;
5、 參與建立和維護技術規(guī)范、流程、文檔,確保和項目需求保持同步;
6、 參與Informatica服務工作,包括Informatica性能調(diào)優(yōu),服務的安裝發(fā)布,及客戶現(xiàn)場培訓。
ETL工程師崗位職責優(yōu)秀 篇3
1.負責數(shù)據(jù)收集整理分析,對多種數(shù)據(jù)源進行深度分析,利用ETL工具或者開發(fā)程序完成數(shù)據(jù)抽取、清洗、轉(zhuǎn)換、裝載
2.負責ETL流程的優(yōu)化及解決ETL相關技術問題,開發(fā)Kettle處理插件并能根據(jù)業(yè)務需求修改Kettle源碼
ETL工程師崗位職責優(yōu)秀 篇4
職責:
1、參與數(shù)據(jù)倉庫建設,負責數(shù)據(jù)倉庫模型設計;
2、開發(fā)高質(zhì)量可擴展的底層數(shù)據(jù)倉庫體系;
3、負責數(shù)據(jù)倉庫系統(tǒng)與業(yè)務系統(tǒng)的接口設計和確認工作;
4、負責數(shù)據(jù)平臺相關的管理工作,如數(shù)據(jù)研發(fā)規(guī)范、數(shù)據(jù)質(zhì)量及穩(wěn)定性保證等建設;
5、參與公司各個業(yè)務線BI、數(shù)據(jù)產(chǎn)品與應用的數(shù)據(jù)研發(fā),發(fā)覺數(shù)據(jù)潛在價值。
崗位要求:
1.大學本科及以上學歷,計算機、經(jīng)濟、金融、數(shù)學專業(yè)背景,有3年以上工作經(jīng)驗;
2.熟悉數(shù)據(jù)倉庫建模理論,以及數(shù)倉數(shù)據(jù)層級關系,具備大型數(shù)倉邏輯模型和物理模型設計經(jīng)驗;
3.熟悉一種ETL開發(fā)工具(sqoop,datax等), 熟悉ETL開發(fā)實施流程和原理;
4.掌握CDH版的hadoop環(huán)境,掌握hiveQL,有調(diào)優(yōu)經(jīng)驗;
5.有一定的編程語言基礎,不限制于java,python,shell等;
6.有元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理工作經(jīng)驗的優(yōu)先考慮;
7.工作認真,負責,仔細,有良好的團隊合作精神。
ETL工程師崗位職責優(yōu)秀 篇5
職責:
1. 針對業(yè)務問題進行分析,深入了解業(yè)務需求,為業(yè)務部門提供數(shù)據(jù)支持;
2. 搭建業(yè)務分析模型或業(yè)務分析指標體系,統(tǒng)一數(shù)據(jù)指標分析口徑;
3. 參與報表需求調(diào)研和需求分析;
4. 參與報表開發(fā)工作;
5. 參與ELT相關的設計方案和開發(fā);
崗位要求
1.4年及以上BI開發(fā)經(jīng)驗;
2.熟悉數(shù)據(jù)倉庫建模理論,有建模經(jīng)驗;
3.熟悉掌握SQL語言嗎,熟悉PL/SQL編程,熟練掌握存儲過程開發(fā);
4.具有較強的業(yè)務理解能力,溝通能力;
5.熟悉常用ETL技術;
6.熟悉Hive、HBase、Spark等大數(shù)據(jù)者優(yōu)先;
ETL工程師崗位職責優(yōu)秀 篇6
職責:
1.參與傳統(tǒng)數(shù)倉和大數(shù)據(jù)數(shù)倉日常開發(fā)工作;
2.參與大數(shù)據(jù)倉庫設計、規(guī)劃和開發(fā);
3.參與日常工作的優(yōu)化,提出建設性意見;
4.負責管理項目,負責板塊內(nèi)的資源協(xié)調(diào)、進度管理、交付管理;
5.參與數(shù)據(jù)倉庫、數(shù)據(jù)集市體系架構的設計、規(guī)劃與開發(fā), 參與大數(shù)據(jù)、ETL開發(fā),sql性能優(yōu)化。
任職要求:
1.全日制本科,計算機等相關專業(yè)。3年以上數(shù)倉開發(fā)經(jīng)驗,有銀行、金融從業(yè)經(jīng)驗者優(yōu)先。
2.2年以上項目管理經(jīng)驗,具備PMP證書優(yōu)先.
3.熟悉oracle/hive/spark,熟悉數(shù)據(jù)處理和性能優(yōu)化,有UDF自定義函數(shù)、MR開發(fā)經(jīng)驗優(yōu)先;
4.熟悉常用ETL工具,熟悉常用的Linux指令,熟悉shell/python任意一種腳本語言。
ETL工程師崗位職責優(yōu)秀 篇7
職責:
1. 對信息化項目進行立項評估管理、跟蹤項目執(zhí)行進度與狀態(tài)、項目過程變更管理、評估信息化項目上線后的實際產(chǎn)出效果;
2. 對接業(yè)務部門,對信息化需求進行需求調(diào)研、整理、分析、原型設計、評估需求合理性可行性,提出系統(tǒng)解決方案;
3. 對信息系統(tǒng)建設進行優(yōu)先級及版本統(tǒng)一協(xié)調(diào)、規(guī)劃;
4. 與跨體系開發(fā)團隊、供應商對接需求、審核解決方案、管理項目/SR的執(zhí)行情況、推動項目/SR的落地;
5. 統(tǒng)籌、指導用戶完成驗收測試及系統(tǒng)上線切換工作;
6. 完善信息系統(tǒng)建設相關的流程規(guī)范、并推動流程規(guī)范的實施。
任 職 資 格
1. 精通需求分析的方法;
2. 具備對需求合理性準確的把握能力;
3. 具備2年及以上的開發(fā)經(jīng)驗;有3年以上的需求分析經(jīng)驗;
4. 具備良好的項目評估、項目管理經(jīng)驗;
5. 具備快速理解業(yè)務,以IT角度對業(yè)務進行抽象的能力,善于理解和溝通,邏輯思維能力好;
6. 對新技術感興趣,對新事物感興趣,把握新技術前沿應用;
7. 至少5年以上同類工作經(jīng)驗。
ETL工程師崗位職責優(yōu)秀 篇8
職責:
1、負責業(yè)務數(shù)據(jù)建模、數(shù)據(jù)分析及關鍵機器學習算法的設計與實現(xiàn)
2、編寫算法設計各階段的相關文檔,撰寫相關專利;
3、負責基于大數(shù)據(jù)平臺的相關算法實現(xiàn)及優(yōu)化
崗位要求:
1、本科學歷及以上,計算機、醫(yī)學統(tǒng)計或相關專業(yè)
2、數(shù)學基礎扎實,在數(shù)據(jù)挖掘、機器學習算法研究有較為豐富的知識積累和一定的實際項目經(jīng)驗。
3、熟悉大數(shù)據(jù)存儲與分析基礎理論和算法,有智能數(shù)據(jù)挖掘系統(tǒng)開發(fā)經(jīng)驗者優(yōu)先;
4、有醫(yī)療數(shù)據(jù)分析經(jīng)驗優(yōu)先
5、樂于接受挑戰(zhàn),學習能力強,勤奮肯干,有責任心
ETL工程師崗位職責優(yōu)秀 篇9
職責:
1.依據(jù)項目需求建構數(shù)據(jù)萃取與轉(zhuǎn)換流程
2.挖掘數(shù)據(jù)特征,進行數(shù)據(jù)和特征融合
3.搭建數(shù)學模型,并對模型進行檢驗評估
職位要求:
1、計算機、數(shù)學、統(tǒng)計、人工智能等相關專業(yè)的碩士或以上學歷;
2、二年以上數(shù)據(jù)挖掘、機器學習相關工作經(jīng)驗,熟悉python、spark、pandas、sklearn等數(shù)據(jù)分析工具者優(yōu)先;
3、熟練掌握貝葉斯、隨機森林、深度學習等機器學習算法;
4、突出的分析問題和解決問題能力,自我驅(qū)動,并且具備較強的學習能力、創(chuàng)新應用能力及溝通協(xié)調(diào)能力,有良好的團隊合作意識;
5、有國際背景或能熟練使用英文溝通者優(yōu)先
ETL工程師崗位職責優(yōu)秀 篇10
職責:
根據(jù)管理決策分析的需求,負責數(shù)據(jù)庫模型的設計,數(shù)據(jù)庫結構優(yōu)化及技術指導;
負責數(shù)據(jù)庫運維自動化方面的研究和踐行實施,確保數(shù)據(jù)庫的配置管理;
負責設計和優(yōu)化數(shù)據(jù)庫建設方案,參與系統(tǒng)架構的規(guī)劃、設計、實施;
負責數(shù)據(jù)庫系統(tǒng)運維流程、開發(fā)規(guī)范和安全策略的制定;
負責分析和管理數(shù)據(jù)庫的安全,監(jiān)控對數(shù)據(jù)庫的訪問;
負責數(shù)據(jù)庫備份與恢復策略制定,年度恢復演練的執(zhí)行;
履行上級主管授予的其它職責;
崗位要求:
本科及以上學歷,計算機或相關專業(yè),5年及以上數(shù)據(jù)庫運維的工作經(jīng)驗;
具備OCM證書或相當水平的資格認證。
精通數(shù)據(jù)庫性能調(diào)優(yōu),SQL優(yōu)化,服務器優(yōu)化;
熟悉Oracle、MySQL數(shù)據(jù)庫技術以及高可用系統(tǒng)的設計、配置和管理;
熟悉各種操作系統(tǒng)及各種平臺下主流數(shù)據(jù)庫系統(tǒng)的安裝與日常維護;
熟悉Linux操作系統(tǒng)管理與維護;
具有良好的客戶服務和團隊合作意識,有較強的責任感和執(zhí)行力;
具有較強的溝通表達、歸納總結的能力,良好的文檔撰寫能力;
具有較強的數(shù)據(jù)安全和保密意識;
ETL工程師崗位職責優(yōu)秀 篇11
1、熟悉CNC加工經(jīng)驗,能看懂三視圖;
2、有CNC架車、架機經(jīng)驗、了解3軸、4軸駕車內(nèi)容、注意事項及其原理;
3、熟悉法蘭克、兄弟、北京精雕等操作、調(diào)試系統(tǒng),了解CNC相關刀具加工特性佳;
4、熟練運用UG編程軟件、了解探針編程;
ETL工程師崗位職責優(yōu)秀 篇12
1.負責公司內(nèi)部員工電腦的技術支持(如解決網(wǎng)絡、系統(tǒng)及硬件故障、病毒查殺、辦公軟件排錯等)
2.負責公司各類終端機、打印機、掃描儀等外設的維護;
3.負責公司業(yè)務系統(tǒng)的維護及更新;
4.負責公司下屬門店IT設備的安裝、部署以及網(wǎng)絡的開通和調(diào)試;
ETL工程師崗位職責優(yōu)秀 篇13
職責:
1、參與數(shù)據(jù)ETL和數(shù)據(jù)倉庫治理;
2、參與大數(shù)據(jù)分析和挖掘,個性化推薦等系統(tǒng)的設計和開發(fā);
3、負責數(shù)據(jù)挖掘、自然語言處理及預測等相關模型、算法的設計與開發(fā);
4、參與BI等系統(tǒng)基礎數(shù)據(jù)支撐開發(fā);
5、參與用戶畫像、用戶行為評分、行業(yè)指數(shù)、銷售預測等功能模塊的開發(fā);
6、參與爬蟲等外部相關數(shù)據(jù)爬取。
任職要求:
1、熟悉概率論和統(tǒng)計方法;
2、掌握統(tǒng)計學習方法和機器學習算法者優(yōu)先;
3、掌握JAVA,理解MapReduce開發(fā)思維,能獨立開發(fā)分布式計算;熟悉Shell、R、MATLAB、Octive、Python等腳本語言或應用開發(fā)者優(yōu)先;
4、熟悉關系型數(shù)據(jù)庫MySQL等,了解NoSQL;
5、具備工程化思維,思考數(shù)據(jù)業(yè)務能夠全面謹慎;
6、具備快速學習的能力和業(yè)務理解力,對數(shù)據(jù)開發(fā)有濃厚的興趣,具備理解和整合算法的能力。