數(shù)據(jù)倉庫工程師的基本職責模板(精選16篇)
數(shù)據(jù)倉庫工程師的基本職責模板 篇1
職責:
1、 負責全平臺流量及業(yè)務(wù)數(shù)據(jù)開發(fā),參與數(shù)據(jù)模型體系構(gòu)建及數(shù)據(jù)主題設(shè)計,為BI數(shù)據(jù)報表提供底層數(shù)據(jù)支持;
2、 理解產(chǎn)品、業(yè)務(wù)人員的數(shù)據(jù)需求,提供OLAP、數(shù)據(jù)提取等數(shù)據(jù)服務(wù);
3、 參與數(shù)據(jù)倉庫模型設(shè)計,負責元數(shù)據(jù)建設(shè)、數(shù)據(jù)融合、多維度事實表及維表的數(shù)據(jù)倉庫開發(fā);
4、 參與項目ETL的設(shè)計、開發(fā)、調(diào)度、執(zhí)行、處理,進行模型性能及ETL流程調(diào)優(yōu);
任職要求:
1、大學本科及以上學歷,5年以上工作經(jīng)驗;
2、 熟悉ORACLE、MYSQL、SQL Server等主流數(shù)據(jù)庫,熟練使用Power designer、kettle、 Data service等數(shù)據(jù)倉庫及ETL工具,了解Dashboard、Smart BI、Power BI、Cognos等前端開發(fā)工具;
3、 熟悉Data Cube,并精通SQL,熟練使用Hive、Spark-SQL, python、Shell等進行數(shù)據(jù)開發(fā),具備開發(fā)復雜業(yè)務(wù)邏輯的數(shù)據(jù)處理及分析能力;
4、熟悉數(shù)據(jù)倉庫理論,掌握Kimball維度建模方法,有ETL開發(fā)和數(shù)倉模型設(shè)計經(jīng)驗;
5、有很強的自我驅(qū)動力,對開源技術(shù)非常感興趣并具有一定的研究能力;
數(shù)據(jù)倉庫工程師的基本職責模板 篇2
職責:
1.負責VIVO公司級的數(shù)據(jù)集市和數(shù)據(jù)倉庫的設(shè)計和開發(fā)
2.負責基于用戶行為的用戶標簽探索和開發(fā)
3.負責基于業(yè)務(wù)需求的數(shù)據(jù)中間層和可視化開發(fā)
4.負責各類分類和預測模型的開發(fā)
任職資格:
1.本科學歷,數(shù)統(tǒng)、計算機相關(guān)專業(yè)。
2.了解hadoop\spark生態(tài),有完整倉庫設(shè)計和開發(fā)經(jīng)驗。
3.精通hql調(diào)優(yōu),shell\python,熟練使用常規(guī)機器學習算法。
數(shù)據(jù)倉庫工程師的基本職責模板 篇3
職責:
1. 獨立完成ETL 需求分析、設(shè)計、開發(fā)及部署工作
2. 獨立完成BI分析報表等應(yīng)用的需求分析、模型設(shè)計、數(shù)據(jù)處理、報表開發(fā)等工作;
3. 配合開發(fā)經(jīng)理完成BI分析報表等項目的過程管理、元數(shù)據(jù)管理、質(zhì)量管理;
4. 完成實時大數(shù)據(jù)處理系統(tǒng)及批處理系統(tǒng)的架構(gòu)設(shè)計及實現(xiàn);
5、負責BI分析報表等應(yīng)用的系統(tǒng)部署及運維
任職要求:
1. 計算機相關(guān)專業(yè)本科及以上學歷,3年以上相關(guān)開發(fā)經(jīng)驗;
2. 精通主流關(guān)系型數(shù)據(jù)庫,精通SQL優(yōu)化、ETL問題定位,能夠從模型設(shè)計層面做ETL優(yōu)化;
3. 精通ETL架構(gòu)的設(shè)計,精通BI/DW,精通數(shù)據(jù)倉庫模型設(shè)計;
4. 熟悉Hadoop、Map/Reduce的原理,能夠選用合適的工具設(shè)計、編寫Hadoop的ETL程序;
5. 熟悉Shell/Perl/Python等腳本語言;
6. 熟悉kettle及sqoop; 精通元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量分析和處理設(shè)計。
數(shù)據(jù)倉庫工程師的基本職責模板 篇4
職責:
1、根據(jù)公司業(yè)務(wù)需求,構(gòu)建可擴展的數(shù)據(jù)倉庫,負責數(shù)據(jù)模型的規(guī)劃設(shè)計實現(xiàn)和優(yōu)化。
2、負責業(yè)務(wù)數(shù)據(jù)的采集,清洗,特征抽取。
3、負責ETL的維護工作,發(fā)現(xiàn)故障及時診斷、定位、分析和調(diào)試,保證數(shù)據(jù)準確、穩(wěn)定。
4、根據(jù)業(yè)務(wù)需要,提供面向業(yè)務(wù)的報表、數(shù)據(jù)提取等數(shù)據(jù)服務(wù)。
5、參與業(yè)務(wù)數(shù)據(jù)分析體系的數(shù)據(jù)統(tǒng)計、分析及建模。
任職資格:
1、 統(tǒng)招本科及以上學歷,三年以上數(shù)據(jù)倉庫、BI開發(fā)經(jīng)驗;至少兩年
2、熟練使用oracle、mysql、Postgres等關(guān)系型數(shù)據(jù)庫及Hive、Hbase、spark、impala等基于hadoop集群的組件、編寫優(yōu)秀的存儲過程、熟悉shell腳本語言,有良好的代碼習慣
3、 熟悉數(shù)據(jù)倉庫建設(shè)的流程及方法論、理解維度建模,有實際的模型設(shè)計經(jīng)驗及ETL相關(guān)開發(fā)經(jīng)驗;
4、 熟悉二種以上開源或商業(yè)的BI工具,有報表及可視化開發(fā)經(jīng)驗,熟悉帆軟開發(fā)優(yōu)先;
5、互聯(lián)網(wǎng)金融工作經(jīng)驗優(yōu)先,汽車金融行業(yè)經(jīng)驗優(yōu)先
5、 較強的邏輯思維能力和學習能力,對數(shù)據(jù)有敏銳的認知力,工作態(tài)度踏實、認真、積極主動,有良好的團隊協(xié)作能力、執(zhí)行力以及抗壓工作能力和心態(tài),樂于溝通交流和分享。
數(shù)據(jù)倉庫工程師的基本職責模板 篇5
職責:
1、負責公司大數(shù)據(jù)平臺建設(shè)、開發(fā)
2、依據(jù)業(yè)務(wù)需求,進行數(shù)據(jù)產(chǎn)品的規(guī)劃和設(shè)計開發(fā),為數(shù)據(jù)分析和運營等人員搭建友好高效的數(shù)據(jù)產(chǎn)品,如報表、BI系統(tǒng)等
3、協(xié)助對業(yè)務(wù)數(shù)據(jù)進行分析、建模,為業(yè)務(wù)部門的數(shù)據(jù)化運營提供支持
任職要求:
1、本科或以上學歷,2年以上大數(shù)據(jù)開發(fā)或數(shù)據(jù)倉庫或BI經(jīng)驗,熟練掌握Java或者Python開發(fā)語言
2、熟悉Hadoop或Hadoop生態(tài)圈相關(guān)技術(shù),如Hive、Spark等,或者大數(shù)據(jù)云服務(wù)技術(shù)。
3、對業(yè)務(wù)有敏銳的洞察力,有較強的業(yè)務(wù)理解與分析能力;
4、具備良好的團隊合作精神,有較好的溝通交流能力,善于主動思考和行動,樂于解決具有挑戰(zhàn)性的問題;
5、具有電商領(lǐng)域大數(shù)據(jù)開發(fā)、推薦系統(tǒng)研發(fā)經(jīng)驗的優(yōu)先考慮。
數(shù)據(jù)倉庫工程師的基本職責模板 篇6
職責:
1、根據(jù)業(yè)務(wù)需求負責數(shù)據(jù)庫存儲過程、包、觸發(fā)器的編寫、排錯、優(yōu)化;
2、配合開發(fā)人員對數(shù)據(jù)庫、表、數(shù)據(jù)字典進行分析與設(shè)計;
3、精通數(shù)據(jù)庫的規(guī)劃、安裝、備份、恢復,負責數(shù)據(jù)庫日常維護操作;
4、對數(shù)據(jù)庫進行性能監(jiān)控、分析、優(yōu)化、問題跟蹤及管理。
任職資格:
1、全日制本科及以上學歷;2年及以上Oracle開發(fā)、運維經(jīng)驗;
2、精通oracle的安裝配置,故障處理,備份恢復操作,能夠獨立完成數(shù)據(jù)庫日常管理和運維工作;
3、精通DataGuard、GoldenGate等Oracle高級技術(shù);
4、熟練掌握Linux,以CentOS,熟練掌握shell、python等編程語言;
5、較強的英文文檔閱讀和理解能力;
6、誠實穩(wěn)重,工作責任心強,溝通能力強優(yōu)先;
7、熟悉MySQL開發(fā)、運維、網(wǎng)絡(luò)的優(yōu)先。
數(shù)據(jù)倉庫工程師的基本職責模板 篇7
職責
1. 負責重點系統(tǒng)的數(shù)據(jù)庫設(shè)計、分析、開發(fā)與評審;
2. 負責為開發(fā)團隊提供數(shù)據(jù)庫技術(shù)支持、方案支持;
3. 負責數(shù)據(jù)庫日常維護、調(diào)優(yōu);
4. 負責公司整體數(shù)據(jù)運營規(guī)劃以及數(shù)據(jù)分析架構(gòu);
5. 組織產(chǎn)品數(shù)據(jù)采集、清洗、匯總和集成。
任職資格
1. 熟悉MySQL、SQL Server、Oracle等數(shù)據(jù)庫技術(shù);有存儲過程開發(fā)經(jīng)驗;
2. 有良好的敬業(yè)精神,喜愛數(shù)據(jù)庫開發(fā)與優(yōu)化,能承擔較高工作壓力。
3. 較強的學習能力,良好的團隊合作精神,穩(wěn)定、有責任心。
數(shù)據(jù)倉庫工程師的基本職責模板 篇8
1.1 建立電控硬件標準,包含:指定電控零件品牌、定義電控零件重要功能、制定應(yīng)用規(guī)范
1.2 建立電控設(shè)計標準,包含:電控設(shè)計輸出標準、PLC程序標準結(jié)構(gòu)、建立各類PLC標準功能模塊
1.3 建立軟件設(shè)計標準,包含:制定語言選用規(guī)范、程序標準結(jié)構(gòu)、建立標準功能模塊
1.4 建立嚴謹?shù)碾娍丶败浖夹g(shù)的審核、驗證流程,不斷提高審核及驗證標準,持續(xù)推動高質(zhì)量設(shè)計輸出
1.5 主導電控及軟件技術(shù)輸出的評審,負責電控及軟件設(shè)計輸出的最終批準
1.6 建設(shè)電控及軟件技術(shù)的人員技能識別、技能培訓提高體系
1.7 支持研發(fā)中心的各項自主技術(shù)研發(fā)、外部技術(shù)消化吸收,負責內(nèi)部推廣
1.8 支持電控部經(jīng)理提升團隊及工程師工作效率效果
數(shù)據(jù)倉庫工程師的基本職責模板 篇9
職責:
1、深入理解業(yè)務(wù),了解需求和痛點,為風控和業(yè)務(wù)部門提供數(shù)據(jù)支持;
2、針對業(yè)務(wù)需求,參與數(shù)據(jù)倉庫需求分析,制定ETL相關(guān)設(shè)計方案和開發(fā)計劃;
3、負責數(shù)據(jù)同步,數(shù)據(jù)整合清洗,以及數(shù)據(jù)質(zhì)量的治理;
4、數(shù)據(jù)倉庫模型設(shè)計,分層體系構(gòu)建,元數(shù)據(jù)管理監(jiān)控以及權(quán)限控制。
任職資格:
1、重點院校統(tǒng)招本科及以上學歷,計算機基礎(chǔ)扎實;
2、具有2年以上金融貸款類業(yè)務(wù)經(jīng)驗;
3、熟悉數(shù)據(jù)倉庫理論和數(shù)據(jù)庫建模,有redshift和AWS經(jīng)驗優(yōu)先;
4、精通pgsql/mysql等數(shù)據(jù)庫,精通sql語言,具有數(shù)據(jù)庫優(yōu)化/sql優(yōu)化相關(guān)經(jīng)驗;
5、熟練掌握python/shell語言。
數(shù)據(jù)倉庫工程師的基本職責模板 篇10
1.根據(jù)產(chǎn)品設(shè)計報告,根據(jù)開發(fā)進度與任務(wù)分配,開發(fā)控制器的硬件模塊;
2.根據(jù)設(shè)計說明書,設(shè)計詳細的原理圖和PCB圖;
3.測試或協(xié)助測試開發(fā)的硬件設(shè)備,并進行調(diào)試,確保其按設(shè)計要求正常運行;
4.編寫項目文檔、質(zhì)量記錄以及其他有關(guān)文檔,并協(xié)助完成相關(guān)產(chǎn)品認證工作;
5.維護管理或協(xié)助管理所開發(fā)的硬件,并做好產(chǎn)品變更工作;
數(shù)據(jù)倉庫工程師的基本職責模板 篇11
1、11-80GHz頻段天饋系統(tǒng)指標規(guī)劃與產(chǎn)品實現(xiàn);
2、11-80GHz頻段測向天線單元及監(jiān)測天線設(shè)計、仿真與產(chǎn)品實現(xiàn);
3、11-80GHz天線開關(guān)矩陣設(shè)計;
1、有5年以上微波天線設(shè)計開發(fā)工程經(jīng)驗;
2、具備良好的電磁場與電波傳播、天線原理的理論知識;
3、熟悉通信系統(tǒng)(尤其是接收系統(tǒng))工作原理和主要指標;
4、能夠熟練使用至少一種電磁場仿真軟件(如HFSS、CST等)
數(shù)據(jù)倉庫工程師的基本職責模板 篇12
職責:
1、負責海量科技數(shù)據(jù)(含文本數(shù)據(jù))的挖掘工作;
2、負責科技數(shù)據(jù)挖掘算法模型的構(gòu)建、應(yīng)用、評測、報告;
3、主持或參與海量科技數(shù)據(jù)的入庫工作,科技數(shù)據(jù)知識圖譜的構(gòu)建;
4、負責或參與數(shù)據(jù)挖掘成果論文、專利、標準的撰寫;
5、負責或參與制定數(shù)據(jù)加工清洗的方案,并形成操作手冊;
6、為指定的課題提出解決方案,并主持或參與方案實施;
7、完成安排的各項工作,與其他部門合作。
崗位要求:
1、數(shù)學、統(tǒng)計、金融、科技管理、計算機等相關(guān)專業(yè),博士學歷優(yōu)先;
2、具有2年及以上海量數(shù)據(jù)挖掘經(jīng)驗,有文本挖掘、非結(jié)構(gòu)化文本處理經(jīng)驗者優(yōu)先;
3、精通Matlab/Python/R/Scala之一,熟悉Java/C/C++等編程語言,熟練掌握Linux各項操作指令;
4、熟練掌握Hadoop/Spark/Storm/Kafka中的一項或幾項,有MPI經(jīng)驗者尚佳;
5、掌握機器學習的基本算法框架,有自然語言處理和豐富的特征工程(特征選擇/特征抽取)經(jīng)驗者優(yōu)先;
6、掌握關(guān)系型數(shù)據(jù)庫的基本操作,有圖形數(shù)據(jù)庫、其他非關(guān)系型數(shù)據(jù)庫經(jīng)驗者尚佳;
7、在醫(yī)療信息化從事產(chǎn)品開發(fā)工作者優(yōu)先,有頂會paper或人工智能領(lǐng)域國際比賽中獲獎?wù)邇?yōu)先;
8、有比較強的組織協(xié)調(diào)能力,可同時處理好多個任務(wù),具備一定的管理能力;
9、性格開朗,具有團隊精神;較強的溝通能力,能與相關(guān)業(yè)務(wù)和開發(fā)人員討論并快速理解需求。
數(shù)據(jù)倉庫工程師的基本職責模板 篇13
職責:
1、負責IBM/LENOVO/DELL/HP服務(wù)器的售后硬件維修、安裝。
2、windows/linux服務(wù)器OS的安裝、部署、配置與維護。
3、數(shù)據(jù)機房日常運維(設(shè)備巡檢、上架等)。
4、存儲設(shè)備的安裝、部署、配置、維護及日常運維工作等。
5、按照公司的要求進行客戶服務(wù),維護客戶滿意度及維修效率。
任職要求:
1、一年以上相關(guān)經(jīng)驗;25-35歲;
2、大;蛞陨蠈W歷;計算機相關(guān)專業(yè);
3、服務(wù)器英文技術(shù)文檔閱讀能力;
4、較強的學習能力、溝通協(xié)調(diào)能力、獨立分析問題和解決問題的能力;
5、有良好的服務(wù)和專業(yè)素質(zhì);
6、熟悉當前主流計算機及相關(guān)產(chǎn)品原理;掌握計算機硬件和軟件基礎(chǔ)知識;
7、動手能力較強 ,熟悉windows操作系統(tǒng)及l(fā)inux系統(tǒng);
8、有MCSE,CCNA,RHCE,MCP等相關(guān)證書者優(yōu)先考慮。
數(shù)據(jù)倉庫工程師的基本職責模板 篇14
職責:
1、負責公司與阿里巴巴在新行業(yè)方向(新金融、新零售、國內(nèi)外運營商)的產(chǎn)品研發(fā);
2、負責分析挖掘客戶/行業(yè)對大數(shù)據(jù)產(chǎn)品的需求(應(yīng)用場景),利用數(shù)據(jù)分析結(jié)論提升客戶業(yè)務(wù)能力。例如:文本挖掘,潛在客戶挖掘,用戶畫像,個性化推薦,用能預測等;
3、進行大數(shù)據(jù)場景下的數(shù)據(jù)統(tǒng)計、數(shù)據(jù)挖掘、機器學習、深度學習,包括數(shù)據(jù)整理、模型建立、模型應(yīng)用、評估優(yōu)化等;
4、將客戶需求準確轉(zhuǎn)化為可執(zhí)行的數(shù)學模型,針對不同的應(yīng)用場景,負責編寫數(shù)據(jù)挖掘算法及對其的優(yōu)化;
5、基于需求分析/運營支持/商業(yè)報告等成果,抽取典型用戶/客戶/行業(yè)/產(chǎn)品分析模型并與開發(fā)團隊溝通實施方案及構(gòu)建產(chǎn)品原型。
崗位要求:
1、本科以上學歷,扎實的機器學習、數(shù)據(jù)挖掘、統(tǒng)計學理論基礎(chǔ);有統(tǒng)計、應(yīng)用數(shù)學、金融等相關(guān)專業(yè)背景優(yōu)先;
2、精通常見機器學習算法(如邏輯回歸、SVM、神經(jīng)網(wǎng)絡(luò)、決策樹、貝葉斯等),有實際建模經(jīng)驗,掌握深度學習算法優(yōu)先;
3、具有扎實的計算機操作系統(tǒng)、數(shù)據(jù)結(jié)構(gòu)等編程基礎(chǔ),精通至少一門編程語言例如JAVA/python/R等;
4、熟悉Map-Reduce模型,對Hadoop、Spark、Storm等大規(guī)模數(shù)據(jù)存儲與運算平臺有實踐經(jīng)驗優(yōu)先。
數(shù)據(jù)倉庫工程師的基本職責模板 篇15
職責:
1.負責sql sever、Mysql數(shù)據(jù)庫集群的日常維護、監(jiān)測、備份、優(yōu)化及恢復;、
2.負責數(shù)據(jù)庫開發(fā)支持,熟悉sql語句編寫與調(diào)優(yōu),配合開發(fā)人員完成特殊需求如數(shù)據(jù)提取、數(shù)據(jù)修改及報表相關(guān)開發(fā);
3.負責業(yè)務(wù)系統(tǒng)上線支持,管理數(shù)據(jù)庫服務(wù)器高可用集群,保障服務(wù)穩(wěn)定7X24可用;對數(shù)據(jù)庫進行持續(xù)性能優(yōu)化;
4.負責排查數(shù)據(jù)庫故障,分析和解決疑難問題,提出預防方案;
5.協(xié)助完成系統(tǒng)SIT,UAT及上線驗收工作。
任職資格:
1.大專及以上學歷,兩年以上SQLSERVER、MySQL數(shù)據(jù)庫設(shè)計開發(fā)維護等相關(guān)經(jīng)驗;
2.熟悉關(guān)系型數(shù)據(jù)庫體系結(jié)構(gòu),精通sql語言、能編寫存儲過程、函數(shù)以及SQL語句;
3.有實際數(shù)據(jù)庫優(yōu)化經(jīng)驗;
4.對數(shù)據(jù)庫方向有濃厚興趣,愿意往深層次發(fā)展。
5.有良好的編程習慣,思路清晰,工作規(guī)范,有良好的溝通能力和學習能力,工作踏實,責任心強,有良好的團隊合作精神。
數(shù)據(jù)倉庫工程師的基本職責模板 篇16
職責
1、在遵守公司和部門規(guī)章制度的基礎(chǔ)上,按照工程服務(wù)流程、標準,獨立完成工程服務(wù)部門安排的工作任務(wù);
2、負責某證券行業(yè)IT數(shù)據(jù)中心的駐場技術(shù)工作,工作范圍為PC服務(wù)器及存儲的運行保障;
3、負責項目的現(xiàn)場組織、協(xié)調(diào)、實施、維護、客戶培訓、技術(shù)咨詢和支持服務(wù);
4、嚴格遵守業(yè)主方的規(guī)章制度及工作要求等。
任職資格:
1、二年以上PC服務(wù)器及企業(yè)級存儲系統(tǒng)集成相關(guān)經(jīng)驗,熟悉Linux,以及WINDOWS企業(yè)級操作系統(tǒng)環(huán)境;
2、熟悉SAN、NAS存儲系統(tǒng)、備份、容災(zāi)及虛擬化基礎(chǔ)知識,具備備份、容災(zāi)、虛擬化規(guī)劃、實施能力者優(yōu)先;
3、有大型企業(yè)數(shù)據(jù)中心相關(guān)運維經(jīng)驗者優(yōu)先;
4、熟悉網(wǎng)絡(luò)維護,華為、思科、H3C,具有華為HCIE認證優(yōu)先考慮。
5、具備良好的職業(yè)素養(yǎng),工作積極、主動,具有強烈的責任心和自學能力,能夠承受工作壓力和出差要求。