數(shù)據(jù)倉庫工程師的具體職責(zé)文本(精選16篇)
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇1
職責(zé):
1、學(xué)習(xí)并理解勵步云學(xué)業(yè)務(wù)及系統(tǒng),根據(jù)業(yè)務(wù)部門需求對公司各項業(yè)務(wù)數(shù)據(jù)進(jìn)行統(tǒng)計分析,出具相關(guān)報表;
2、進(jìn)行數(shù)據(jù)倉庫設(shè)計、模型開發(fā)、數(shù)據(jù)質(zhì)量校驗,報表開發(fā);
3、進(jìn)行數(shù)據(jù)差異分析,找出統(tǒng)計口徑、數(shù)據(jù)錯誤、操作錯誤等造成的差異原因;
4、進(jìn)行數(shù)據(jù)查詢優(yōu)化,解決跑數(shù)性能問題。
任職資格:
1、本科以上學(xué)歷,數(shù)學(xué)、統(tǒng)計、計算機(jī)相關(guān)專業(yè)優(yōu)先;
2、3年以上互聯(lián)網(wǎng)相關(guān)行業(yè)數(shù)據(jù)開發(fā)經(jīng)驗;
3、精通數(shù)據(jù)倉庫建設(shè)思路,并有相關(guān)實施經(jīng)驗,特別是通用匯總層建設(shè)經(jīng)驗;
4、較強(qiáng)的數(shù)據(jù)開發(fā)能力,熟悉Hadoop相關(guān)技術(shù),深刻理解MapReduce原理和過程;
5、精通Hive SQL,進(jìn)行數(shù)據(jù)處理及模型開發(fā);
6、有較強(qiáng)的學(xué)習(xí)能力,能快速學(xué)習(xí)和理解業(yè)務(wù)知識及數(shù)據(jù)需求;
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇2
職責(zé):
1、負(fù)責(zé)數(shù)據(jù)倉庫(HADOOP)ETL工作以及數(shù)據(jù)運營;
2、負(fù)責(zé)數(shù)據(jù)產(chǎn)品的業(yè)務(wù)需求梳理、數(shù)據(jù)開發(fā)以及維護(hù);
3、負(fù)責(zé)數(shù)據(jù)倉庫的維度建模以及設(shè)計相關(guān)的腳本調(diào)度;
4、負(fù)責(zé)維度模型的數(shù)據(jù)處理的腳本開發(fā),程序開發(fā)以及接口對接。
職位要求:
1. 本科以上學(xué)歷,信息管理、計算機(jī)相關(guān)專業(yè),兩年以上ETL、數(shù)據(jù)倉庫和大數(shù)據(jù)相關(guān)經(jīng)驗;
2. 熟悉數(shù)據(jù)倉庫架構(gòu),了解HADOOP等大數(shù)據(jù)平臺;
3. 有ORACLE\DB2等大型的數(shù)據(jù)倉庫的開發(fā)經(jīng)驗;
4. 能夠用HIVE的SQL,HADOOP的MAPREDUCE和SPARK去處理數(shù)據(jù);
5. 熟悉關(guān)系數(shù)據(jù)庫,并有HIVE的SQL的開發(fā)經(jīng)驗;
6. 熟悉Linux的shell編程;
7. 有銀行和運營商相關(guān)的大數(shù)據(jù)或者數(shù)據(jù)倉庫相關(guān)經(jīng)驗的優(yōu)先
8. 熱愛技術(shù)工作,具有較強(qiáng)的團(tuán)隊協(xié)作意識,數(shù)據(jù)安全意識;
9. 工作嚴(yán)謹(jǐn)、責(zé)任心強(qiáng),能承受工作壓力。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇3
職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)平臺搭建及數(shù)據(jù)倉庫建模;
2、負(fù)責(zé)數(shù)據(jù)庫管理及數(shù)據(jù)優(yōu)化;
3、利用大數(shù)據(jù)相關(guān)技術(shù)實現(xiàn)對數(shù)據(jù)的分析、挖掘、處理、及數(shù)據(jù)可視化等相關(guān)工作;
4、維護(hù)大數(shù)據(jù)平臺并能解決相關(guān)問題, 保障平臺正常運行;
5、學(xué)習(xí)和研究新技術(shù)以滿足系統(tǒng)需求。
任職資格:
1、本科及以上學(xué)歷,計算機(jī)、通信等相關(guān)專業(yè);
2、有相關(guān)工作經(jīng)驗者優(yōu)先;
3、對互聯(lián)網(wǎng)產(chǎn)品有見解,關(guān)注前沿技術(shù),有較強(qiáng)的學(xué)習(xí)能力、分析能力和動手能力;
4、熟悉Linux操作系統(tǒng)及ORACLE、MySQL及MongoDB等數(shù)據(jù)庫,了解SQL優(yōu)化,熟悉ER模型和相關(guān)數(shù)據(jù)建模技術(shù),能夠熟練使用Java或Python、SHELL;
5、熟悉Hadoop的體系架構(gòu)和運行原理,有大數(shù)據(jù)處理方面經(jīng)驗
6、具有大型數(shù)據(jù)倉庫和ETL開發(fā)、HIVE經(jīng)驗優(yōu)先
7、個性樂觀開朗,溝通能力強(qiáng),具備良好的團(tuán)隊協(xié)作精神,能利用自身技術(shù)能力提升團(tuán)隊整體研發(fā)效率。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇4
Responsibility
1、負(fù)責(zé)建設(shè)數(shù)據(jù)倉庫架構(gòu),包括元數(shù)據(jù)管理、ETL調(diào)度、數(shù)據(jù)集成、OLAP等子系統(tǒng)的設(shè)計和開發(fā);
2、制定和推廣數(shù)據(jù)字典,建立完善的元數(shù)據(jù)管理規(guī)范,負(fù)責(zé)數(shù)據(jù)質(zhì)量監(jiān)控設(shè)計;
3、搭建和維護(hù)數(shù)據(jù)倉庫表,解決業(yè)務(wù)人員在倉庫系統(tǒng)流程、工具使用、數(shù)據(jù)處理等遇到的問題;
4、深入了解網(wǎng)易游戲、CC直播、藏寶閣、網(wǎng)易大神等業(yè)務(wù),負(fù)責(zé)數(shù)據(jù)倉庫和其它業(yè)務(wù)系統(tǒng)接口。
5、基于對數(shù)據(jù)的理解和業(yè)務(wù)需求,對數(shù)據(jù)進(jìn)行整理、分析和用戶畫像搭建。
Requirements
1、計算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷,有2年以上數(shù)據(jù)倉庫、ETL工作經(jīng)驗;
2、熟悉SQL、Shell等相關(guān)技術(shù),有海量數(shù)據(jù)處理、ETL及任務(wù)調(diào)度優(yōu)化、數(shù)據(jù)倉庫建模等經(jīng)驗;
3、熟悉Linux環(huán)境,了解Java/Python服務(wù)端系統(tǒng)開發(fā);
4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大數(shù)據(jù)技術(shù)者優(yōu)先;
5、邏輯清晰、對數(shù)據(jù)敏感,良好的溝通能力和協(xié)作能力,敢于接受挑戰(zhàn),能夠承受壓力;
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇5
職責(zé):
1、參與數(shù)據(jù)倉庫建設(shè),負(fù)責(zé)數(shù)據(jù)倉庫模型設(shè)計;
2、開發(fā)高質(zhì)量可擴(kuò)展的底層數(shù)據(jù)倉庫體系;
3、負(fù)責(zé)數(shù)據(jù)倉庫系統(tǒng)與業(yè)務(wù)系統(tǒng)的接口設(shè)計和確認(rèn)工作;
4、負(fù)責(zé)數(shù)據(jù)平臺相關(guān)的管理工作,如數(shù)據(jù)研發(fā)規(guī)范、數(shù)據(jù)質(zhì)量及穩(wěn)定性保證等建設(shè);
5、參與公司各個業(yè)務(wù)線BI、數(shù)據(jù)產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā),發(fā)覺數(shù)據(jù)潛在價值。
崗位要求:
1.大學(xué)本科及以上學(xué)歷,計算機(jī)、經(jīng)濟(jì)、金融、數(shù)學(xué)專業(yè)背景,有3年以上工作經(jīng)驗;
2.熟悉數(shù)據(jù)倉庫建模理論,以及數(shù)倉數(shù)據(jù)層級關(guān)系,具備大型數(shù)倉邏輯模型和物理模型設(shè)計經(jīng)驗;
3.熟悉一種ETL開發(fā)工具(sqoop,datax等), 熟悉ETL開發(fā)實施流程和原理;
4.掌握CDH版的hadoop環(huán)境,掌握hiveQL,有調(diào)優(yōu)經(jīng)驗;
5.有一定的編程語言基礎(chǔ),不限制于java,python,shell等;
6.有元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理工作經(jīng)驗的優(yōu)先考慮;
7.工作認(rèn)真,負(fù)責(zé),仔細(xì),有良好的團(tuán)隊合作精神。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇6
職責(zé):
1. 利用數(shù)據(jù)倉庫建模及相關(guān)技術(shù),參與數(shù)據(jù)倉庫模型的設(shè)計。
2. 參與企業(yè)級大數(shù)據(jù)倉庫項目的落地開發(fā)。
3. 參與企業(yè)級主數(shù)據(jù)管理項目的實施落地。
4. 利用hadoop生態(tài)相關(guān)技術(shù),負(fù)責(zé)大數(shù)據(jù)中心的數(shù)據(jù)處理流程,包括數(shù)據(jù)清洗、融合、統(tǒng)計、挖掘等。
任職要求
1. 熟悉數(shù)據(jù)倉庫產(chǎn)品,對數(shù)據(jù)處理、維度建模、數(shù)據(jù)分析等有深刻認(rèn)識,具備數(shù)據(jù)倉庫架構(gòu)設(shè)計、模型設(shè)計、ETL設(shè)計的相關(guān)經(jīng)驗、熟悉數(shù)據(jù)倉庫架構(gòu),熟悉數(shù)據(jù)倉庫項目的實施流程,有一個以上企業(yè)級數(shù)據(jù)倉庫項目設(shè)計經(jīng)驗者優(yōu)先;
2. 熟悉數(shù)據(jù)治理及主數(shù)據(jù)管理的理論知識,掌握主數(shù)據(jù)管理項目的實施方法和落地過程,至少參與過一個主數(shù)據(jù)管理項目的實施落地。
3. 精通JAVA、Python等編程語言;精通Oracle、Mysql等主流數(shù)據(jù)庫,精通SQL;
4. 具備基于Hadoop大數(shù)據(jù)平臺開發(fā)經(jīng)驗,熟悉hadoop生態(tài)體系,熟悉Hadoop、Hbase、Hive,Spark,Impala等常用組件,進(jìn)行常用的ETL開發(fā)工作;
5. 熟悉常用的數(shù)據(jù)分析及數(shù)據(jù)挖掘方法及實現(xiàn);
6. 具備較強(qiáng)的代碼能力,有較強(qiáng)的數(shù)據(jù)分析能力;具備優(yōu)秀的溝通能力、學(xué)習(xí)能力;
7. 相關(guān)專業(yè)碩士以上學(xué)歷,或本科學(xué)歷相關(guān)工作經(jīng)驗超過2年,具有智能制造領(lǐng)域相關(guān)經(jīng)驗或背景者優(yōu)先,能力突出者可適當(dāng)放寬要求。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇7
1. 負(fù)責(zé)部分化驗設(shè)備的周期內(nèi)部比對,收集比對數(shù)據(jù),數(shù)據(jù)有異常波動時及時采取措施予以解決一般性故障,并告知部門領(lǐng)導(dǎo)。
2. 負(fù)責(zé)樣品的收集管理登記和對外樣品的遞送、打包、郵寄。
3. 負(fù)責(zé)出口COA的制作和傳遞。
4. 負(fù)責(zé)對本部門內(nèi)檢驗崗位進(jìn)行測試比對,統(tǒng)一并矯正各駐廠檢驗室檢測標(biāo)準(zhǔn);做好與上海AT化驗數(shù)據(jù)的比對測試。
5. 協(xié)助做好化驗設(shè)備維修保養(yǎng)和定期周檢工作,按要求維修保養(yǎng)、周檢和送檢。
6. 每月匯總和打印成品、原材料分析月報,統(tǒng)計原材料得分表。
7. 做好公司組織試驗部分?jǐn)?shù)據(jù)的輸入與傳遞.。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇8
職責(zé):
1. 維護(hù)數(shù)據(jù)庫穩(wěn)定運行,持續(xù)發(fā)現(xiàn)和解決潛在的問題;
2. 負(fù)責(zé)數(shù)據(jù)庫的性能優(yōu)化,使用新技術(shù)和新架構(gòu)滿足日益增長的業(yè)務(wù)需求;
3. 負(fù)責(zé)數(shù)據(jù)庫的監(jiān)控系統(tǒng)設(shè)計,為開發(fā)團(tuán)隊提供平臺支持;
4. 負(fù)責(zé)數(shù)據(jù)庫的運維方面的相關(guān)工作,包括數(shù)據(jù)庫的安裝部署、壓力測試、備份恢復(fù)、知識庫管理等
5. 負(fù)責(zé)數(shù)據(jù)庫進(jìn)行容量規(guī)劃、架構(gòu)設(shè)計,提高業(yè)務(wù)高可用性和容災(zāi)能力;
6. 負(fù)責(zé)數(shù)據(jù)庫相關(guān)工作的整體規(guī)劃,提供決策建議。
任職要求:
1. 計算機(jī)相關(guān)專業(yè)本科及以上,具有3年以上DB2數(shù)據(jù)庫DBA經(jīng)驗;
2. 精通DB2數(shù)據(jù)庫體系結(jié)構(gòu)和工作原理,有高可用架構(gòu)規(guī)劃設(shè)計經(jīng)驗優(yōu)先;
3. 熟悉MySQL數(shù)據(jù)庫體系結(jié)構(gòu)和工作原理,有高可用架構(gòu)規(guī)劃設(shè)計經(jīng)驗優(yōu)先;
4. 熟悉TSM的運維管理,并熟悉基于TSM的數(shù)據(jù)備份和恢復(fù);
5. 熟悉V5000、V7000等存儲的運維管理;
6. 熟悉數(shù)據(jù)庫的性能優(yōu)化、SQL調(diào)優(yōu)技術(shù),對高并發(fā)數(shù)據(jù)庫的鎖和事務(wù)隔離問題有深入理解;
7. 熟悉數(shù)據(jù)庫容量規(guī)劃和分表設(shè)計方法,有海量數(shù)據(jù)庫設(shè)計和支持經(jīng)驗優(yōu)先;
8. 熟悉常用的數(shù)據(jù)庫備份方法;
9. 精通腳本語言,并至少能用Shell,Perl,Python等中的一種進(jìn)行快速開發(fā)。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇9
1、勘測、研究規(guī)劃道路的線路位置;
2、研究確定道路沿線的生態(tài)環(huán)境系統(tǒng)和景觀保護(hù)系統(tǒng),預(yù)防洪水、泥石流、沙災(zāi)等災(zāi)難破壞道路建設(shè);
3、勘測、規(guī)劃、設(shè)計沿線的橋梁、隧道、涵洞的施工位置;
4、設(shè)計制定道路、橋梁、隧道、涵洞的施工規(guī)范和安全操作流程;
5、設(shè)計、計算橋梁、涵洞、隧道的結(jié)構(gòu)并進(jìn)行施工設(shè)計;
6、制定施工方案、施工進(jìn)度計劃、施工材料及設(shè)備清單,核算施工成本;
7、管理道路施工現(xiàn)場,審核施工質(zhì)量、監(jiān)督施工進(jìn)度,解決施工技術(shù)難題。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇10
職責(zé):
1、根據(jù)業(yè)務(wù)部門需求進(jìn)行數(shù)據(jù)的處理、分析、導(dǎo)出和日常維護(hù);
2、結(jié)合公司的業(yè)務(wù),進(jìn)行一些自動化數(shù)據(jù)處理腳本的開發(fā);
3、完成相關(guān)文檔的編寫。
職位要求:
1、熟練掌握SQL語句,能夠運用SQL進(jìn)行各種數(shù)據(jù)處理;
2. 熟悉Postgresql、Mysql、Oracle、HIVE 或其他數(shù)據(jù)庫中的一項或幾項;
3、熟悉shell或python編程,能夠用腳本進(jìn)行數(shù)據(jù)自動化數(shù)據(jù)處理;
4、具有良好的溝通能力和業(yè)務(wù)理解能力;
5、有過kettle,powercenter等ETL經(jīng)驗加分;
6、有數(shù)據(jù)挖掘分析能力加分。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇11
職責(zé):
1、負(fù)責(zé)公司服務(wù)器日常維護(hù)及監(jiān)控,提供系統(tǒng)功能方面的服務(wù)和支持。
2、負(fù)責(zé)機(jī)房巡檢及相關(guān)故障、疑難問題排查處理;
3、負(fù)責(zé)公司辦公電腦軟硬件及其外設(shè)日常維護(hù);
任職資格:
1、熟悉微軟windows系列操作系統(tǒng),熟悉Windows Server產(chǎn)品,有域控管理經(jīng)驗;
2、熟練掌握VMware虛擬化軟件的使用,有虛擬主機(jī)維護(hù)經(jīng)驗者優(yōu)先;
3、熟悉EXchange server 郵件產(chǎn)品,有相關(guān)的安裝配置經(jīng)驗;
4、能夠熟練使用常用的服務(wù)器系統(tǒng)監(jiān)控軟件等;
5、熟悉計算機(jī)硬件、windows操作系統(tǒng)及應(yīng)用軟件日常故障排除;
6、工作認(rèn)真、仔細(xì),有強(qiáng)烈的責(zé)任感和良好的溝通能力;
7、?萍耙陨蠈W(xué)歷,1年以上相關(guān)工作經(jīng)驗,計算機(jī)相關(guān)專業(yè);
8、有MCSE、RHCE等證書者優(yōu)先;
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇12
職責(zé):
1、負(fù)責(zé)產(chǎn)品數(shù)據(jù)庫研發(fā),參與系統(tǒng)整體架構(gòu)設(shè)計;
2、根據(jù)產(chǎn)品目標(biāo)負(fù)責(zé)相關(guān)業(yè)務(wù)的數(shù)據(jù)分析、建模、設(shè)計評審,跟進(jìn)產(chǎn)品過程中數(shù)據(jù)庫設(shè)計;
3、負(fù)責(zé)產(chǎn)品模塊的數(shù)據(jù)層分析、設(shè)計、編碼、測試;
4、能夠獨立完成產(chǎn)品數(shù)據(jù)層開發(fā)任務(wù),負(fù)責(zé)各類數(shù)據(jù)接口開發(fā);
5、負(fù)責(zé)各類型數(shù)據(jù)操作處理和兼容問題; 數(shù)據(jù)庫復(fù)雜SQL開發(fā)和調(diào)優(yōu)。
任職要求:
1、計算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;
2、5年以上JAVA開發(fā)經(jīng)驗,有Spring Boot框架開發(fā)經(jīng)驗,計算機(jī)碩士以上學(xué)歷可酌情考慮;
3、系統(tǒng)掌握數(shù)據(jù)庫原理和知識,精通SQL語法規(guī)則和特點,有3年以上SQL編寫經(jīng)驗。熟悉主流數(shù)據(jù)庫技術(shù),良好的數(shù)據(jù)庫基礎(chǔ)知識,具備良好的SQL編寫與優(yōu)化能力,熟練掌握Oracle、SQLServer、MySQL、PostgreSQL等數(shù)據(jù)庫語言,能熟練應(yīng)用分析函數(shù)、存儲過程;
4、熟練掌握數(shù)據(jù)庫腳本的性能調(diào)優(yōu)方法,有大量數(shù)據(jù)處理或開發(fā)經(jīng)驗者優(yōu)先;
5、熟悉數(shù)據(jù)庫建模,熟練運用建模工具進(jìn)行產(chǎn)品的分析和設(shè)計;
6、有較強(qiáng)的交流能力,能很好的理解項目需求;
7、具備良好的自學(xué)能力和獨立解決問題的能力;
8、溝通能力良好,具備團(tuán)隊合作精神,能適應(yīng)一定壓力開展工作。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇13
1.潤滑系統(tǒng)設(shè)計。
2.冷卻系統(tǒng)、節(jié)溫器等設(shè)計。
3.油底殼設(shè)計。
4.潤滑系統(tǒng)和冷卻系統(tǒng)零部件分解、測繪及零部件附圖繪制。
5.配合采購、配套完成產(chǎn)品研發(fā)過程中的技術(shù)協(xié)調(diào),與相關(guān)零件設(shè)計工程師進(jìn)行協(xié)調(diào),對潤滑油品進(jìn)行選型。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇14
職責(zé):
1.負(fù)責(zé)MPP數(shù)據(jù)庫日常維護(hù),業(yè)務(wù)數(shù)據(jù)收集整理,對多種數(shù)據(jù)源的進(jìn)行集成;
2.負(fù)責(zé)BI平臺搭建和日常維護(hù)、需求調(diào)研、模型設(shè)計工作;
3.涉及部分ETL設(shè)計、模型設(shè)計、開發(fā)工作;
4.協(xié)助解決BI平臺運行日常問題;
5.本職位上班地點:佛山順德區(qū)。
任職資格:
1.一年以上相關(guān)工作經(jīng)驗;
2.熟悉Oracle、DB2等主流數(shù)據(jù)庫,并對分布式數(shù)據(jù)庫有了解,如果熟悉MPP數(shù)據(jù)庫優(yōu)先考慮;
3.掌握BI相關(guān)工具,用過如ETL工具kettle;
4.接觸并使用過前端報表開發(fā)工作;
5.良好的溝通能力和獨立工作能力,良好的團(tuán)隊合作意識與責(zé)任心,良好的文檔編寫能力。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇15
1.必須有在芯片公司工作的經(jīng)驗;
2.按照工藝設(shè)計規(guī)則、設(shè)計產(chǎn)品的版圖;
3.對產(chǎn)品版圖進(jìn)行規(guī)則檢查,電路與版圖匹配檢查;
4.完成用于生產(chǎn)加工的產(chǎn)品最終設(shè)計。
數(shù)據(jù)倉庫工程師的具體職責(zé)文本 篇16
1.發(fā)動機(jī)各系統(tǒng)零部件的布置安裝及干涉性檢査。
2.發(fā)動機(jī)骨架數(shù)模搭建及維護(hù)。
3.配合發(fā)動機(jī)在機(jī)艙內(nèi)布置做接口改動,發(fā)動機(jī)初步概念設(shè)計。