大數(shù)據(jù)開發(fā)工程師的職責(zé)文本精選

　　大數(shù)據(jù)開發(fā)工程師需要處理公司大數(shù)據(jù)平臺產(chǎn)品的技術(shù)工作，包括存儲、處理、分析、挖掘、架構(gòu)設(shè)計、研發(fā)工作。下面是第一范文網(wǎng)小編整理的大數(shù)據(jù)開發(fā)工程師的職責(zé)文本精選。

　　大數(shù)據(jù)開發(fā)工程師的職責(zé)文本精選1

　　職責(zé)：

　　1、負責(zé)該領(lǐng)域的業(yè)務(wù)需求討論，完成技術(shù)方案及數(shù)據(jù)開發(fā);

　　2、負責(zé)數(shù)據(jù)倉庫的體系建設(shè)及落地實現(xiàn);

　　3、負責(zé)大數(shù)據(jù)平臺各類環(huán)境的部署及運維、并參與架構(gòu)優(yōu)化、性能優(yōu)化等工作;

　　4、負責(zé)該領(lǐng)域所屬模塊的代碼開發(fā)、調(diào)試與維護工作，并進行技術(shù)沉淀和文檔輸出。

　　招聘要求：

　　1、計算機、電子通信、自動化等專業(yè)，本科及以上學(xué)歷;

　　2、五年以上研發(fā)經(jīng)驗，其中二年以上大數(shù)據(jù)開發(fā)的相關(guān)工作經(jīng)驗;

　　3、熟練JAVA開發(fā)語言;熟悉微服務(wù)及Spring框架;

　　4、熟練熟練Hive、Impala、ES性能調(diào)優(yōu)，關(guān)注細節(jié)，學(xué)習(xí)能力強;

　　5、能配合團隊完成該領(lǐng)域的工作，自我管理能力強，能承受工作中的各種壓力，具備很好的團隊意識

　　6、熟練主流大數(shù)據(jù)平臺產(chǎn)品部署及運維，如CDH、HDP平臺。

　　7、對機器學(xué)習(xí)和深度學(xué)習(xí)等方面有一定的了解;

　　8、有汽車制造業(yè)及相關(guān)行業(yè)的大數(shù)據(jù)開發(fā)經(jīng)驗優(yōu)先。

　　大數(shù)據(jù)開發(fā)工程師的職責(zé)文本精選2

　　職責(zé)：

　　1、負責(zé)數(shù)據(jù)中心和大數(shù)據(jù)處理平臺的搭建

　　2、在線和離線海量數(shù)據(jù)分析平臺的開發(fā);

　　3、研究大數(shù)據(jù)前沿技術(shù)，提升系統(tǒng)的運維效率;

　　4、參與大數(shù)據(jù)的采集、存儲、處理，分析等開發(fā)

　　5、參與數(shù)據(jù)挖掘算法的設(shè)計、對海量數(shù)據(jù)進行挖掘分析和發(fā)掘數(shù)據(jù)價值及算法學(xué)習(xí)及實現(xiàn)

　　【任職要求】：

　　1、計算機或相關(guān)專業(yè)本科學(xué)歷及以上，2年工作經(jīng)驗以上

　　2、熟悉Java/Scala等至少一門語言，能對分布式常用技術(shù)進行合理應(yīng)用，解決實際架構(gòu)問題

　　3、熟練使用hadoop，hive，HBase，YARN，kafka，spark，Storm,Flume等大數(shù)據(jù)開發(fā)組件

　　4、熟悉整個大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、存儲、分析和可視化及報表開發(fā);

　　5、熟悉分布式系統(tǒng)概念、架構(gòu)，有大規(guī)模分布式系統(tǒng)設(shè)計、實現(xiàn)、部署等經(jīng)驗;

　　6. 具有優(yōu)秀的學(xué)習(xí)能力、獨立分析和解決問題能力，良好的團隊合作精神。

　　7. 有BI開發(fā)經(jīng)驗的優(yōu)化考慮。

　　大數(shù)據(jù)開發(fā)工程師的職責(zé)文本精選3

　　職責(zé)：

　　1.結(jié)合項目或產(chǎn)品涉及的具體業(yè)務(wù)場景，對數(shù)據(jù)進行清洗、計算與加工;

　　2.思路清晰，可快速響應(yīng)數(shù)據(jù)處理的需求，評估并給出合理的解決方案，并采用合理的方式處理需求;

　　3.積極主動，能夠與團隊成員進行有效溝通，并完成數(shù)據(jù)處理結(jié)果的核對與對接;

　　4.完成上級交辦的工作或任務(wù)。

　　崗位要求

　　1.計算機相關(guān)專業(yè)大專以上學(xué)歷;

　　2.2年以上大數(shù)據(jù)產(chǎn)品或項目開發(fā)經(jīng)驗，精通Hadoop生態(tài)圈，熟練使用Spark，HBase、Hive、Kafka、Redis等;

　　3.精通SQL，熟練使用HSQL實現(xiàn)復(fù)雜數(shù)據(jù)處理邏輯，并具備數(shù)據(jù)處理調(diào)優(yōu)的能力;

　　4.熟悉Linux開發(fā)環(huán)境，熟悉Linux的shell命令。

　　5.具有良好的邏輯思維能力和嚴謹?shù)某绦蜷_發(fā)思想，具備獨立問題排查與處理的能力;

　　6.良好的團隊精神和合作意識，強烈的責(zé)任心，對工作有激情，良好的溝通能力，能吃苦耐勞;

　　7.有大數(shù)據(jù)項目或產(chǎn)品背景者優(yōu)先;

　　8.有使用Spark SQL進行數(shù)據(jù)處理，并具有Spark SQL優(yōu)化經(jīng)驗者優(yōu)先。

　　9.有Python或者Shell腳本開發(fā)經(jīng)驗優(yōu)先

　　大數(shù)據(jù)開發(fā)工程師的職責(zé)文本精選4

　　職責(zé)：

　　1、負責(zé)數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)查詢、數(shù)據(jù)計算等基礎(chǔ)平臺的設(shè)計和開發(fā)工作;

　　2、利用Hadoop、Spark、Flink等技術(shù)進行離線和實時數(shù)據(jù)開發(fā) ;

　　3、負責(zé)大數(shù)據(jù)平臺的規(guī)劃升級、平臺維護和優(yōu)化 ;

　　4、和其他部門或團隊溝通、資源協(xié)調(diào)并落實工作。

　　任職要求

　　1、本科及以上學(xué)歷;

　　2、3年以上大型大數(shù)據(jù)平臺建設(shè)實施經(jīng)驗 ;

　　3、掌握常用大數(shù)據(jù)組件hadoop、Hive、spark、Flink、hbase、elasticsearch等原理、使用和調(diào)優(yōu) ;

　　4、具備較強技術(shù)功底，精通Java、Scala、Python等至少一種開發(fā)語言，能根據(jù)需求給出技術(shù)架構(gòu) ;

　　5、有數(shù)據(jù)倉庫、元數(shù)據(jù)管理和治理的開發(fā)經(jīng)驗優(yōu)先 ;

　　6、善于溝通，思維活躍、責(zé)任感強、工作積極主動，有良好的團隊協(xié)作意識。

　　大數(shù)據(jù)開發(fā)工程師的職責(zé)文本精選5

　　職責(zé)：

　　1、負責(zé)完成業(yè)務(wù)和產(chǎn)品的對接，支持業(yè)務(wù)需求研發(fā);

　　2、負責(zé)完成產(chǎn)品的迭代升級以及底層架構(gòu)的升級研發(fā);

　　3、完成團隊安排的其他相關(guān)日常工作任職要求;

　　4、負責(zé)產(chǎn)品的實時業(yè)務(wù)和離線業(yè)務(wù)的研發(fā);

　　5、支持開源大數(shù)據(jù)技術(shù)在數(shù)據(jù)系統(tǒng)中的使用，修復(fù)、優(yōu)化增強大數(shù)據(jù)技術(shù);

　　崗位要求：

　　1、具有分布式系統(tǒng)架構(gòu)開發(fā)能力，熟練使用storm、spark hbase者優(yōu)先。

　　2、能夠使用實時計算平臺，進行實時業(yè)務(wù)數(shù)據(jù)的研發(fā)。

　　3、能夠基于已有平臺進行離線業(yè)務(wù)的開發(fā)。

　　4、有大數(shù)據(jù)應(yīng)用產(chǎn)品研發(fā)經(jīng)驗，具有數(shù)據(jù)決策產(chǎn)品研發(fā)經(jīng)驗者優(yōu)先。