大數(shù)據(jù)開發(fā)工程師的基本職責（精選13篇）

大數(shù)據(jù)開發(fā)工程師的基本職責 篇1

　　職責：

　　1、大數(shù)據(jù)日志分析系統(tǒng)的設(shè)計，選型和開發(fā);

　　2、配合各業(yè)務(wù)給予數(shù)據(jù)支持，對產(chǎn)品和運營數(shù)據(jù)總結(jié)和優(yōu)化;

　　3、處理用戶海量數(shù)據(jù)，提取、分析、歸納用戶屬性，行為等信息，完成分析結(jié)果;

　　4、發(fā)現(xiàn)并指出數(shù)據(jù)異常情況，分析數(shù)據(jù)合理性;

　　5、公司大數(shù)據(jù)基礎(chǔ)架構(gòu)平臺的運維，保障數(shù)據(jù)平臺服務(wù)的穩(wěn)定性和可用性;

　　6、大數(shù)據(jù)基礎(chǔ)架構(gòu)平臺的監(jiān)控、資源管理、數(shù)據(jù)流管理;

　　7、基于數(shù)據(jù)分析的可預(yù)測的云平臺彈性擴展解決方案。

　　任職要求：

　　1、日志分析數(shù)據(jù)系統(tǒng)實際經(jīng)驗;

　　2、3年以上互聯(lián)網(wǎng)行業(yè)研發(fā)經(jīng)驗，有使用Hadoop/hive/spark分析海量數(shù)據(jù)的能力;

　　3、掌握 Hadoop、Flume，Kafka、Zookeeper、HBase、Spark 的安裝與調(diào)試;

　　4、熟悉大數(shù)據(jù)周邊相關(guān)的數(shù)據(jù)庫系統(tǒng)，關(guān)系型數(shù)據(jù)庫和 NoSQL。

　　5、掌握 Linux 操作系統(tǒng)的配置，管理及優(yōu)化，能夠獨立排查及解決操作系統(tǒng)層的各類問題;

　　6、有良好的溝通能力，具備出色的規(guī)劃、執(zhí)行力，強烈的責任感，以及優(yōu)秀的學(xué)習(xí)能力。

大數(shù)據(jù)開發(fā)工程師的基本職責 篇2

　　職責：

　　1.參與大數(shù)據(jù)平臺搭建以及項目技術(shù)架構(gòu)。

　　2.數(shù)據(jù)分析，挖掘，模型具體的產(chǎn)品化;

　　3.根據(jù)產(chǎn)品需求，分析編寫和制定大數(shù)據(jù)相關(guān)解決方案

　　崗位要求：

　　1、計算機相關(guān)專業(yè)本科以上學(xué)歷，編程基礎(chǔ)扎實，有2年以上大數(shù)據(jù)開發(fā)經(jīng)驗

　　2、熟悉Hadoop生態(tài)和體系架構(gòu)，熟悉Flink、Spark，Hive等常用開源工具

　　3、熟悉Flume，kakfa，scribe等日志收集體系

　　4、熟悉主流數(shù)據(jù)庫(Oracle、postgresql、Mysql、Sql Server)中的1種及以上，有較好的SQL性能調(diào)優(yōu)經(jīng)驗

　　5、有數(shù)據(jù)倉庫ETL經(jīng)驗者優(yōu)先

　　6、有用戶行為日志采集、海量數(shù)據(jù)處理、數(shù)據(jù)建模方面經(jīng)驗者優(yōu)先

　　7、有持續(xù)學(xué)習(xí)的能力;喜歡開源軟件，樂于知識分享;對工作認真負責;可以獨立承擔較大工作壓力

大數(shù)據(jù)開發(fā)工程師的基本職責 篇3

　　職責：

　　1、數(shù)字貨幣領(lǐng)域數(shù)據(jù)統(tǒng)計分析，負責數(shù)字貨幣量化投資策略的設(shè)計、管理以及實際投資運作

　　2、與交易員對接，制定切實可行的的策略測試計劃，開展新策略模型的開發(fā)和驗證

　　3、協(xié)助交易員進行交易、風險管理，并對實際交易結(jié)果進行量化的績效分析，推動交易自動化

　　4、上級交辦的其他工作

　　任職要求：

　　1、數(shù)學(xué)/計算機/金融專業(yè)畢業(yè)，有扎實的算法和機器學(xué)習(xí)的理論基礎(chǔ)

　　2、有量化實盤交易經(jīng)驗，具備豐富的數(shù)學(xué)建模經(jīng)驗及較強的數(shù)據(jù)處理能力優(yōu)先

　　3、對金融市場的價格波動有獨特理解和深入的量化分析，具備一定對沖策略研究經(jīng)驗;

　　4、對數(shù)字貨幣領(lǐng)域感興趣，結(jié)果導(dǎo)向;

　　5、有網(wǎng)頁抓取和爬蟲程序編寫經(jīng)驗者優(yōu)先。

大數(shù)據(jù)開發(fā)工程師的基本職責 篇4

　　職責:

　　1、負責大數(shù)據(jù)平臺的基礎(chǔ)環(huán)境搭建與性能優(yōu)化，完成平臺的構(gòu)建與維護、實時流計算平臺、分布式調(diào)度、可視化報表等平臺的架構(gòu)與研發(fā);

　　2、對各種開源框架進行深入的代碼剖析和優(yōu)化;

　　3、參與大數(shù)據(jù)技術(shù)方案評審;

　　4、指導(dǎo)初中級大數(shù)據(jù)工程師工作;

　　崗位要求:

　　1、計算機相關(guān)專業(yè)全日制�？萍耙陨蠈W(xué)歷，具有3年或以上的分布式計算平臺研發(fā)工作經(jīng)驗;

　　2. 對大數(shù)據(jù)相關(guān)組件：Hadoop、Spark、Hbase、Hive、Flink、Kafka、Flume等架構(gòu)與底層實現(xiàn)有深入理解，具備相應(yīng)的定制和研發(fā)能力，尤其需要精通Flink框架;

　　3. 具備構(gòu)建穩(wěn)定的大數(shù)據(jù)基礎(chǔ)平臺的能力，具備數(shù)據(jù)收集、數(shù)據(jù)清洗、數(shù)據(jù)倉庫建設(shè)、實時流計算等系統(tǒng)研發(fā)經(jīng)驗;

　　4. 對技術(shù)有熱情，有不錯的數(shù)據(jù)思維和敏感度，有一定的數(shù)據(jù)分析能力優(yōu)先，對深度學(xué)習(xí)、機器學(xué)習(xí)有一定的了解優(yōu)先;

　　5. 工作有計劃性，責任心和執(zhí)行能力強，具備高度的責任心、誠信的工作作風、優(yōu)秀溝通能力及團隊精神。

大數(shù)據(jù)開發(fā)工程師的基本職責 篇5

　　職責：

　　1、負責數(shù)據(jù)分析、加工、清理、處理程序的開發(fā);

　　2、負責數(shù)據(jù)相關(guān)平臺的搭建、維護和優(yōu)化;

　　3、負責基于Hadoop/Spark/Hive/kafka等分布式計算平臺實現(xiàn)離線分析、實時分析的計算框架的開發(fā);

　　崗位要求：

　　1、本科學(xué)歷須211院校以上，碩士及以上學(xué)歷不限院校，計算機軟件及相關(guān)專業(yè)

　　2、熟悉Java和Scala語言、熟悉常用設(shè)計模式、具有代碼重構(gòu)意識;

　　3、熟練使用hadoop、hbase、Kafka、hive、spark、presto,熟悉底層框架和實現(xiàn)原理;

　　4、使用Spark Streaming和Spark SQL進行數(shù)據(jù)處理, 并具有SPARK SQL優(yōu)化經(jīng)驗;

　　5、需要有至少2年開發(fā)經(jīng)驗,有flink開發(fā)經(jīng)驗優(yōu)先;

　　6、學(xué)習(xí)能力強，喜歡研究新技術(shù)，有團隊觀念，具備獨立解決問題的能力。

大數(shù)據(jù)開發(fā)工程師的基本職責 篇6

　　1.Java后端開發(fā)

　　2.熟悉springboot+mybatis框架

　　3.熟悉數(shù)據(jù)庫原理，熟練sql語句，有mySql數(shù)據(jù)庫的經(jīng)驗為佳

　　4.有前后端分離開發(fā)，有分布式的開發(fā)經(jīng)驗為佳

　　5.熟悉linux服務(wù)器的日常操作

大數(shù)據(jù)開發(fā)工程師的基本職責 篇7

　　職責：

　　1、根據(jù)需求實現(xiàn)靜態(tài)頁面交互效果;

　　2、協(xié)同后臺開發(fā)工程師，完成WEB系統(tǒng)開發(fā)任務(wù);

　　3、特殊JS效果，數(shù)據(jù)處理實現(xiàn);

　　4、高效開發(fā)，源碼安全及版本實時管理;

　　5、負責前端界面瀏覽器調(diào)優(yōu)。

　　崗位要求：

　　1、2年以上 Web 前端開發(fā) 經(jīng)驗，精通 HTML5 / CSS3 ，具備手寫代碼能力;對 W3C 標準有充分理解;對語義、結(jié)構(gòu)與內(nèi)容分離有充分理解;

　　2、理解 ES6 語言規(guī)范，熟悉使用 Promise、 async/await 等語言特性。

　　3、熟練使用 Vue, React 等常用庫;

　　4、熟悉Node.js生態(tài)，熟練掌握npm等使用;

　　5、有責任心，善于與人溝通，具有良好的學(xué)習(xí)能力和團隊合作意識。

　　6、有開源項目經(jīng)驗優(yōu)先。

大數(shù)據(jù)開發(fā)工程師的基本職責 篇8

　　職責

　　1. 配合項目經(jīng)理完成項目需求分析、功能及設(shè)計

　　2. 負責項目開發(fā)與測試，維護已有程序的升級和錯誤更正

　　3. 負責完成APP后臺數(shù)據(jù)的接收及發(fā)送，保證數(shù)據(jù)安全

　　4. 負責處理線上服務(wù)器及數(shù)據(jù)庫故障，及時解決問題

　　5. 負責服務(wù)器環(huán)境搭建及項目更新，保證項目穩(wěn)定運行

　　6. 負責技術(shù)難點公關(guān)并帶領(lǐng)其他成員完成技術(shù)難點的推進和落實

　　任職要求

　　1. 必須要求：參與過短視頻或者視頻通話APP后臺開發(fā)

　　2. 大專及以上統(tǒng)招本科學(xué)歷

　　3. 2年以上PHP實際開發(fā)經(jīng)驗

　　4. 精通PHP開發(fā)，對主流快速開發(fā)框架ThinkPHP、YII、Zend等熟悉并應(yīng)用過至少其中一種

　　5. 必須具有對接APP的開發(fā)經(jīng)驗，能夠獨立完成數(shù)據(jù)的設(shè)計

　　6. 熟悉流媒體視頻處理技術(shù)，在項目中應(yīng)用過對短視頻處理技術(shù)

　　7. 對主流數(shù)據(jù)庫MySql，MSSQL等至少熟悉一種

大數(shù)據(jù)開發(fā)工程師的基本職責 篇9

　　職責:

　　1. 負責公司業(yè)務(wù)生產(chǎn)/支撐的系統(tǒng)類平臺的建設(shè)、優(yōu)化和維護工作;

　　2. 負責公司管理系統(tǒng)的維護性開發(fā)工作和自動化運維系統(tǒng)的開發(fā)工作;

　　3. 負責搭建和維護監(jiān)控管理體系，并根據(jù)運行情況提出優(yōu)化建議;

　　4. 負責系統(tǒng)維護過程中相關(guān)技術(shù)文檔的編寫;

　　5. 負責各應(yīng)用系統(tǒng)的版本管理，包括部署、升級等;

　　任職資格:

　　1. 計算機、通信技術(shù)或相關(guān)專業(yè)全日制本科及以上學(xué)歷，2年以上系統(tǒng)維護或開發(fā)經(jīng)驗

　　2. 熟悉Python語言及Django Web框架，對web前端技術(shù)有一定的了解，熟悉 RESTful 服務(wù)，深刻理解 MVC架構(gòu)概念和相關(guān)的實現(xiàn)技術(shù)

　　3. 熟悉常用的開源監(jiān)控系統(tǒng)(zabbix 、cacti 、nagios等)，可根據(jù)需求自定義監(jiān)控方案，并可對監(jiān)控系統(tǒng)做二次性開發(fā)

　　4. 精通Linux系統(tǒng)及常見服務(wù)的配置、排障、優(yōu)化

　　5. 對mysql等關(guān)系型數(shù)據(jù)庫有一定的了解，掌握基本的數(shù)據(jù)庫管理和SQL語句

　　6. 熟悉vmware/xen等虛擬化架構(gòu)和技術(shù)實現(xiàn)

　　7. 能獨立分析問題，善于研究業(yè)務(wù)分析產(chǎn)品，具備良好的溝通能力、團隊協(xié)作能力

大數(shù)據(jù)開發(fā)工程師的基本職責 篇10

　　職責：

　　1. 參與項目的架構(gòu)設(shè)計、架構(gòu)開發(fā)工作，核心模塊設(shè)計與代碼編寫

　　2. 系統(tǒng)性能優(yōu)化，難點攻關(guān)，保證系統(tǒng)穩(wěn)定、快速、安全運行

　　3. 參與代碼開發(fā)規(guī)范，技術(shù)標準的制定，審核開發(fā)人員的系統(tǒng)設(shè)計和代碼質(zhì)量

　　4. 合理安排重構(gòu)計劃，不斷提高產(chǎn)品的代碼質(zhì)量，為團隊引入創(chuàng)新的技術(shù)、創(chuàng)新的解決方案，用創(chuàng)新的思路解決問題。

　　職位要求：

　　1. 計算機相關(guān)專業(yè)，本科及以上學(xué)歷

　　2. 3年以上Java程序開發(fā)經(jīng)驗

　　3. Java語言基礎(chǔ)扎實，精通面向?qū)ο蟮姆治龊驮O(shè)計技術(shù)，熟練運用設(shè)計模式

　　4. 精通Spring、Mybatis、Struts等常見的開源架構(gòu)

　　5. 精通MySql，Oracle，Redis，等數(shù)據(jù)庫，熟悉常用的解決數(shù)據(jù)庫負載的方法

　　6. 熟悉Linux操作系統(tǒng)，熟悉Shell腳本編程及常用Linux操作命令

　　7. 對技術(shù)有強烈的興趣，喜歡鉆研，具有良好的學(xué)習(xí)能力

　　8. 具有良好的溝通能力，良好的團隊協(xié)作精神

　　9. 有電子政務(wù)系統(tǒng)和互聯(lián)網(wǎng)行業(yè)經(jīng)驗者優(yōu)先。

大數(shù)據(jù)開發(fā)工程師的基本職責 篇11

　　1、使用Flutter進行移動應(yīng)用研發(fā);能夠獨立完成iOS、Android應(yīng)用的開發(fā)工作

　　2、熱愛前端，精通flutter等前端開發(fā)技術(shù)，熟悉常用前端框架

　　3、和前端、后端工程師一起研討技術(shù)實現(xiàn)方案，進行應(yīng)用及系統(tǒng)整合

　　4、熟悉Flutter相關(guān)API及第三方框架

　　5、持續(xù)對產(chǎn)品開發(fā)流程進行改進與優(yōu)化，提高開發(fā)能力和效率，并能通過技術(shù)提升用戶體驗和可用性

大數(shù)據(jù)開發(fā)工程師的基本職責 篇12

　　l根據(jù)部門產(chǎn)品路線規(guī)劃，與項目團隊成員配合，開發(fā)適應(yīng)市場應(yīng)用需求的PLC燈控系統(tǒng);整合供應(yīng)商資源，驗證開發(fā)(包括自制和外購)智能電源，智能面板，場景開關(guān)，以及其它系統(tǒng)配套產(chǎn)品。

　　l 在項目過程中參與制定產(chǎn)品技術(shù)要求;負責燈控系統(tǒng)各型號產(chǎn)品的設(shè)計、驗證，完成相關(guān)技術(shù)文檔的編寫及歸檔，并參與相關(guān)技術(shù)文檔的審核工作。

　　l 參與規(guī)劃PLC智能燈控系統(tǒng)和其它燈控系統(tǒng)的技術(shù)產(chǎn)品路線;制定并實施燈控系統(tǒng)與智能家居系統(tǒng)融合的技術(shù)方案。

　　l 參與其它有線和無線智能照明系統(tǒng)相關(guān)的技術(shù)預(yù)研和產(chǎn)品開發(fā)。

　　跟蹤行業(yè)技術(shù)趨勢，制定并執(zhí)行有針對性的競品分析方案，并對市場部和采購提供技術(shù)支持。

大數(shù)據(jù)開發(fā)工程師的基本職責 篇13

　　職責：

　　1、負責產(chǎn)品開發(fā)中涉及到的數(shù)據(jù)庫創(chuàng)建、維護及提供數(shù)據(jù)接口。

　　2、負責產(chǎn)品的數(shù)據(jù)庫表設(shè)計與管理，完成數(shù)據(jù)庫的備份、恢復(fù)與故障處理。

　　3、對現(xiàn)有數(shù)據(jù)進行分析并編寫處理腳本。

　　4、數(shù)據(jù)庫性能優(yōu)化，通過分析現(xiàn)有邏輯及需求調(diào)整數(shù)據(jù)庫參數(shù)、應(yīng)用程序SQL語句等，保持數(shù)據(jù)庫在狀態(tài)下運行。

　　任職要求：

　　1、本科以上學(xué)歷，計算機相關(guān)專業(yè)畢業(yè);

　　2、至少兩年以上MYSQL數(shù)據(jù)庫管理開發(fā)工作背景， 熟悉數(shù)據(jù)庫的結(jié)構(gòu)設(shè)計，存儲過程開發(fā)

　　3、精通數(shù)據(jù)庫設(shè)計、優(yōu)化、疑難問題解決。熟悉MYSQL服務(wù)器性能優(yōu)化、備份、恢復(fù)等操作

　　4、具備良好的溝通表達能力和服務(wù)意識，較強的團隊合作意識，快速處理突發(fā)事件的能力。

　　5、良好的抗壓能力，勇于接受有挑戰(zhàn)的工作，良好的學(xué)習(xí)接受能力。