大數(shù)據(jù)開發(fā)工程師的主要職責(zé)(精選15篇)
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇1
職責(zé):
1. 負責(zé)機票酒店大數(shù)據(jù)項目的評估、設(shè)計及關(guān)鍵模塊研發(fā);
2. 參與公司大數(shù)據(jù)平臺及聯(lián)機分析系統(tǒng)的建設(shè);
3. 機器學(xué)習(xí)算法討論、評估及算法的最終編碼實現(xiàn);
4. 數(shù)據(jù)平臺開發(fā)規(guī)范制定,數(shù)據(jù)建模及核心框架研發(fā);
任職要求:
1. 本科及以上學(xué)歷,計算機或數(shù)學(xué)相關(guān)專業(yè),三年以上相關(guān)工作經(jīng)驗;
2. 掌握Java、Python、Scala等 中的一到兩種語言;
3. 熟悉Mongodb、Hive、Hbase、Redis等NoSQL數(shù)據(jù)庫開發(fā)和調(diào)優(yōu);
4. 熟悉數(shù)據(jù)相關(guān)開源框架和工具,如ZooKeeper、Spark、Flink、Impala、Kylin 等;
5. 對數(shù)據(jù)結(jié)構(gòu)和機器學(xué)習(xí)算法有一定的了解;
6. 具有海量數(shù)據(jù)處理、數(shù)據(jù)挖掘、數(shù)據(jù)分析相關(guān)項目的工作經(jīng)驗者優(yōu)先;
7. 有機票酒店等旅游行業(yè)數(shù)據(jù)開發(fā)經(jīng)驗者優(yōu)先。
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇2
職責(zé):
1、負責(zé)公司項目應(yīng)用監(jiān)測數(shù)據(jù),分析軟件大數(shù)據(jù)平臺的代碼開發(fā);
2、負責(zé)大數(shù)據(jù)體系架構(gòu)設(shè)計和應(yīng)用產(chǎn)品的研究;
3、負責(zé)大數(shù)據(jù)平臺及應(yīng)用場景的構(gòu)建、部署、測試;
4、編寫軟件研發(fā)相關(guān)技術(shù)文檔;
5、編寫產(chǎn)品研發(fā)相關(guān)任務(wù)單計劃,階段性代碼、技術(shù)方案和軟件產(chǎn)品及時提交至配置管理理庫;
6、Spark程序的研發(fā),sqoop腳本開發(fā)和商家用戶行為等離線分析數(shù)據(jù);
7、kudu,kylin等技術(shù)調(diào)研,編寫軟件研發(fā)相關(guān)技術(shù)文檔;
8、SUNMI數(shù)倉設(shè)計架構(gòu)以及ETL流程開發(fā);
9、建立多維度,多體系的用戶標簽體系以及用戶行為數(shù)據(jù)庫。
崗位要求 :
1、本科以上學(xué)歷,4年以上?工作經(jīng)驗,2年以上Hadoop平臺的相關(guān)研發(fā)經(jīng)驗,具有良好的需求分析,方案設(shè)計,架構(gòu)設(shè)計,程序編寫、測試能力;
2、熟悉J2EE或Python平臺開發(fā),有良好的Java或Python語言功底;
3、了解Linux/Unix操作系統(tǒng),了解腳本編程(Shell/Python其中一種);
4、具備數(shù)據(jù)中心資源管理(YARN)、監(jiān)控(ClouderaManage)、調(diào)度(Azkaban)等系統(tǒng)研發(fā)經(jīng)驗者優(yōu)先,具備分布式系統(tǒng)研發(fā)經(jīng)驗者優(yōu)先;
5、熟悉hadoop以及其?生態(tài)圈系統(tǒng)上的hive、hbase、sqoop、spark、spark-streaming等技
術(shù),懂hadoop源碼者優(yōu)先;
6、熟悉Kylin有OLAP平臺設(shè)計和開發(fā)經(jīng)驗優(yōu)先;
7、具有應(yīng)用大數(shù)據(jù)技術(shù)處理TB級以上數(shù)據(jù)的項目開發(fā)經(jīng)驗者優(yōu)先;
8、有較清晰的代碼編寫規(guī)范,邏輯性強,工作態(tài)度認真,良好溝通能力和團隊合作精神。
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇3
職責(zé):
1.負責(zé)公司環(huán)保大數(shù)據(jù)平臺的架構(gòu)與搭建;
2.負責(zé)需求分析,根據(jù)客戶應(yīng)用需求規(guī)劃大數(shù)據(jù)平臺架構(gòu);
3.負責(zé)將大數(shù)據(jù)平臺部署至私有服務(wù)器群、私有云或公有云;
4.負責(zé)在企業(yè)內(nèi)部進行數(shù)據(jù)平臺原型開發(fā)與數(shù)據(jù)實時交互、存儲性能測試;
5.負責(zé)與數(shù)據(jù)挖掘算法交互的架構(gòu)設(shè)計與開發(fā)。
任職要求:
1.計算機相關(guān)專業(yè),全日制本科以上學(xué)歷;
2.具有3年以上大數(shù)據(jù)相關(guān)應(yīng)用開發(fā)經(jīng)驗,有Java開發(fā)經(jīng)驗更佳;
3.至少熟悉一種流行的大數(shù)據(jù)編程框架,如Spark,Storm,F(xiàn)link等;
4.熟悉大數(shù)據(jù)生態(tài)圈常用技術(shù)如RocketMQ,Kafka,F(xiàn)lume,Zookeeper等;
5.熟悉Hadoop安裝、調(diào)試、發(fā)布配置應(yīng)用,熟悉Linux操作系統(tǒng)更佳;
6.至少熟悉TIDB,MySQL,SQLServer其中一種數(shù)據(jù)庫;
7.學(xué)習(xí)能力強,對技術(shù)有熱情,關(guān)注技術(shù)發(fā)展方向;
8.具有工業(yè)物聯(lián)網(wǎng)、智慧型環(huán)保項目背景者優(yōu)先。
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇4
職責(zé):
1、 負責(zé)基于Hadoop/Spark平臺架構(gòu)的開發(fā)、設(shè)計和布局 ;
2、 完成系統(tǒng)框架的設(shè)計和核心代碼的編寫;
3、 針對海量的用戶行為數(shù)據(jù)進行統(tǒng)計、分析與挖掘,不斷提高系統(tǒng)運行效率;
4、 負責(zé)對數(shù)據(jù)進行分析,為項目組提供大數(shù)據(jù)技術(shù)指導(dǎo)及分析手段支撐;
5、 負責(zé)大數(shù)據(jù)平臺的性能監(jiān)控和持續(xù)優(yōu)化;針對需求提供大數(shù)據(jù)分析技術(shù)解決方案 ;
6、 大數(shù)據(jù)平臺的運維工作,持續(xù)完善大數(shù)據(jù)平臺,保證穩(wěn)定性、安全性;
7、 熟練使用大數(shù)據(jù)ETL數(shù)據(jù)抽取工具;
8、領(lǐng)導(dǎo)安排的其他工作。
任職資格:
1、 3年互聯(lián)網(wǎng)行業(yè)開發(fā)經(jīng)驗,計算機或相關(guān)專業(yè)本科以上學(xué)歷;
2、 精通Hadoop大數(shù)據(jù)平臺架構(gòu),具有扎實的Java/Python等開發(fā)語言;并可以開發(fā)高效可靠的代碼;
3、 具有較強的數(shù)據(jù)分析、數(shù)據(jù)挖掘的能力;
4、 熟悉spark、Hive、storm等計算框架者優(yōu)先,對分布式存儲和計算原理有較深的理解;
5、 嚴密的數(shù)學(xué)思維、突出的分析和歸納能力、優(yōu)秀的溝通表達能;
6、 個性開朗,對技術(shù)鉆研好學(xué)、邏輯思維能力強,溝通能力優(yōu)秀,有團隊合作精神。
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇5
職責(zé):
1、負責(zé)公司大數(shù)據(jù)平臺建設(shè);
2、根據(jù)業(yè)務(wù)需求,制定數(shù)據(jù)倉庫和數(shù)據(jù)分析平臺的實施和持續(xù)更新;
3、攻克技術(shù)難關(guān),保證大數(shù)據(jù)系統(tǒng)的穩(wěn)定運行;
4、完成大數(shù)據(jù)產(chǎn)品的開發(fā)。
職位要求:
1、計算機相關(guān)專業(yè)全日制?萍耙陨蠈W(xué)歷,大數(shù)據(jù)相關(guān)經(jīng)驗;
2、熟悉Java或Scala語言,熟悉Spark,Hadoop,Kafka,Hive,HBase,ZooKeeper等大數(shù)據(jù)相關(guān)技術(shù);
3、精通SQL語句并對Redis,Mongodb等NoSQL數(shù)據(jù)庫有一定經(jīng)驗;
4、對于高并發(fā)、高穩(wěn)定可用性、性能、大數(shù)據(jù)處理有過實際項目產(chǎn)品經(jīng)驗者優(yōu)先;
5、責(zé)任心強,工作踏實,有團隊協(xié)作精神,溝通能力強者優(yōu)先。
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇6
1. 負責(zé)游戲社交產(chǎn)品的后端研發(fā)
2. 對后端系統(tǒng)不斷改進和優(yōu)化,提高性能、可用性、安全性和可擴展性
3. 承擔項目中重點、難點的技術(shù)攻堅
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇7
職責(zé):
1.電商平臺技術(shù)架構(gòu)設(shè)計和系統(tǒng)框架搭建;
2.電商平臺核心代碼編寫,注重編碼規(guī)范和系統(tǒng)性能;
3.搭建小程序訂單系統(tǒng)+即使通訊系統(tǒng),有關(guān)商城及即時通訊經(jīng)驗優(yōu)先考慮。
4.參與開發(fā)過程的代碼設(shè)計、審核和檢查。
職位要求:
熟練掌握PHP開發(fā)語言;熟悉PHP/Ajax/JavaScript/XML/Webservice;
對B2B,B2C等電商平臺系統(tǒng)有深入的了解,有過1個以上電商平臺系統(tǒng)的開發(fā)經(jīng)驗,并帶領(lǐng)過項目組完成過至少一個電商平臺系統(tǒng)的開發(fā)工作;
掌握架構(gòu)設(shè)計理論,實踐,掌握多種可重用架構(gòu)機制和模式,掌握流行技術(shù)框架和工具;
有大型分布式項目開發(fā)經(jīng)驗、微服務(wù)架構(gòu)經(jīng)驗優(yōu)先、有高并發(fā)的系統(tǒng)核心研發(fā)經(jīng)驗優(yōu)先。熟悉門戶網(wǎng)站的基本系統(tǒng)架構(gòu),對內(nèi)容發(fā)布系統(tǒng)、視頻直播點播技術(shù)、網(wǎng)站統(tǒng)計分析系統(tǒng)、網(wǎng)站電子商務(wù)系統(tǒng)有深入了解;
有良好的溝通能力,具有跨部門協(xié)作的經(jīng)驗、推進能力強,責(zé)任心強;
熟練掌握緩存技術(shù),網(wǎng)站優(yōu)化,服務(wù)器優(yōu)化,分布式集群技術(shù),負載均衡,消息中間件等;
掌握PHP及MVC架構(gòu)技術(shù),具備在Linux平臺下使用PHP開發(fā)網(wǎng)站的經(jīng)驗,可在服務(wù)器系統(tǒng)配置php+mysql運行環(huán)境;
具有PHP緩存技術(shù)、靜態(tài)化設(shè)計方面的經(jīng)驗;
學(xué)習(xí)能力強, 能快速上手新接觸的技術(shù). 積極挑戰(zhàn)技術(shù)難題, 積極向上, 有團隊合作精神.
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇8
1.、負責(zé)系統(tǒng)APP(IOS)開發(fā)和維護;
2、對兼容性以及用戶體驗進行優(yōu)化;
3、能夠根據(jù)公司要求,進行IOS獨立模塊架構(gòu)設(shè)計,功能開發(fā)及調(diào)試工作;
4、能夠根據(jù)項目計劃獨立完成高質(zhì)量代碼;
5、驗證和修正開發(fā)、測試過程中的問題,保證用戶體驗和質(zhì)量。
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇9
職責(zé):
1、 參與軟件系統(tǒng)的需求調(diào)研、分析及設(shè)計工作;
2、 參與系統(tǒng)核心模塊的程序編碼工作;
3、 負責(zé)按照公司的開發(fā)規(guī)范編寫相關(guān)項目及平臺技術(shù)文檔;
4、 配合項目經(jīng)理執(zhí)行開發(fā)過程的技術(shù)工作。
崗位要求:
1、3年左右工作經(jīng)驗,有2-3個項目開發(fā)經(jīng)驗;熟悉Java編程,包括:JSP、Struts、Servlet、EJB、Hibernate、Spring;
2、熟練使用eclipse等Java開發(fā)工具,熟悉DevOps平臺;
3、精通系統(tǒng)的設(shè)計,能夠獨立完成模塊或系統(tǒng)的設(shè)計工作;
4、具有J2EE架構(gòu)經(jīng)驗,或者熟悉SSH架構(gòu);
5、精通MySQL或Oracle數(shù)據(jù)庫的開發(fā);具有Struts、Hibernate、EJB或Spring的開發(fā)經(jīng)驗;熟悉Socket通訊、HTTP協(xié)議、多線程編程者優(yōu)先;
6、具有中、大型公司工作經(jīng)驗、具有項目管理或團隊管理經(jīng)驗者優(yōu)先;掌握其他主流開發(fā)語言的優(yōu)先;工作積極,主動,認真;
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇10
職責(zé):
1、根據(jù)產(chǎn)品需求和設(shè)計完成兼容性良好的前端頁面制作,與后臺工程師協(xié)作;
2、完成數(shù)據(jù)交互、動態(tài)信息展現(xiàn),實現(xiàn)數(shù)據(jù)可視化;
3、擁有良好的設(shè)計審美;
4、基于Html5的webapp界面開發(fā);
5、保持代碼的高可靠性和可維護性。
任職資格:
1、熟練使用Html5、Html、CSS,CSS3等頁面結(jié)構(gòu)和布局;
2、熟練使用響應(yīng)式頁面開發(fā),屏幕自適應(yīng);
3、熟練使用Jquery、javaScript,能獨立開發(fā);
4、精通WEB標準頁面開發(fā),能實現(xiàn)兼容主流界面(IE8及以上、FF、Chrome等主流瀏覽器);
5、熟悉前端頁面代碼結(jié)構(gòu)、前端交互性能,頁面結(jié)構(gòu)和頁面布局,對語義化、結(jié)構(gòu)與內(nèi)容分離、用戶體驗有一定的理解;
6、至少有Angular、Vue之一開發(fā)經(jīng)驗。
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇11
職責(zé):
1、認真分析軟件的架構(gòu),整理設(shè)計者(項目經(jīng)理)的設(shè)計思路之上進行功能設(shè)計;
2、獨立完成項目經(jīng)理分配的開發(fā)任務(wù),負責(zé)程序開發(fā)、代碼編寫;
3、參與項目中遇到問題的討論會并有效提出解決方案;
4、詳細記錄測試過程,發(fā)現(xiàn)并修復(fù)BUG;
5、對現(xiàn)場實施日志中出現(xiàn)的問題及時進行修正;
6、自主學(xué)習(xí)、追求創(chuàng)新,掌握崗位需要的技能;
崗位要求:
1、本科及以上學(xué)歷,3年以上的java web應(yīng)用開發(fā)經(jīng)驗;
2、有扎實的Java編程基礎(chǔ),熟悉java開發(fā)工具及代碼編程,精通SSH,Jsp、Javascript、CSS、Ajax、jQuery等web應(yīng)用開發(fā)技術(shù);
3、熟悉微服務(wù)相關(guān)設(shè)計理念,熟悉高并發(fā)、高負載等相關(guān)技術(shù),并具有實際開發(fā)經(jīng)驗;
4、熟悉各種主流開源框架,精通SpringBoot,Mybatis,JPA,Springmvc,Shiro等開源框架并熟悉其實現(xiàn)原理;
5、熟練操作Linux服務(wù)器,熟練搭建運行環(huán)境集群;
6、熟悉主流關(guān)系型數(shù)據(jù)庫(ORACLE、MYSQL等 )的開發(fā)應(yīng)用;
7、了解前端開發(fā)技術(shù),例如react,vue,bootstrap等,或國內(nèi)主流的開發(fā)框架;
8、具備較強的團隊協(xié)作能力和溝通理解能力,責(zé)任心強;
9、熟悉系統(tǒng)搭建過程(例如WEB項目搭建),并編寫過公用代碼(例如:公用DAO、SERVICE層代碼);
10、有基于H5的APP、微信開發(fā)人員優(yōu)先考慮。
11、接受過社會培訓(xùn)機構(gòu)全方面技術(shù)培訓(xùn)者優(yōu)先考慮。
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇12
職責(zé):
1、承擔項目組重要開發(fā)或設(shè)計工作,并能夠按要求、高質(zhì)量地完成開發(fā)或設(shè)計任務(wù);
2、掌握分析設(shè)計工具,按照規(guī)范的要求,編寫設(shè)計文檔;
3、按照設(shè)計的功能,實現(xiàn)模塊的代碼編寫和維護;
4、按公司規(guī)范進行編碼,并對開發(fā)的代碼進行單元測試。
任職資格:
1、3年以上工作經(jīng)驗,1年以上企業(yè)應(yīng)用或互聯(lián)網(wǎng)項目開發(fā)經(jīng)驗, 熟練掌握面向?qū)ο缶幊趟枷牒驮O(shè)計模式
2、精通JAVA語言及JDK規(guī)范,熟悉一種其他服務(wù)端開發(fā)語言(如 Python/PHP/GO/Node.js等)者尤佳;
3、熟悉分布式服務(wù)、集群式服務(wù)開發(fā)相關(guān)技術(shù)
4、熟悉SQL數(shù)據(jù)庫或NoSql數(shù)據(jù)庫
熟悉常見中間件(ActiveMQ,Redis,Dubbo等)的編程接口
5、了解基本的計算機網(wǎng)絡(luò)原理;
6、邏輯思維能力強,有良好的編程習(xí)慣,具備較強的學(xué)習(xí)能力和鉆研精神,熟悉敏捷開發(fā)流程;
7、有責(zé)任心,有良好的溝通協(xié)調(diào)能力和團隊協(xié)作意識;積極上進, 執(zhí)行力強, 富有創(chuàng)業(yè)激情,愿意接受挑戰(zhàn)。
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇13
職責(zé)
1.負責(zé)web前端頁面開發(fā)、維護和優(yōu)化工作。
2.掌握HTML5/JavaScript/CSS3等Web開發(fā)技術(shù)。
3.熟練使用React或vue及其全家桶。
4.熟練使用echarts 制作滿足ui需求的圖表。
5.通過各種前端技術(shù)?手段,提?高?用戶體驗并滿?足性能要求。
6.掌握常用的性能優(yōu)化手段,提升頁面性能。
任職資格:
1.至少三年以上前端開發(fā)經(jīng)驗;
2.熟練掌握HTML5、CSS3、JavaScript、ES6等
3.熟練使用至少一種JS框架,熟悉Vue或者Reactjs,掌握其原理,能獨立開發(fā)常用組件;
4.熟練使用前端自動化構(gòu)建工具,熟悉Webpack,對前端工程化與模塊化開發(fā)有一定了解,并有實踐經(jīng)驗;
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇14
1.負責(zé)游戲體系的搭建和相應(yīng)業(yè)務(wù)需求;
2.加強系統(tǒng)穩(wěn)定性,健壯性,優(yōu)化系統(tǒng)性能,提升用戶體驗;
3.對線上突發(fā)問題進行及時響應(yīng)并解決;
4.相關(guān)開發(fā)文檔的整理與編寫。
大數(shù)據(jù)開發(fā)工程師的主要職責(zé) 篇15
職責(zé):
1、參與項目的核心功能編碼與完成項目技術(shù)攻關(guān);
2、協(xié)助完成數(shù)據(jù)庫設(shè)計、功能設(shè)計、架構(gòu)設(shè)計任務(wù);
3、協(xié)助完成任務(wù)分解、任務(wù)檢查;
4、協(xié)助核心產(chǎn)品技術(shù)攻關(guān),新技術(shù)的研究。
任職要求:
1、精通PHP+MYSQL編程以及PHP框架(TP、yii2、Zend);
2、熟悉常用Linux操作命令,對數(shù)據(jù)庫優(yōu)化、PHP緩存技術(shù)、靜態(tài)化設(shè)計、數(shù)據(jù)庫安全等方面有自己的見解;
3、熟練掌握XHTML、CSS、DIV、Javascript、jquery等頁面技術(shù);
4、熟悉設(shè)計模式,具有較強的面向?qū)ο蠓治鲈O(shè)計能力,能熟練應(yīng)用設(shè)計模式;
5、有良好的代碼習(xí)慣,要求結(jié)構(gòu)清晰,命名規(guī)范,邏輯性強,代碼冗余率低;
6、有良好的溝通表達能力,良好的團隊合作精神和高度的責(zé)任感,能獨立承擔任務(wù)和有系統(tǒng)進度把控能力。
7. 全日制大專及以上,本科優(yōu)先考慮。