最近中文字幕完整版高清,宅男宅女精品国产av天堂,亚洲欧美日韩综合一区二区,最新色国产精品精品视频,中文字幕日韩欧美就去鲁

首頁 > 范文大全 > 文秘知識 > 崗位職責 > 大數據開發(fā)工程師的崗位職責

大數據開發(fā)工程師的崗位職責

發(fā)布時間:2021-12-13

大數據開發(fā)工程師的崗位職責

  大數據開發(fā)工程師負責該領域的業(yè)務需求討論,完成技術方案及數據開發(fā)。下面是第一范文網小編整理的大數據開發(fā)工程師的崗位職責。

  大數據開發(fā)工程師的崗位職責1

  職責:

  1、負責所分管團隊的團隊建設和日常管理工作;

  2、負責核心技術問題攻關和性能優(yōu)化,持續(xù)維護和引進最新的大數據技術到城市大數據平臺中,支撐城市級大數據平臺業(yè)務;

  3、承擔城市數據標準編制和數據模型的設計;

  4、承擔項目中數據相關方案設計及數據團隊管理;

  5、參與城市大數據項目中數據采集、加工過程、分析挖掘模型算法的實施工作。

  任職資格:

  1、1年以上數據開發(fā)工作經驗,熟練使用SQL查詢引擎;

  2、熟悉Hadoop、Mpp、Oracle等至少一種數據倉庫工具

  3、具備良好的編程語言基礎如:java/python/scala/c++/shell等

  4、二本以上學歷,計算機相關專業(yè)或者有相關培訓經歷者優(yōu)先

  5、 個人素質要求:目光長遠、態(tài)度誠懇、崗位有穩(wěn)定性,能夠長期培養(yǎng)、具備很強的自學能力、承壓能力強、接受出差支援項目等工作。對數據工作具備濃厚的興趣并有明確職業(yè)規(guī)劃,優(yōu)秀的學習能力和團隊溝通協(xié)作能力,對新技術有濃厚興趣并有鉆研精神。

  大數據開發(fā)工程師的崗位職責2

  職責:

  1、依據客戶需求完成大數據項目的數據分析及建模;

  2、進行大數據核心算法的編寫;

  3、參與項目的需求分析、系統(tǒng)設計、編碼工作;

  4、參與開發(fā)過程中相關新技術的研究和驗證。

  5.協(xié)助承擔架構性的體系設計和改造工作,配合制定技術實施方案,按照總體設計組織子系統(tǒng)的設計和開發(fā)。

  任職要求:

  1、精通數據建模、數據體系建設,具備數據倉庫架構設計、模型設計和處理性能調優(yōu)等相關經驗;

  2、具有豐富的基于hadoop體系的數據平臺、數據倉庫建設經驗,精通基于hadoop源碼的開發(fā)、優(yōu)化改造及成功應用案例;

  3、精通hadoop生態(tài)體系各項技術,如kafka、flume、hive、impala、hbase、spark等,具有100+節(jié)點hadoop集群的開發(fā)、運維經驗;

  4、具有對大型hadoop集群的硬件規(guī)劃能力;

  大數據開發(fā)工程師的崗位職責3

  職責

  1、負責基于hadoop/spark生態(tài)系統(tǒng)、億級別數據的全文檢索,搜索引擎的產品研發(fā);

  2、基于海量用戶行為數據和其他數據,分析和研究數據與實際業(yè)務的關聯(lián)關系,并與實際業(yè)務應用相結合開發(fā);

  3、負責大數據分析需求設計和開發(fā),承擔數據抽取、清洗、轉化等數據處理程序開發(fā)。

  任職要求:

  1、熟悉Hadoop/HBase/Spark/Storm/Redis/Kafka/ES/Flume技術及其生態(tài)圈,具備相關項目開發(fā)經驗,有數據實時計算項目經驗優(yōu)先;

  2、有搜索引擎全文檢索開發(fā)經驗 ,如:elasticsearch、solr;

  3、熟悉python、R任意一門開發(fā)語言;

  4、有SAAS,PAAS企業(yè)級應用平臺或者互聯(lián)網,金融等大型應用平臺開發(fā)經驗優(yōu)先考慮;

  5、 本科及以上學歷,計算機/軟件工程/統(tǒng)計學/數學等相關專業(yè),互聯(lián)網/金融等行業(yè)3年以上工作經驗;

  6、擁有良好的代碼習慣,要求結構清晰、命名規(guī)范、邏輯性強、代碼冗余率低,代碼注釋清晰;

  7、熟悉使用svn,禪道等項目管理工具,有良好的團隊協(xié)作開發(fā)經驗.

  大數據開發(fā)工程師的崗位職責4

  職責:

  1、從事Hadoop、Spark、Hbase、hive等分布式大數據產品的設計和開發(fā);

  2、針對部門大數據業(yè)務進行大數據分析、挖掘等產品應用的開發(fā);

  3、大數據平臺各類數據業(yè)務抽象及模型化;

  4、參與大數據管理平臺的開發(fā)及維護;

  5、負責大數據平臺數據及相關的應用開發(fā),調優(yōu)及維護;

  6、為項目相關開發(fā)人員提供大數據技術指導及解決大數據平臺應用中遇到的技術難題;

  7、良好的團隊合作與溝通能力。

  任職要求:

  1、本科及以上學歷,2年以上大數據應用開發(fā)經驗;

  2、具備Java、Python、Scala其中兩種語言的開發(fā)經驗;

  3、了解泛Hadoop大數據生態(tài)圈,熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中兩種以上技術,并有實際的項目開發(fā)經驗,有相關源碼研究者優(yōu)先;

  4、具備ETL開發(fā)與運維能力,有Flume、kettle經驗優(yōu)先;

  5、熟悉大數據平臺的搭建過程,熟悉數據處理流程,有TB級以上數據處理經驗優(yōu)先,有實時數據處理經驗者優(yōu)先;

  6、熟悉離線和實時數據處理流程,熟練使用Spark,F(xiàn)link處理TB級數據優(yōu)先;

  7、熟悉Linux系統(tǒng)環(huán)境,有shell等腳本編寫經驗,熟悉Mysql、PostgreSql、Oracle等常用關系數據庫,熟練編寫SQL語句;

  8、熟悉Yarn,Kubernetes,Azkaban等資源調度框架者優(yōu)先;

  9、熟悉Datax的二次開發(fā),并有實際開發(fā)經驗優(yōu)先。

  大數據開發(fā)工程師的崗位職責5

  職責:

  1、負責數據分析、加工、清理,相關處理腳本和程序的開發(fā);

  2、負責開發(fā)大數據工具,如報表平臺、多維度分析工具、ETL平臺、調度平臺的研發(fā);

  3、負責分布式大數據平臺應用開發(fā)(Hadoop/Spark/Hive/HBase等);

  4、負責大數據相關平臺的維護、優(yōu)化。

  任職要求:

  1、本科及以上學歷,計算機相關專業(yè),具有5年及以上的大數據ETL或數據開發(fā)經驗,熟悉大數據組件的維護以及調優(yōu);

  2、熟練掌握Java或Python編程語言,熟悉大數據架構體系,熟悉Hadoop、HDFS、Hive、HBase、Spark、Kafka等技術中的一個或者多個,熟悉Sqoop、DataX等數據導入工具;

  3、能熟練使用Hive、HBase、Spark等加工和處理數據,有海量數據處理經驗;

  4、有數據倉庫開發(fā)經驗/BI系統(tǒng)開發(fā)經驗優(yōu)先;

  5、有電商行業(yè)數據處理與分析平臺開發(fā)經驗者優(yōu)先。

大數據開發(fā)工程師的崗位職責 相關內容:
  • 大數據開發(fā)工程師的崗位職責(通用19篇)

    職責1、負責基于hadoop/spark生態(tài)系統(tǒng)、億級別數據的全文檢索,搜索引擎的產品研發(fā);2、基于海量用戶行為數據和其他數據,分析和研究數據與實際業(yè)務的關聯(lián)關系,并與實際業(yè)務應用相結合開發(fā);3、負責大數據分析需求設計和開發(fā),承擔數據抽取...

  • 邏輯開發(fā)工程師崗位職責(通用33篇)

    1.負責圖像處理、相機成像相關的`fpga程序設計;2.承擔已有fpga程序的維護工作;3.承擔圖像算法的fpga移植;4.編寫必要的設計及測試相關文檔。...

  • bi開發(fā)工程師崗位職責(精選30篇)

    職責描述:1、負責公司bi系統(tǒng)與相關數據應用平臺的建設與開發(fā)運維;2、依據公司業(yè)務需求,參與企業(yè)數據平臺的規(guī)劃建設與設計開發(fā),為數據分析和運營等人員搭建友好高效的.數據平臺服務,如bi報表平臺、自助數據分析、數字大屏展示等;3、...

  • 高級android開發(fā)工程師崗位職責優(yōu)秀(精選29篇)

    1.負責公司移動端Android的軟件系統(tǒng)架構分析、設計及實現(xiàn);2.分析業(yè)務需求,參與系統(tǒng)設計與開發(fā);3.參與公司前端技術架構和關鍵技術的攻關;4.參與項目設計與編碼實現(xiàn),跟蹤并研究Android新技術的發(fā)展,并將成果實際應用到產品中;5.對開發(fā)代碼...

  • c開發(fā)工程師崗位職責(通用32篇)

    崗位職責:1、參與核心功能的設計和開發(fā),負責重要模塊的代碼編寫。2、參與平臺前后端的開發(fā)、維護及優(yōu)化;3、參與java及j2ee相關的新技術、新平臺的預研工作職位要求1、 需要全日制統(tǒng)招本科以上學歷,7年以上工作經驗,計算機專業(yè)優(yōu)先;...

  • Java開發(fā)工程師工作職責2025工作職責(通用29篇)

    1、負責編寫指定代碼模塊并進行測試;2、負責具體功能的實現(xiàn)以及與相關模塊的接口集成;3、進行軟件程序的調試和維護。...

  • 關于Java開發(fā)工程師工作職責精編(通用28篇)

    1、完成軟件系統(tǒng)代碼的實現(xiàn),編寫代碼注釋和開發(fā)文檔;2、獨立完成系統(tǒng)的功能定義,程序設計;3、根據設計文檔或需求說明完成代碼編寫、調試、測試和維護;4、獨立分析并解決軟件開發(fā)過程中的問題;5、協(xié)同測試工程師制定測試計劃,定位發(fā)現(xiàn)的問...

  • fpga開發(fā)工程師崗位職責極簡版(通用30篇)

    1.負責顯示圖像處理相關的FPGA RTL架構及子模塊設計,工程綜合及時序分析,解決開發(fā)過程中出現(xiàn)的技術問題;2.負責芯片化IP開發(fā)工作,對應芯片化代碼綜合及驗證;職位要求:熟悉FPGA原理,熟悉HDMI、DP和網口等接口調試,熟練掌握FPGA開發(fā)軟...

  • android開發(fā)工程師工作崗位職責說明(精選29篇)

    1、 對Android的整體架構有較為深入的了解;2、 精通Java開發(fā)語言,Eclipse開發(fā)工具,熟悉面向對象編程設計;3、 熟悉Android UI控件編程,熟悉JNI/NDK,有過第三方庫平臺移植經驗,有FFmpeg開發(fā)經驗者優(yōu)先;4、 熟悉Android下網絡通信機制,...

  • FPGA開發(fā)工程師崗位職責經典(精選28篇)

    1. 負責項目和產品的FPGA邏輯開發(fā)及軟硬件聯(lián)調工作;2. 負責項目和產品FPGA邏輯架構的設計工作;3. 提出解決方案和組織算法研發(fā)工作的實施策略;...

  • PHP開發(fā)工程師崗位的具體職責(精選30篇)

    崗位職責:1、有良好的程序架構設計以及編程習慣及良好的團隊合作精神;2、運用PHP程序開發(fā)經驗,根據主管部門要求對項目進行修改及開發(fā);3、負責采用PHP MYSQL技術開發(fā)網站前臺功能及后臺功能系統(tǒng);4、編寫程序代碼,設計數據庫,按時按質...

  • 結構開發(fā)工程師崗位職責(精選33篇)

    1、負責飛機結構工程管理、工程設計開發(fā)工作,并要求供應商嚴格按工藝、圖紙、制度進行生產,確保產品符合要求2、協(xié)助銷售中心或產品經理開展結構專業(yè)技術支援工作3、負責飛機結構的改裝設計方案的評估、消化和建立設計能力等工作4、負責...

  • 系統(tǒng)開發(fā)工程師工作職責與工作內容(精選3篇)

    1、接收客戶對產品需求,并對需求進行分析與客戶進行初步確認,確定系統(tǒng)設計的總體技術方案;2、對產品設計需求進行分解和分配,確定系統(tǒng)的性能指標及零部件規(guī)格,并對指標達成進行技術確認;3、負責技術的風險評估和各個階段的技術評審;4、...

  • 系統(tǒng)開發(fā)工程師工作職責具體內容(通用30篇)

    1、負責整車控制系統(tǒng)開發(fā);2、負責車輛及相關系統(tǒng)的現(xiàn)場支持與調試;3、承擔產品樣機的研制、裝配調試及相關工作;4、跟蹤解決產品開發(fā)過程中的問題、客戶技術討論以及售后服務的技術支持;...

  • 開發(fā)工程師崗位職責(精選31篇)

    職位描達(1)負責基于c++自主研發(fā)三維g1s引擎的研發(fā);(2)設計實現(xiàn)基于三維的模型操作功能(3)完成gis的'工具集合模塊研發(fā)(4)完成引擎部分插件功能的研發(fā)(5)編寫產品文檔編寫單元測試代碼完成項目引擎的單元測試職位要術(1)有2—...

  • 崗位職責