最近中文字幕完整版高清,宅男宅女精品国产av天堂,亚洲欧美日韩综合一区二区,最新色国产精品精品视频,中文字幕日韩欧美就去鲁

首頁 > 范文大全 > 文秘知識 > 崗位職責 > 大數(shù)據(jù)架構(gòu)師崗位的具體職責表述(精選13篇)

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述

發(fā)布時間:2023-01-10

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述(精選13篇)

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇1

  職責:

  1.負責過多個大數(shù)據(jù)項目的架構(gòu);

  2.精通Hadoop、Spark, HBase等主流的大數(shù)據(jù)平臺、精通各組件優(yōu)化設計原理;

  3.精通大數(shù)據(jù)實時流式處理的設計和應用;

  3.熟悉大數(shù)據(jù)平臺調(diào)優(yōu),具備大數(shù)據(jù)生產(chǎn)平臺調(diào)優(yōu)經(jīng)驗;

  4.金融行業(yè),運營商行業(yè)大數(shù)據(jù)架構(gòu)經(jīng)驗更優(yōu);

  5.研究大數(shù)據(jù)技術的最新發(fā)展,并引入到公司技術架構(gòu);

  6.指導大數(shù)據(jù)工程師的日常工作,并培養(yǎng)技術骨干。

  任職資格:

  1.計算機相關專業(yè)本科或以上學歷;

  2.具有5年以上大數(shù)據(jù)相關開發(fā)經(jīng)驗;

  3.具有2年以上帶團隊經(jīng)驗

  4.對Hadoop/Hive/Spark/HBase/ES等等大數(shù)據(jù)常用技術有深刻理解,能夠帶領團隊進行技術攻堅,完成中間件的實施、改造、調(diào)優(yōu);

  5.精通海量數(shù)據(jù)和實時數(shù)據(jù)的分析處理,能對線上的數(shù)據(jù)處理性能問題做調(diào)優(yōu);

  6.精通數(shù)據(jù)倉庫以及維度建模原理,有大型數(shù)據(jù)倉庫建設經(jīng)驗;

  7.精通關系型數(shù)據(jù)庫和NoSQL數(shù)據(jù)庫的使用,熟悉相關理論;

  8.溝通順暢,重點突出,高效。

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇2

  職責:

  1、大數(shù)據(jù)平臺的規(guī)劃、設計、實施,并優(yōu)化數(shù)據(jù)庫;

  2、對數(shù)據(jù)庫進行管理,負責數(shù)據(jù)庫應用系統(tǒng)的運營及監(jiān)控;

  3、對數(shù)據(jù)庫性能分析與調(diào)優(yōu),排錯,保證數(shù)據(jù)正確率;

  4、配合其他部門進行的數(shù)據(jù)處理、查詢,統(tǒng)計和分析工作;

  5、完成公司下達的項目開發(fā)任務。

  任職要求:

  1、計算機及相關專業(yè)本科以上學歷,5年以上軟件開發(fā)從業(yè)經(jīng)驗,其中包括至少2年以上的大數(shù)據(jù)開發(fā)工作經(jīng)驗;

  2、熟悉hive,hadoop/spark,hbase等大數(shù)據(jù)相關技術架構(gòu),有管理或優(yōu)化大型分布式集群經(jīng)驗;

  3、熟悉linux基本命令,精通SQL腳本的編寫,有豐富的數(shù)據(jù)庫管理、運維調(diào)優(yōu)經(jīng)驗;

  4、熟悉C++、Java、C#等開發(fā)語言;

  5、有互聯(lián)網(wǎng)電商行業(yè)大數(shù)據(jù)分析處理和大型數(shù)據(jù)倉庫的設計和實施經(jīng)驗;

  6、有分布式系統(tǒng)分析及架構(gòu)設計經(jīng)驗和大型計算集群的基礎設施開發(fā)維護經(jīng)驗;

  7、快速處理系統(tǒng)突發(fā)事件的能力,較強的學習和創(chuàng)新能力;

  8、良好的溝通能力和團隊合作精神。

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇3

  職責:

  1.負責公司新業(yè)務方向平臺大數(shù)據(jù)基礎架構(gòu)的搭建及后期數(shù)據(jù)處理體系的升級和優(yōu)化,不斷提升系統(tǒng)的穩(wěn)定性和效率。為公司未來方向性產(chǎn)品提供大數(shù)據(jù)底層平臺的支持和保證。

  2.負責制定大數(shù)據(jù)平臺調(diào)用約束和規(guī)范;

  3.負責大數(shù)據(jù)方向技術難題的解決,以及代碼質(zhì)量的把控;

  4.作為大數(shù)據(jù)開發(fā)團隊的leader,負責大數(shù)據(jù)系統(tǒng)平臺開發(fā)團隊建設與人才梯隊培養(yǎng),分享技術經(jīng)驗,撰寫相關技術文檔指導和培訓工程師。

  任職要求:

  1.熱衷于大數(shù)據(jù)技術,并能平衡大數(shù)據(jù)性能、穩(wěn)定性、擴展性多重要素進行設計和優(yōu)化;

  2.熟悉服務器基本知識,能夠評估系統(tǒng)硬件性能瓶頸;

  3.掌握Linux操作系統(tǒng)的配置,管理及優(yōu)化,能夠獨立排查及解決操作系統(tǒng)層的各類問題,并能提供解決問題的理論依據(jù);

  4.精通Java服務器編程,熟悉JVM原理,對數(shù)據(jù)結(jié)構(gòu)和算法設計有較為深刻的理解;

  5.精通elasticsearch、Redis、hadoop、Kafka、Zookeeper、Yarn、Hbase、Spark底層架構(gòu),熟悉原理、源碼、集群部署,包括參數(shù)優(yōu)化、Bug修復,貢獻過代碼或提交過bug者優(yōu)先

  6.具備數(shù)據(jù)中心資源管理、監(jiān)控、調(diào)度等系統(tǒng)研發(fā)經(jīng)驗者優(yōu)先,具備分布式系統(tǒng)研發(fā)經(jīng)驗者優(yōu)先;

  7.具有應用大數(shù)據(jù)技術處理的項目開發(fā)、維護超過兩年的經(jīng)驗者優(yōu)先;

  8.具有良好的文檔編寫能力,可進行方案設計、架構(gòu)設計。

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇4

  職責:

  1.負責企業(yè)數(shù)據(jù)中心建設,設計數(shù)據(jù)邏輯模型和物理模型,并完成相關開發(fā)

  2.梳理公司各業(yè)務線常用的指標和維度,統(tǒng)一指標定義口徑

  3.根據(jù)數(shù)據(jù)應用開發(fā)和數(shù)據(jù)分析需求,設計數(shù)據(jù)倉庫信息層模型,提高數(shù)據(jù)開發(fā)的效率

  4.負責數(shù)據(jù)模型的運營和優(yōu)化,及時響應業(yè)務邏輯變更,保證模型的數(shù)據(jù)質(zhì)量和穩(wěn)定性

  5.負責公司數(shù)據(jù)標簽體系的建設,并推動標簽體系在實際業(yè)務場景中落地

  崗位要求:

  1.5年以上DW/BI數(shù)據(jù)架構(gòu)設計、模型設計和性能調(diào)優(yōu)等相關經(jīng)驗

  2.有較強的數(shù)據(jù)分析能力,精通數(shù)據(jù)倉庫架構(gòu),熟悉Erwin或PowerDesigner建模工具

  3.精通一種主流關系數(shù)據(jù)庫(如mysql等),熟悉Hive開發(fā)

  4.有電商業(yè)務經(jīng)驗,元數(shù)據(jù)管理,數(shù)據(jù)質(zhì)量管理或標簽體系搭建經(jīng)驗者優(yōu)先

  5.優(yōu)秀的協(xié)調(diào)溝通與團隊協(xié)作能力,極強的責任心,能承受一定的工作壓力,認同企業(yè)文化和團隊價值

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇5

  職責:

  負責公司大數(shù)據(jù)產(chǎn)品架構(gòu)的設計與實現(xiàn);

  配合大數(shù)據(jù)產(chǎn)品經(jīng)理完成產(chǎn)品的快速研發(fā)與交付;

  負責大數(shù)據(jù)產(chǎn)品架構(gòu)的持續(xù)優(yōu)化設計;

  負責大數(shù)據(jù)產(chǎn)品核心組件設計;

  負責大數(shù)據(jù)相關數(shù)據(jù)架構(gòu)規(guī)劃、數(shù)據(jù)建模、數(shù)據(jù)庫設計以及大數(shù)據(jù)產(chǎn)品研發(fā)工作;

  為應用開發(fā)團隊提供技術支撐。

  及時向上級反饋工作進度、遇到的問題或者對現(xiàn)有工作的建議等;

  完成上級領導交辦的其它各項工作。

  任職資格:

  985/211本科及以上學歷,3年以上的大數(shù)據(jù)開發(fā)經(jīng)驗、

  2年以上大數(shù)據(jù)架構(gòu)設計經(jīng)驗;

  豐富的JAVA研發(fā)經(jīng)驗,精通JAVA,熟悉Python Scala等編程語言;具備深厚的分布式系統(tǒng)或數(shù)據(jù)庫系統(tǒng)的理論基礎,熟悉分布式計算系統(tǒng)的工作機制,具有分布式文件系統(tǒng)、分布式數(shù)據(jù)庫系統(tǒng)、集群存儲系統(tǒng)等架構(gòu)設計經(jīng)驗;

  熟悉整個大數(shù)據(jù)的完整處理流程(數(shù)據(jù)的采集、清洗、預處理、存儲、分析挖掘、機器學習和數(shù)據(jù)可視化);

  精通各種大數(shù)據(jù)相關技術體系:Hadoop、Spark、Storm、ElasticSearch、Kafka;

  有數(shù)據(jù)挖掘、機器學習相關應用或研究背景;

  溝通能力較好,積極主動意識較強,責任心較強。

  具備優(yōu)秀的邏輯思維能力,對解決挑戰(zhàn)性問題充滿熱情,善于解決問題和分析問題;

  良好的團隊合作精神,較強的溝通能力和學習能力 ;

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇6

  職責:

  1.能夠帶領技術人員基于hadoop平臺進行海量數(shù)據(jù)應用系統(tǒng)開發(fā);

  2.負責結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的解析和清洗,海量數(shù)據(jù)查詢和報表展現(xiàn);

  3.負責超大規(guī)模數(shù)據(jù)平臺的搭建、維護和優(yōu)化;

  4.負責大數(shù)據(jù)采集、存儲框架研究,參與在線或離線數(shù)據(jù)存儲模型設計;

  5.負責大數(shù)據(jù)平臺新技術的開發(fā)使用和性能優(yōu)化,測試。

  任職資格:

  1.計算機相關專業(yè)本科及以上學歷;

  2. 熟悉hadoop相關各種開源項目,比如HDFS/Hive/Hbase等有實際應用。(5年以上開發(fā)經(jīng)驗者優(yōu)先);

  3.兩年以上熟練編寫mapreduce代碼經(jīng)驗,有三年以上網(wǎng)絡日志分析、ETL經(jīng)驗。熟悉日志分析框架chukwa,flume,scribe者優(yōu)先;

  4.兩年以上海量數(shù)據(jù)存儲的安裝部署、優(yōu)化、二次開發(fā)經(jīng)驗,對大規(guī)模數(shù)據(jù)存儲、傳輸、處理等有豐富的經(jīng)驗;

  5.在數(shù)據(jù)挖掘、數(shù)據(jù)密集型處理、分布式計算、網(wǎng)格計算領域有深入理論基礎;

  6.具有較強的文檔撰寫能力,較強的團隊精神和合作精神,對工作有熱情,能承受壓力。

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇7

  職責:

  1.參與公司數(shù)據(jù)平臺系統(tǒng)規(guī)劃和架構(gòu)工作,主導系統(tǒng)的架構(gòu)設計和項目實施,確保項目質(zhì)量和關鍵性能指標達成;

  2.統(tǒng)籌和推進制造工廠內(nèi)部數(shù)據(jù)系統(tǒng)的構(gòu)建,搭建不同來源數(shù)據(jù)之間的邏輯關系,能夠為公司運營診斷、運營效率提升提供數(shù)據(jù)支持;

  3.負責數(shù)據(jù)系統(tǒng)需求對接、各信息化系統(tǒng)數(shù)據(jù)對接、軟件供應商管理工作

  5.根據(jù)現(xiàn)狀制定總體的數(shù)據(jù)治理方案及數(shù)據(jù)體系建立,包括數(shù)據(jù)采集、接入、分類、開發(fā)標準和規(guī)范,制定全鏈路數(shù)據(jù)治理方案;深入挖掘公司數(shù)據(jù)業(yè)務,超強的數(shù)據(jù)業(yè)務感知力,挖掘數(shù)據(jù)價值,推動數(shù)據(jù)變現(xiàn)場景的落地,為決策及業(yè)務賦能;

  6.定義不同的數(shù)據(jù)應用場景,推動公司的數(shù)據(jù)可視化工作,提升公司數(shù)據(jù)分析效率和數(shù)據(jù)價值轉(zhuǎn)化。

  任職要求:

  1.本科以上學歷,8年以上軟件行業(yè)從業(yè)經(jīng)驗,5年以上大數(shù)據(jù)架構(gòu)設計經(jīng)驗,熟悉BI平臺、大數(shù)據(jù)系統(tǒng)相關技術架構(gòu)及技術標準;

  2.熟悉數(shù)據(jù)倉庫、熟悉數(shù)據(jù)集市,了解數(shù)據(jù)挖掘、數(shù)據(jù)抽取、數(shù)據(jù)清洗、數(shù)據(jù)建模相關技術;

  3.熟悉大數(shù)據(jù)相關技術:Hadoop、Hive、Hbase、Storm、Flink、Spark、Kafka、RabbitMQ;

  4.熟悉制造企業(yè)信息化系統(tǒng)及相關數(shù)據(jù)庫技術;

  5.具備大數(shù)據(jù)平臺、計算存儲平臺、可視化開發(fā)平臺經(jīng)驗,具有制造企業(yè)大數(shù)據(jù)系統(tǒng)項目開發(fā)或?qū)嵤┙?jīng)驗優(yōu)先;

  6.對數(shù)據(jù)敏感,具備優(yōu)秀的業(yè)務需求分析和報告展示能力,具備制造企業(yè)數(shù)據(jù)分析和數(shù)據(jù)洞察、大數(shù)據(jù)系統(tǒng)的架構(gòu)設計能力,了解主流的報表工具或新興的前端報表工具;

  7.有較強的溝通和組織協(xié)調(diào)能力,具備結(jié)果導向思維,有相關項目管理經(jīng)驗優(yōu)先。

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇8

  職責:

  1、負責公司的大數(shù)據(jù)處理框架的研發(fā)設計工作,梳理可實現(xiàn)方案和技術規(guī)范;

  2、開發(fā)、完善公司大數(shù)據(jù)平臺;參與公司離線、實時大數(shù)據(jù)處理系統(tǒng)的設計、開發(fā)、測試及多個業(yè)務模塊的自動化集成;

  3、負責業(yè)務平臺數(shù)據(jù)統(tǒng)計分析模塊的設計與規(guī)劃;

  4、負責公司產(chǎn)品研發(fā)過程中的數(shù)據(jù)及存儲設計;

  5、帶領和培養(yǎng)團隊完成組織分解的目標;

  任職要求:

  1、統(tǒng)招本科及以上學歷,計算機、軟件工程相關專業(yè),至少8年以上工作經(jīng)驗,5年以上大數(shù)據(jù)開發(fā)經(jīng)驗;

  2、熟悉Java、Hadoop、HDFS、Hive、HBase、Spark、Storm、Flume等相關技術的基礎架構(gòu)

  3、熟悉數(shù)據(jù)倉庫,數(shù)據(jù)算法,分布式計算技術理論,具有大數(shù)據(jù)整體系統(tǒng)架構(gòu)設計經(jīng)驗;

  4、熟悉Linux系統(tǒng),熟練使用shell/perl/python腳本處理問題;

  5、對深度學習框架(Tensorflow)和機器學習(svm 隨機深林貝葉斯等)有一定了解的優(yōu)先;

  6、能夠組織項目開發(fā)組協(xié)同工作,包括團隊溝通、計劃、開發(fā)環(huán)境管理等

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇9

  職責:

  1、負責大數(shù)據(jù)平臺的技術選型,基于Spark、Hadoop大數(shù)據(jù)平臺建設和開發(fā);

  2、完成包括數(shù)據(jù)模型設計、數(shù)據(jù)采集、數(shù)據(jù)存儲等方面的大數(shù)據(jù)系統(tǒng)架構(gòu)的設計和數(shù)據(jù)層架構(gòu)設計;

  3、構(gòu)建數(shù)據(jù)中臺,為多種行業(yè)應用提供主數(shù)據(jù)(畫像標簽/關系圖譜)、數(shù)據(jù)模型、人工智能業(yè)務算法及數(shù)據(jù)服務。

  4、對海量數(shù)據(jù)處理的業(yè)務需求進行評估和方案設計、拆分任務并指導工程師完成開發(fā);

  5、帶領大數(shù)據(jù)技術團隊提供并實現(xiàn)大數(shù)據(jù)平臺上各項數(shù)據(jù)分析和數(shù)據(jù)可視化的架構(gòu)設計,支撐解決方案實施。

  任職要求:

  1、本科及以上學歷,具有5年及以上大數(shù)據(jù)架構(gòu)設計和開發(fā)經(jīng)驗;2年及以上帶領團隊經(jīng)驗;溝通能力強。在大型互聯(lián)網(wǎng)企業(yè)從事大數(shù)據(jù)架構(gòu)設計者優(yōu)先考慮;有分布式大型商業(yè)軟件系統(tǒng)設計經(jīng)驗、主導過大型商業(yè)軟件的架構(gòu)設計并取得過市場商業(yè)成功者優(yōu)先考慮;

  2、熟悉整個大數(shù)據(jù)的完整處理流程,包括數(shù)據(jù)的采集、清洗、預處理、存儲、分析挖據(jù)、機器學習和數(shù)據(jù)可視化;

  3、精通Oracle/MySQL/PostgreSQL/Greenplum/MongoDB等其中至少一種主流數(shù)據(jù)庫的使用,并能進行性能調(diào)優(yōu);

  4、具備優(yōu)秀的團隊意識和溝通能力,學習能力和主動性強,具有鉆研精神,充滿激情,樂于接受挑戰(zhàn)。

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇10

  職責:

  1. 負責設計企業(yè)級大數(shù)據(jù)平臺的整體架構(gòu),從技術層面制定清晰的大數(shù)據(jù)產(chǎn)品與系統(tǒng)技術架構(gòu),并負責實現(xiàn)關鍵技術和產(chǎn)品。

  2. 負責設計具有創(chuàng)新價值的大數(shù)據(jù)底層平臺、大數(shù)據(jù)上層應用系統(tǒng)等,帶領團隊完成有質(zhì)變的技術解決方案。

  3. 負責組織同事研究行內(nèi)最前沿的技術發(fā)展方向,突破現(xiàn)有的技術難題。

  4. 負責研究院對外項目合作協(xié)調(diào)與支持,編寫項目建設方案及后期項目建設支持。

  任職要求:

  1. 碩士及以上學歷,計算機相關專業(yè)。

  2. JAVA基礎扎實,不少于8年的一線開發(fā)經(jīng)驗,精通Spring boot/MyBatis/Restful API的開發(fā)與管理. 熟悉ReactJS/Angular/Vue之一前端開發(fā)技術,熟悉Maven或Ant.,熟悉Python語言開發(fā)加分。

  3. 不少于4年大數(shù)據(jù)的直接研發(fā)經(jīng)驗,精通Hadoop/Spark系統(tǒng),有hands-on的架構(gòu)設計、性能調(diào)優(yōu)、開發(fā)經(jīng)驗。有MongoDB、Kafka、Hbase/Cassandra/Storm/Hive 等系統(tǒng)的開發(fā)經(jīng)驗。

  4. 掌握分布式系統(tǒng)原理,對分布式存儲、流式計算、消息隊列中的一項或多項有深入的理解和認識。

  5. 熟悉分布式系統(tǒng)的監(jiān)控、運維、故障恢復,高可用原理和設計理念。

  6. 算法基礎扎實,熟悉常見的數(shù)據(jù)結(jié)構(gòu),掌握大規(guī)模高并發(fā)訪問、大數(shù)據(jù)開發(fā)等處理經(jīng)驗;熟練的Linux系統(tǒng), 網(wǎng)絡, 內(nèi)存和存儲等方面知識。

  7. 必須要有千萬級別的項目管理經(jīng)驗,包括但不限于前期需求溝通,建設方案編寫,中期項目實施,進度匯報,后期項目維護。

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇11

  職責:

  1、 負責大數(shù)據(jù)倉庫、數(shù)據(jù)集市的規(guī)劃及實現(xiàn),負責大數(shù)據(jù)中臺的設計和核心開發(fā)工作;

  2、 負責數(shù)據(jù)基礎架構(gòu)和數(shù)據(jù)處理體系的升級和優(yōu)化,不斷提升系統(tǒng)的穩(wěn)定性和效率,為公司的業(yè)務提供大數(shù)據(jù)底層平臺的支持和保證;

  3、 大數(shù)據(jù)平臺的數(shù)據(jù)采集、處理、存儲以及挖掘分析的架構(gòu)實現(xiàn);

  4、 研究未來數(shù)據(jù)模型和計算框架的創(chuàng)新與落地,包括但不限于以下領域:大規(guī)模數(shù)據(jù)實時化、研發(fā)模式敏捷化、數(shù)據(jù)計算框架輕量化、數(shù)據(jù)模型組織方式業(yè)務化等方面,參與制定并實踐團隊的技術發(fā)展路線

  任職資格:

  1、 精通數(shù)據(jù)建模、數(shù)據(jù)標準管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理;

  2、 有作為技術負責人系統(tǒng)化解決問題的成功案例;有海量數(shù)據(jù)實踐經(jīng)驗優(yōu)先;

  3、 熟悉目前正在發(fā)展的大數(shù)據(jù)分布式平臺前沿技術的應用;包括但不僅僅限于:hadoop、flink、spark等;

  4、 性格積極樂觀,誠信,能自我驅(qū)動,有較強的語言表達能力;具備強烈的進取心、求知欲及團隊合作精神;具有良好的溝通、團隊協(xié)作、計劃和創(chuàng)新的能力; 在數(shù)據(jù)業(yè)界有一定的影響力優(yōu)先,具有風控經(jīng)驗背景的人優(yōu)先;

  5、 具備獨立的深度思考能力,給出結(jié)合實際情況的較為理想的技術解決方案。

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇12

  職責:

  1.負責數(shù)據(jù)倉庫建設,基于數(shù)據(jù)驅(qū)動構(gòu)建企業(yè)級數(shù)據(jù)模型,根據(jù)架構(gòu)設計進行各層數(shù)據(jù)模型開發(fā)。

  2.面向PB級別超大規(guī)模數(shù)據(jù)處理和查詢需求,設計適合業(yè)務變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構(gòu),滿足多樣性需求。

  3.構(gòu)建設計良好的數(shù)據(jù)流、調(diào)度系統(tǒng)、查詢引擎、監(jiān)控系統(tǒng),保證系統(tǒng)穩(wěn)定高效運行,以實現(xiàn)數(shù)據(jù)的最大價值。

  4.指導團隊成員開展數(shù)據(jù)倉庫建設。

  5.參與重點項目的評審,參與企業(yè)數(shù)據(jù)管理體系建設。

  任職要求:

  1.統(tǒng)招本科及以上學歷。

  2.從事數(shù)據(jù)倉庫領域至少5年以上,熟悉數(shù)據(jù)倉庫模型設計與ETL開發(fā)經(jīng)驗 ,掌握Kimball的維度建模設計方法,具備海量數(shù)據(jù)加工處理(ETL)相關經(jīng)驗 。

  3.具有一定數(shù)據(jù)模型和數(shù)據(jù)架構(gòu)基礎,熟悉hadoop\hive和常用數(shù)據(jù)庫。

  4. 精通SQL,有一定的SQL性能調(diào)優(yōu)經(jīng)驗,熟悉hive sql的開發(fā)。

  5.具有管理團隊開發(fā)經(jīng)驗,具備良好的組織能力、協(xié)調(diào)能力及項目管理能力。

  6.具有較好的文字功底及語言表達能力,能夠快速、準確地理解需求。

  7.具有專研、快速學習和創(chuàng)新精神,具備獨立分析問題和解決問題的能力。

  8.具有責任心,時間觀念強,工作獨立性強,有良好的團隊合作精神。

  9.全日制普通本科畢業(yè)。

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述 篇13

  職責:

  1、負責企業(yè)大數(shù)據(jù)平臺的基礎建設、管理及制定拓展規(guī)劃;

  2、負責大數(shù)據(jù)平臺相關自動化服務工具的設計、開發(fā);

  3、參與Hadoop、Hbase、Spark等核心平臺組件的開發(fā)、優(yōu)化;

  4、對平臺特殊場景化的數(shù)據(jù)應用制定相關實踐方案;

  5、大數(shù)據(jù)團隊的搭建。

  任職資格:

  1、統(tǒng)招本科以上學歷,計算機等相關專業(yè),5年以上工作經(jīng)驗;

  2、具有Hadoop等大規(guī)模集群管理經(jīng)驗、海量(PB)數(shù)據(jù)處理經(jīng)驗;

  3、精通Hadoop、Hive、Hbase等離線平臺相關組件的原理機制;

  4、了解或熟悉Storm/Spark/Redis/Kafka/MongoDB等分布式系統(tǒng);

  5、熟悉高并發(fā)、分布式開發(fā)等相關知識,具有后端服務優(yōu)化相關經(jīng)驗;

  6、熟悉爬蟲常用框架以及反爬技術;

  7、具有良好的溝通能力、分析問題與攻關問題的能力;

  8、有責任心,工作積極,對新領域新技術有熱情。

大數(shù)據(jù)架構(gòu)師崗位的具體職責表述(精選13篇) 相關內(nèi)容:
  • 大數(shù)據(jù)架構(gòu)師崗位的具體職責表述

    大數(shù)據(jù)架構(gòu)師需要負責指導開發(fā)人員完成數(shù)據(jù)模型規(guī)劃建設、分析模型構(gòu)建及分析呈現(xiàn)。以下是第一范文網(wǎng)小編整理的大數(shù)據(jù)架構(gòu)師崗位的具體職責表述。...

  • 架構(gòu)師工作職責(通用33篇)

    職責:1、承擔公司軟件系統(tǒng)平臺的規(guī)劃與制訂;2、負責公司自動化系統(tǒng)的軟件架構(gòu)設計;3、軟件架構(gòu)設計,需分層合理,接口清晰,同時具備良好的可擴展性、可測試性、穩(wěn)定性;4、參與制訂公司軟件開發(fā)流程及規(guī)范,引入相關規(guī)范化的系統(tǒng)或工具;...

  • 大數(shù)據(jù)平臺架構(gòu)師崗位職責(精選33篇)

    1. 負責數(shù)瀾大數(shù)據(jù)平臺的架構(gòu)設計和研發(fā),建立數(shù)據(jù)生態(tài)服務,解決海量數(shù)據(jù)面臨的挑戰(zhàn);2. 管理和優(yōu)化Hadoop、Spark等集群,計算作業(yè)的調(diào)優(yōu),保證集群和平臺的高效和穩(wěn)定;3. 負責Hadoop、Spark、Flink的功能、性能和擴展,解決并實現(xiàn)業(yè)務需...

  • NET架構(gòu)師崗位的工作職責(通用33篇)

    職責:1、負責項目系統(tǒng)技術架構(gòu)設計、技術方案制定,充分發(fā)揮H3產(chǎn)品的功能;2、擔任項目的主力開發(fā)人員,指導項目團隊其他成員技術工作,協(xié)調(diào)解決項目中遇到的各種技術問題;3、給客戶培訓產(chǎn)品功能,使客戶開發(fā)、運維人員熟練地掌握產(chǎn)品使用...

  • 大數(shù)據(jù)架構(gòu)師的工作職責描述(精選30篇)

    職責:1、負責公司大數(shù)據(jù)平臺架構(gòu)的技術選型和技術難點攻關工作;2、依據(jù)行業(yè)數(shù)據(jù)現(xiàn)狀和客戶需求,完成行業(yè)大數(shù)據(jù)的特定技術方案設計與撰寫;3、負責研究跟進大數(shù)據(jù)架構(gòu)領域新興技術并在公司內(nèi)部進行分享;4、參與公司大數(shù)據(jù)項目的技術交流、...

  • 軟件架構(gòu)師工作的職責(通用31篇)

    職責:1、主要負責核心系統(tǒng)的架構(gòu)設計,框架搭建以及核心模塊的開發(fā);2、負責解決后端系統(tǒng)中的性能瓶頸與技術難題;3、負責核心系統(tǒng)的技術方案的編寫與評審;4、負責公司技術標準的制定與評審。...

  • 軟件架構(gòu)師的工作職責(精選28篇)

    1、負責組織研發(fā)軟件整體方案,根據(jù)要求進行文檔與代碼的設計、編寫、評審、維護工作;2、協(xié)助公司對整體軟件方案,內(nèi)部系統(tǒng)優(yōu)化方案建議及決策,參與公司軟件系統(tǒng)設計方案評審;3、能獨立完成子系統(tǒng)或模塊的設計與開發(fā),包括用戶接口、業(yè)務...

  • 大數(shù)據(jù)架構(gòu)師崗位的具體職責表述(通用32篇)

    職責:1.負責公司新業(yè)務方向平臺大數(shù)據(jù)基礎架構(gòu)的搭建及后期數(shù)據(jù)處理體系的升級和優(yōu)化,不斷提升系統(tǒng)的穩(wěn)定性和效率。為公司未來方向性產(chǎn)品提供大數(shù)據(jù)底層平臺的支持和保證。...

  • 平臺架構(gòu)師的工作職責(精選32篇)

    職責:1. 基于區(qū)塊鏈(Blockchain)企業(yè)技術架構(gòu)設計與開發(fā)行業(yè)區(qū)塊鏈解決方案;2. 根據(jù)系統(tǒng)架構(gòu)進行產(chǎn)品前期的技術選型、開發(fā)與測試;3. 充分理解系統(tǒng)架構(gòu),實現(xiàn)區(qū)塊鏈方案的功能模塊;4. 根據(jù)產(chǎn)品和項目需求及總體設計,編寫系統(tǒng)模塊的詳細設...

  • Java架構(gòu)師崗位的職責表述(精選4篇)

    職責:1、確定產(chǎn)品的技術架構(gòu)和技術路線,為技術決策提供依據(jù),并保證技術決策被有效貫徹;2、提取項目中的通用需求和通用組件;3、負責架構(gòu)分析、設計,指導核心代碼開發(fā);4、培養(yǎng)核心技術人員,提升技術人員能力;5、監(jiān)督開發(fā)過程的中代碼質(zhì)...

  • 平臺架構(gòu)師的職責文本表述(精選4篇)

    職責:1、產(chǎn)品研發(fā):快速熟悉業(yè)務流程,對接產(chǎn)品需求,進行需求分析和抽象,技術方案制定,系統(tǒng)設計,驅(qū)動產(chǎn)品快速迭代;2、系統(tǒng)架構(gòu):深入了解主流CRM、ERP和MES等系統(tǒng)架構(gòu)及業(yè)務流程,參與制定系統(tǒng)整合的架構(gòu)演進,涵蓋業(yè)務架構(gòu)、應用架...

  • 大數(shù)據(jù)架構(gòu)師工作的職責(通用31篇)

    職責:1、正確理解業(yè)務需求,對需求進行工作量評估;2、參與項目相關的需求、設計、投產(chǎn)手冊等文檔的編寫;3、根據(jù)進度計劃,完成所承擔功能模塊的設計、開發(fā)、單元測試、聯(lián)調(diào)測試;4、配合測試組修復代碼缺陷,確保功能實現(xiàn)與代碼質(zhì)量;5、負...

  • 軟件架構(gòu)師的基本職責(精選33篇)

    職責:1.主導敏捷開發(fā)流程,負責軟件產(chǎn)品核心模塊的設計開發(fā)工作,包括軟件架構(gòu)設計、核心模塊代碼開發(fā)、技術文檔撰寫和管理、源碼管控、測試與部署等。...

  • 平臺架構(gòu)師的基本職責概述(精選4篇)

    職責:1、負責公司新零售商業(yè)云平臺整體架構(gòu)方案設計,包括平臺規(guī)劃、平臺建設、平臺運維、平臺安全及平臺運營等整體設計與規(guī)劃;2、以公司業(yè)務需求為導向,提出云產(chǎn)品技術的合理要求,并推動相關產(chǎn)品功能研發(fā)和架構(gòu)優(yōu)化;3、根據(jù)云平臺的運...

  • 大數(shù)據(jù)架構(gòu)師崗位的基本職責(通用30篇)

    職責:負責公司大數(shù)據(jù)產(chǎn)品架構(gòu)的設計與實現(xiàn);配合大數(shù)據(jù)產(chǎn)品經(jīng)理完成產(chǎn)品的快速研發(fā)與交付;負責大數(shù)據(jù)產(chǎn)品架構(gòu)的持續(xù)優(yōu)化設計;負責大數(shù)據(jù)產(chǎn)品核心組件設計;負責大數(shù)據(jù)相關數(shù)據(jù)架構(gòu)規(guī)劃、數(shù)據(jù)建模、數(shù)據(jù)庫設計以及大數(shù)據(jù)產(chǎn)品研發(fā)工作;為應用...

  • 崗位職責