大數(shù)據(jù)運維工程師崗位的工作職責(zé)概述

　　大數(shù)據(jù)運維工程師需要負(fù)責(zé)服務(wù)過程中問題現(xiàn)象和處理方案的收集撰寫，形成知識庫，并對知識庫進行維護更新。以下是第一范文網(wǎng)小編整理的大數(shù)據(jù)運維工程師崗位的工作職責(zé)概述。

　　大數(shù)據(jù)運維工程師崗位的工作職責(zé)概述1

　　職責(zé)：

　　1，負(fù)責(zé)軟件系統(tǒng)的部署運行;

　　2、負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)系統(tǒng)接入的規(guī)劃和實施;

　　3，理解行業(yè)業(yè)務(wù)，梳理業(yè)務(wù)數(shù)據(jù)模型;

　　4，完成項目實施過程中各類文檔的編寫、收集、整理、歸檔;

　　5，與客戶保持密切溝通，建立良好的客戶關(guān)系，保障良好的客戶滿意度;

　　有效的分析和控制客戶需求，解決項目實施過程中遇到的質(zhì)量問題和管理問題。

　　崗位要求：

　　1、全日制本科以上學(xué)歷，軟件工程、計算機科學(xué)相關(guān)專業(yè);

　　2、3年以上的軟件/項目管理實施經(jīng)驗;

　　3、熟悉Linux操作，熟練編寫shell/python腳本;

　　4、了解常用開源分布式系統(tǒng)Hadoop/Spark/Hive/Hbase;

　　5、熟練使用SQL語句，熟悉ETL工作;

　　6、熟悉Oracle，mysql等關(guān)系型數(shù)據(jù)庫;

　　7、具有強烈的責(zé)任感與團隊合作精神，出色的溝通及學(xué)習(xí)能力;

　　8、有較強的分析問題能力，獨立解決問題能力，能接受在客戶公司辦公。

　　大數(shù)據(jù)運維工程師崗位的工作職責(zé)概述2

　　職責(zé):

　　1. 管理公司數(shù)據(jù)庫，提供高可用、高性能數(shù)據(jù)庫系統(tǒng)，并保障系統(tǒng)穩(wěn)定運行。

　　2. 負(fù)責(zé)數(shù)據(jù)庫性能監(jiān)控與優(yōu)化，故障處理，數(shù)據(jù)備份及災(zāi)難恢復(fù)。

　　3. 負(fù)責(zé)數(shù)據(jù)庫自助平臺的高可用架構(gòu)設(shè)計和負(fù)載均衡的設(shè)計和實現(xiàn)。

　　4. 負(fù)責(zé)業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫管理，包括數(shù)據(jù)庫日常維護，系統(tǒng)數(shù)據(jù)安全以及權(quán)限管理、故障處理、日常錯誤情況處理等。

　　5. 負(fù)責(zé)依據(jù)業(yè)務(wù)需求優(yōu)化數(shù)據(jù)存儲結(jié)構(gòu)，負(fù)責(zé)數(shù)據(jù)庫系統(tǒng)部署方案的計劃、設(shè)計和實施。

　　6. 負(fù)責(zé)系統(tǒng)數(shù)據(jù)庫定期檢查，進行性能分析與調(diào)優(yōu)，充分保證信息系統(tǒng)數(shù)據(jù)的安全及系統(tǒng)高效運行。

　　任職資格:

　　1. 全日制本科及以上學(xué)歷，計算機或相關(guān)專業(yè)

　　2. 熟悉MySQL實現(xiàn)原理，InnoDB，MyISAM，Memory引擎，熟悉存儲過程和事務(wù)。

　　3. 熟悉數(shù)據(jù)庫原理、精通數(shù)據(jù)庫核心參數(shù)的設(shè)置和調(diào)整，有規(guī)劃、設(shè)計、部署以及數(shù)據(jù)庫性能優(yōu)化經(jīng)驗。

　　4. 具備數(shù)據(jù)庫設(shè)計、SQL優(yōu)化能力，能根據(jù)業(yè)務(wù)需求，提供高可用、高性能、可擴展、穩(wěn)定可靠的數(shù)據(jù)庫解決方案。

　　5. 了解MongoDB等非關(guān)系型數(shù)據(jù)庫的特點。了解Redis，Memcache等內(nèi)存數(shù)據(jù)庫及緩存系統(tǒng)的原理及實現(xiàn)。

　　6. 熟悉Linux操作系統(tǒng)，對主機、存儲、網(wǎng)絡(luò)有一定的了解, 會使用Shell/Perl/Python中的一門腳本語言。

　　7. 有Hadoop/Kafka/Spark/ElasticSearch相關(guān)經(jīng)驗的優(yōu)先考慮。

　　大數(shù)據(jù)運維工程師崗位的工作職責(zé)概述3

　　職責(zé)：

　　I、負(fù)責(zé)Hadoop集群的安裝部署、維護及調(diào)優(yōu):

　　2、負(fù)責(zé)spark的安裝郵署、維護及調(diào)優(yōu):

　　3、負(fù)責(zé)基于大數(shù)據(jù)平臺開發(fā)的應(yīng)用系統(tǒng)的部署、日常維護、調(diào)優(yōu)和問題處理

　　4、負(fù)責(zé)ELK 平臺的部署及維護。

　　技能要求：

　　1 、2年以上大數(shù)據(jù)運維工仵經(jīng)驗;

　　2、熟悉Hadoop生態(tài)圈技術(shù)棧及各個組件原理:

　　⒊、熟練掌握HDFS、Hive、HBase、sρark、sqooρ 等組件，具備部署、維護、調(diào)優(yōu)的能力:

　　4、熱悉kylin技術(shù)原理,有一定的維護經(jīng)驗優(yōu)先:

　　5、掌掇ELK的日常維護技能·有一定的維護.經(jīng)驗優(yōu)先:

　　6、有一定的HQL/sql 性能調(diào)優(yōu)經(jīng)驗;

　　7、具備基本的 java、python等語言開發(fā)能力優(yōu)先:

　　8、有較強的溝通、團隊協(xié)作及學(xué)習(xí)能力。

　　大數(shù)據(jù)運維工程師崗位的工作職責(zé)概述4

　　職責(zé)：

　　1、負(fù)責(zé)公司大數(shù)據(jù)/Hadoop/hive/hbase/flink等離線實時數(shù)據(jù)平臺運維保障;

　　2、負(fù)責(zé)內(nèi)部大數(shù)據(jù)自動化運維以及數(shù)據(jù)化運營平臺開發(fā)工作;

　　3、負(fù)責(zé)Hadoop/Hbase等系統(tǒng)的業(yè)務(wù)監(jiān)控、持續(xù)交付、應(yīng)急響應(yīng)、容量規(guī)劃等;

　　4、深入理解數(shù)據(jù)平臺架構(gòu)，發(fā)現(xiàn)并解決故障及性能瓶頸，打造一流的數(shù)據(jù)平臺;

　　5、持續(xù)的創(chuàng)新和優(yōu)化能力，提升產(chǎn)品整體質(zhì)量，改善用戶體驗，控制系統(tǒng)成本。

　　6、善于表達、理解客戶數(shù)據(jù)服務(wù)需求，具備數(shù)據(jù)需求轉(zhuǎn)化落地能力。

　　任職要求：

　　1、大學(xué)本科及以上學(xué)歷，計算機或者相關(guān)專業(yè);

　　2、深入理解linux系統(tǒng)，運維體系結(jié)構(gòu)，精于容量規(guī)劃、性能優(yōu)化;

　　3、具備一定的開發(fā)能力，精通一門以上腳本語言;(shell/perl/python等)，熟悉java等開發(fā)語言一種及以上優(yōu)先;

　　4、具備很強的故障排查能力，有很好的技術(shù)敏感度和風(fēng)險識別能力;

　　5、能夠承受較大的工作壓力，以結(jié)果和行動為準(zhǔn)則，努力追求成功;

　　6、熟悉hadoop、hbase、hive、spark、tez等原理并具備管理，配置，運維經(jīng)驗;

　　7、熟悉分布式系統(tǒng)設(shè)計范型，有大規(guī)模系統(tǒng)設(shè)計和工程實現(xiàn)的了解者優(yōu)先。

　　8、具有運營商流量數(shù)據(jù)加工處理經(jīng)驗者優(yōu)先。

　　大數(shù)據(jù)運維工程師崗位的工作職責(zé)概述5

　　職責(zé)：

　　1. 負(fù)責(zé)大數(shù)據(jù)平臺的規(guī)劃、部署、監(jiān)控、系統(tǒng)優(yōu)化及運維等工作，保障系統(tǒng)7*24小時運營;

　　2. 為線上服務(wù)高效穩(wěn)定運行負(fù)責(zé)，支撐業(yè)務(wù)和數(shù)據(jù)量的快速擴張，發(fā)現(xiàn)并能解決重大故障及性能瓶頸;

　　3. 深入理解系統(tǒng)平臺及大數(shù)據(jù)相關(guān)運維技術(shù)，持續(xù)優(yōu)化集群服務(wù)架構(gòu);

　　4. 對大數(shù)據(jù)體系下新技術(shù)的調(diào)研、應(yīng)用、對內(nèi)培訓(xùn)。

　　職位要求：

　　1. 至少3年以上大數(shù)據(jù)運維經(jīng)驗， 深入理解Linux系統(tǒng)，運維體系結(jié)構(gòu);

　　2. 深度優(yōu)化HADOOP平臺MR作業(yè)/計算框架/存儲技術(shù)，提升集群吞吐并降低成本;

　　3. 具有CDH(或者HDP)/HDFS/YARN/HIVE/ES/Kylin/Hbase/Kafka/Spark/Storm/Flume/Impala/Hue/Kettle/Flink等大數(shù)據(jù)系統(tǒng)的運維經(jīng)驗，有開發(fā)經(jīng)驗;

　　4. 熟悉HADOOP生態(tài)，有數(shù)據(jù)安全相關(guān)工作經(jīng)驗， 并能對平臺CPU/MEM/IO/網(wǎng)絡(luò)/調(diào)度中一個或多個方面的性能調(diào)優(yōu);

　　5. 熟練掌握shell/python中的任意一門腳本語言;

　　6. 強烈責(zé)任感、縝密的邏輯思維能力，良好的團隊協(xié)作能力，具備良好的項目管理及執(zhí)行能力;