大數(shù)據(jù)運維工程師的主要職責(zé)說明(精選27篇)
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇1
職責(zé):
1、負責(zé)公司大數(shù)據(jù)集群的構(gòu)建,任務(wù)調(diào)度、監(jiān)控預(yù)警,持續(xù)完善大數(shù)據(jù)平臺,保證穩(wěn)定性、安全性;
2、負責(zé)集群容量規(guī)劃、擴容、集群性能優(yōu)化及日常巡檢和應(yīng)急值守,參與大數(shù)據(jù)基礎(chǔ)環(huán)境的架構(gòu)設(shè)計與改進;
3、深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運維技術(shù),持續(xù)優(yōu)化集群服務(wù)架構(gòu),探索新的Hadoop、Spark運維技術(shù)及發(fā)展方向;
4、具備ownership,故障排查能力,有很好的技術(shù)敏感度和風(fēng)險識別能力;
5、良好的服務(wù)意識,主動思考,自我驅(qū)動力。
任職資格:
1、熟悉RedHat、CentOS、Ubuntu系列Linux系統(tǒng)的配置、管理、內(nèi)核優(yōu)化。能夠獨立編寫(Shell/Python)腳本語言,腳本開展日常服務(wù)器的運維;
2、熟悉hadoop生態(tài)圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安裝、調(diào)試和運維經(jīng)驗; 熟悉分布式日志分析系統(tǒng)ELK及相關(guān)技術(shù);
3、熟悉軟硬件設(shè)備,網(wǎng)絡(luò)原理,有豐富的大數(shù)據(jù)平臺部署,性能優(yōu)化和運維經(jīng)驗; 了解運維高容量、大流量、大并發(fā)Web系統(tǒng)的業(yè)務(wù)知識以及解決方案;
4、工作認真負責(zé),有較強的學(xué)習(xí)能力,動手能力和分析解決問題的能力;
5、能夠利用各種開源監(jiān)控工具、運維工具,HA、負載均衡軟件完成工作任務(wù);
6、mongodb、mysql等配置、調(diào)優(yōu)和備份。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇2
職責(zé):
1、負責(zé)大數(shù)據(jù)運維體系中的監(jiān)控工作;
2、負責(zé)處理用戶服務(wù)請求事件;
3、負責(zé)監(jiān)控報警事件的處理;
4、負責(zé)協(xié)助完善監(jiān)控體系;
5、負責(zé)監(jiān)控平臺運維工作,持續(xù)優(yōu)化監(jiān)控體系;
6、按時完成領(lǐng)導(dǎo)交辦的其他相關(guān)工作。
任職要求:
1、大專及以上學(xué)歷,計算機相關(guān)專業(yè),1年以上大數(shù)據(jù)系統(tǒng)運維經(jīng)驗;
2、熟悉linux操作系統(tǒng),熟悉hadoop、hive、hbase、yarn、spark、storm等組件的原理及運維方式;
3、熟悉中間件工作原理,對TOMCAT/jetty/nginx/微服務(wù)有一定了解,具備一定的操作能力;
4、至少熟悉python/bash/shell一種或多種語言,可獨立編寫維護及監(jiān)控腳本;
5、有強烈的求知欲和鉆研技巧,具有良好的獨立分析問題與迅速解決問題的能力;
6、有良好的職業(yè)責(zé)任心和團隊協(xié)作意識;
7、能適應(yīng)7*24小時三班倒工作時間。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇3
職責(zé):
1.負責(zé)參與公司大數(shù)據(jù)基礎(chǔ)架構(gòu)平臺規(guī)劃,運維,監(jiān)控和優(yōu)化工作,保障數(shù)據(jù)平臺服務(wù)的穩(wěn)定性和可用性;
2.研究大數(shù)據(jù)前沿技術(shù),改進現(xiàn)有系統(tǒng)的服務(wù)和運維架構(gòu),提升系統(tǒng)可靠性和可運維性;
3.負責(zé)公司Hadoop核心技術(shù)組件HDFS、Yarn、MapReduce、HBase、Storm大數(shù)據(jù)存儲計算核心的監(jiān)控和日常運維工作。
4.獨立完成大數(shù)據(jù)運維過程中問題定位、問題解決、并進行總結(jié)及部門的大數(shù)據(jù)基礎(chǔ)技能培訓(xùn);
任職要求:
1. 計算機、信息系統(tǒng)、數(shù)學(xué)或相近專業(yè)本科以上學(xué)歷;
2. 擁有至少3年以上Hadoop運維經(jīng)驗、具備基于CDH與HDP的維護經(jīng)驗;
3. 熟悉Hadoop大數(shù)據(jù)生態(tài)圈服務(wù)的工作原理,具備相關(guān)實戰(zhàn)維護經(jīng)驗,包括但不限于HDFS、YARN、Hive、HBase、ELK、Spark、Kafka、Zookeeper、Flume等;
4. 至少獨立維護過中大型Hadoop集群系統(tǒng)服務(wù);
5. 至少精通Python,shell中的一種,了解JAVA;有良好的系統(tǒng)性能優(yōu)化及故障排除能力;
6. 有大數(shù)據(jù)架構(gòu)師工作經(jīng)驗更佳;
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇4
職責(zé):
1. 管理公司大數(shù)據(jù)集群,提供高可用、高性能大數(shù)據(jù)集群系統(tǒng),并保障系統(tǒng)穩(wěn)定運行
2. 負責(zé)大數(shù)據(jù)集群性能監(jiān)控與優(yōu)化,故障處理,數(shù)據(jù)備份及災(zāi)難恢復(fù)
3. 負責(zé)大數(shù)據(jù)集群自助平臺的高可用架構(gòu)設(shè)計和負載均衡的設(shè)計和實現(xiàn)
4. 負責(zé)業(yè)務(wù)系統(tǒng)大數(shù)據(jù)集群管理,包括數(shù)據(jù)庫日常維護,系統(tǒng)數(shù)據(jù)安全以及權(quán)限管理、故障處理、日常錯誤情況處理等
5. 負責(zé)依據(jù)業(yè)務(wù)需求優(yōu)化數(shù)據(jù)存儲結(jié)構(gòu),負責(zé)數(shù)據(jù)庫系統(tǒng)部署方案的計劃、設(shè)計和實施
6. 負責(zé)系統(tǒng)大數(shù)據(jù)集群定期檢查,進行性能分析與調(diào)優(yōu),充分保證信息系統(tǒng)數(shù)據(jù)的安全及系統(tǒng)高效運行
任職資格:
1. 全日制本科及以上學(xué)歷,計算機或相關(guān)專業(yè),1年以上hadoop運維經(jīng)驗
2. 熟悉Hadoop生態(tài)圈Hadoop、Kafka、Zookeeper、HBase、Spark、hive等的安裝配置和優(yōu)化
3. 熟悉MySQL等關(guān)系型數(shù)據(jù)庫的部署與優(yōu)化,了解MongoDB或Cassandra等NoSQL數(shù)據(jù)庫
4. 熟悉Linux類操作系統(tǒng)的基礎(chǔ)命令操作,能夠編寫腳本開展日常運維工作
5. 熟悉Linux開發(fā)環(huán)境,會使用Shell/Java/Python中的一門腳本語言
6. 熟悉常見開源工具如Nginx、Zabbix、Grafana等的安裝配置和使用
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇5
職責(zé):
1、響應(yīng)及解決客戶的技術(shù)要求、疑問以及系統(tǒng)使用過程中的各種問題;
2、負責(zé)服務(wù)過程中問題現(xiàn)象和處理方案的收集撰寫,形成知識庫,并對知識庫進行維護更新;
3、及時反饋技術(shù)處理過程中的異常情況,及時向上級反饋告警,同時主動協(xié)調(diào)資源推動問題解決;
4、定期對所有服務(wù)問題進行分析,并對服務(wù)效率有影響的問題提供反饋意見,提升服務(wù)支撐團隊專業(yè)度。
5、能夠獨當(dāng)一面,具備獨立思考和處理問題的能力,并能夠與客戶建立良好的關(guān)系。
6、明確工作范圍,定期與客戶溝通工作量,并獲取客戶回執(zhí),及時歸檔。
7、能夠快速熟悉參與項目中的業(yè)務(wù),總結(jié)后與研發(fā)定期溝通。
崗位要求:
1、3年及以上工作經(jīng)驗,計算機相關(guān)專業(yè)本科及以上學(xué)歷;
2、熟悉weblogic中間件的安裝部署;
3、熟悉Oracle數(shù)據(jù)庫的增刪改查操作;
4、了解ETL相關(guān)內(nèi)容,如Informatica、kettle等,具備基礎(chǔ)操作技能;
5、了解BI報表相關(guān)內(nèi)容,如cognos、tableau、自助式分析工具等,具備基礎(chǔ)操作技能;
6、掌握基本的windows/linux操作命令;
7、熟練操作Office辦公軟件;具有較強的文檔理解與編寫能力,具有較強的語言表達及溝通協(xié)調(diào)能力;
8、熟悉電網(wǎng)業(yè)務(wù)優(yōu)先。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇6
1、參與設(shè)計、審核、優(yōu)化公司IT系統(tǒng)以及各應(yīng)用系統(tǒng)的體系架構(gòu);
2、全面負責(zé)公司運維項目的系統(tǒng)升級、擴容需求與資源落實,配合開發(fā)需求,測試、調(diào)整運維平臺;
3、負責(zé)網(wǎng)絡(luò)以及服務(wù)器的網(wǎng)絡(luò)設(shè)置、維護和優(yōu)化、網(wǎng)絡(luò)的安全監(jiān)控、系統(tǒng)性能管理和優(yōu)化、網(wǎng)絡(luò)性能管理和優(yōu)化;
4、建立面向開發(fā)部門,業(yè)務(wù)部門的服務(wù)流程和服務(wù)標準;
5、負責(zé)IT運維相關(guān)流程的規(guī)劃、設(shè)計、推行、實施和持續(xù)改進;
6、負責(zé)內(nèi)部分派下發(fā),對實施結(jié)果負責(zé)。
7、負責(zé)日常網(wǎng)絡(luò)及各子系統(tǒng)管理維護。
8、負責(zé)設(shè)計并部署相關(guān)應(yīng)用平臺,并提出平臺的實施、運行報告。
9、負責(zé)配合開發(fā)搭建測試平臺,協(xié)助開發(fā)設(shè)計、推行、實施和持續(xù)改進。
10、負責(zé)相關(guān)故障、疑難問題排查處理,編制匯總故障、問題,定期提交匯總報告。
11、負責(zé)網(wǎng)絡(luò)監(jiān)控和應(yīng)急反應(yīng),以確保網(wǎng)絡(luò)系統(tǒng)有7*24小時的持續(xù)運作能力。
12、負責(zé)日常系統(tǒng)維護,及監(jiān)控,提供IT軟硬件方面的服務(wù)和支持,保證系統(tǒng)的穩(wěn)定。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇7
職責(zé):
1、負責(zé)數(shù)據(jù)中心的日常維護、升級與部署、故障處理,保障數(shù)據(jù)中心的穩(wěn)定運行;
2、負責(zé)制定與改進數(shù)據(jù)中心的應(yīng)急預(yù)案、監(jiān)控與冗余策略等,提高運維服務(wù)質(zhì)量;
3、改進數(shù)據(jù)中心的服務(wù)架構(gòu),提高數(shù)據(jù)中心的性能和健壯性;
4、研究技術(shù)架構(gòu),發(fā)現(xiàn)潛在問題,制定數(shù)據(jù)中心系統(tǒng)調(diào)整和優(yōu)化方案,提高系統(tǒng)的健壯性和效率;
崗位要求:
1. 本科及以上學(xué)歷,理工科相關(guān)專業(yè)優(yōu)先;
2. 具有3年以上相關(guān)工作經(jīng)驗;
3. 精通Linux系統(tǒng)如Redhat、Centos、Ubuntu 精通Apache、NginX、MySQL、FTP、 DNS等常用服務(wù)的安裝、配置、調(diào)優(yōu)和維護,及相應(yīng)的集群、容災(zāi)、單點故障等解決方案;
4. 具備腳本編寫能力,掌握常用腳本語言(shell,python,perl)中的一種或多種;
5. 熟悉sql語句,了解oracle的基本操作和優(yōu)化;
6. 了解zabbix等運維監(jiān)控和部署工具;
7. 了解lvs,nginx,proxy,cdn等web端技術(shù),熟悉TCP/IP協(xié)議;
8. 有較強的語言溝通能力,具備較強學(xué)習(xí)能力; 工作態(tài)度認真、細致、負責(zé);
9. 具有良好的文檔寫作能力,溝通協(xié)調(diào)能力、學(xué)習(xí)能力、團隊精神和服務(wù)意識。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇8
職責(zé):
1、負責(zé)中心機房設(shè)備、服務(wù)器設(shè)備、網(wǎng)絡(luò)交換機與存儲系統(tǒng)的維護管理,保障其安全穩(wěn)定運行;
2、公司各信息系統(tǒng)的日常維護與管理,如安全加固、故障分析、性能優(yōu)化、數(shù)據(jù)備份等;
3、規(guī)劃運維制度,監(jiān)督運維管理規(guī)范的執(zhí)行情況;
4、協(xié)助信息安全工程師做好網(wǎng)絡(luò)安全管理工作;
5、完成上級交辦的工作。
任職要求
1、 具有豐富的IT維護管理工作經(jīng)驗;
2、精通微軟軟件產(chǎn)品(Windows系列操作系統(tǒng))的安裝部署、維護、故障排除;
3、精通大型、多層級windows域控管理與維護,有集團化部署經(jīng)驗;
4、熟悉unix、linux系統(tǒng)安裝調(diào)試、配置管理以及故障排除;
5、熟悉常見網(wǎng)絡(luò)協(xié)議,熟悉日常監(jiān)控軟件的使用;
6、能獨立設(shè)計及維護大中型以太網(wǎng),能搭建并維護FTP,MAIL等服務(wù)器,熟悉路由器、交換機、磁盤存儲等設(shè)備的配置及維護,熟悉主流虛擬化平臺;
7、能夠獨立判斷并排除服務(wù)器、虛擬化平臺和網(wǎng)絡(luò)的各種故障,了解計算機病毒的傳播途徑及防治方法,能處理防范查常見計算機病毒、修復(fù)操作系統(tǒng)漏洞;
8、具備較強的計劃、組織管理能力、溝通協(xié)調(diào)能力和問題解決能力。
9、具備MCSE、VCP、RHCE認證優(yōu)先。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇9
職責(zé):
1、POS機銷售系統(tǒng)、HR管理系統(tǒng)、倉庫管理系統(tǒng)等公司IT系統(tǒng)的管理、維護及優(yōu)化;
2、公司電子設(shè)備(計算機、打印機、掃描儀、傳真機、復(fù)印機、投影儀等)軟硬件的日常維護及管理;
3、公司網(wǎng)路和服務(wù)器升級,備份、恢復(fù)和問題解決;
4、公司電話、門禁、監(jiān)控等弱電系統(tǒng)管理與維護,確保系統(tǒng)的穩(wěn)定可靠運行;
職位要求:
1、計算機或IT相關(guān)專業(yè),大專以上學(xué)歷;
2、兩年以上的企業(yè)網(wǎng)絡(luò)管理、服務(wù)器網(wǎng)絡(luò)管理等工作經(jīng)驗,能對網(wǎng)絡(luò)故障進行快速定位和排除;
3、熟悉PC機硬件維護,各種網(wǎng)絡(luò)設(shè)備基本維護;對服務(wù)器、路由器、防火墻能夠熟練操作及維護,具備故障診斷和處理能力
4、熟悉各類網(wǎng)絡(luò)協(xié)議和服務(wù),比如:TCP/IP協(xié)議、各類路由協(xié)議、WEB服務(wù)、DNS服務(wù)、DHCP服務(wù)、HTTP服務(wù)等;
5、熟悉相關(guān)網(wǎng)絡(luò)安全產(chǎn)品,如防火墻、IDS、防病毒,漏洞評估工具等;
6、熟悉網(wǎng)絡(luò)布線、公司電話布線、電話主機配置和維護等;
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇10
職責(zé):
1、支持業(yè)務(wù)系統(tǒng)上線實施及業(yè)務(wù)系統(tǒng)的安裝、調(diào)試、維護、監(jiān)控和故障處理。
2、負責(zé)配合開發(fā)測試環(huán)境的搭建、應(yīng)用的發(fā)布,以及對業(yè)務(wù)系統(tǒng)問題的跟蹤與反饋。
3、負責(zé)服務(wù)器的規(guī)劃、調(diào)試優(yōu)化、日常監(jiān)控、故障處理、數(shù)據(jù)備份、日志分析等工作。
4、參與運維流程制定,確保任何突發(fā)情況都能高效響應(yīng),負責(zé)服務(wù)器的規(guī)劃部署,對服務(wù)器構(gòu)架和網(wǎng)絡(luò)進行優(yōu)化和改進。
5、負責(zé)技術(shù)運維相關(guān)的文檔、手冊、流程編寫整理。
6、維護阿里云計算架構(gòu)。
7、維護docker和jenkins持續(xù)集成。
任職要求:
1、本科以上學(xué)歷。
2、5年以上Linux運維經(jīng)驗,有豐富的Linux系統(tǒng)參數(shù)設(shè)置、性能調(diào)優(yōu)、系統(tǒng)安全、故障定位處理經(jīng)驗。
3、精通常用服務(wù)的安裝及配置(Nginx/Tomcat/Redis/OpenVPN/Docker)。
4、具有大型系統(tǒng)平臺的運維/架構(gòu)經(jīng)驗、了解自動化運維和監(jiān)控工具,在網(wǎng)絡(luò)安全方面有一定經(jīng)驗。
5、精通Docker、Git的使用和jenkins持續(xù)集成。
6、熟悉WINDOWS SERVER/LINUX/UNIX操作系統(tǒng),熟悉MYSQL、ORACLE、SQL SERVER等主流數(shù)據(jù)庫。
7、熟悉shell編程或腳本語言(例如shell,Python,Perl等),能編寫自動化運維腳本優(yōu)先。
8、熟悉騰訊云計算架構(gòu)、VMEsxi虛擬化。
9、對Linux和云計算安全有一定的認識,能夠做到安全加固,隨時留意最新漏洞等。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇11
職責(zé):
1、參與客戶現(xiàn)場產(chǎn)品部署、升級維護、日常巡檢等工作;
2、有較強的應(yīng)變和解決問題的能力,積極應(yīng)對上級和客戶的任務(wù)安排;
3、有一定的溝通能力。對客戶提出的需求、系統(tǒng)問題,積極調(diào)研、并能排查解決一些設(shè)備、系統(tǒng)的常見問題。
任職要求:
1、本科及以上學(xué)歷,計算機相關(guān)專業(yè);
2、熟練Linux操作系統(tǒng)常用命令,能夠安裝常見服務(wù)器軟件,如:NGINX\MEMCACHED\TOMCAT等;
3、熟悉Oracle數(shù)據(jù)庫安裝配置,備份恢復(fù);
4、熟悉shell、python等腳本語言,能編寫相關(guān)的服務(wù)器維護腳本;
5、了解常用的運維工具,負載均衡技術(shù);
6、至少1年以上運維工作經(jīng)驗。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇12
職責(zé):
1、對新項目系統(tǒng)數(shù)據(jù)初始化、系統(tǒng)聯(lián)調(diào)及問題處理;
2、對軟件后臺進行配置管理,項目審核驗收,流程定制及落實跟進;
3、根據(jù)系統(tǒng)監(jiān)測的故障和客服反饋的信息,進行故障排查修復(fù),針對嚴重影響用戶問題進行應(yīng)急處置,使其快速恢復(fù)正常;
4、對服務(wù)器集群初始化、配置、管理、實時監(jiān)控,及時發(fā)現(xiàn)問題并自行處理或報告相關(guān)人員;
5、日常服務(wù)器進行例行巡檢、維護、調(diào)整、配置、監(jiān)控、數(shù)據(jù)分析、及時發(fā)現(xiàn)隱患,及時處理故障,保證服務(wù)穩(wěn)定對外提供服務(wù)、注重用戶體驗,解決用戶問題;
6、在linux環(huán)境下完成服務(wù)部署、升級、配置、調(diào)試、應(yīng)用環(huán)境及配置調(diào)優(yōu)等。
任職要求:
1、大學(xué)本科及以上學(xué)歷,計算機科學(xué)、軟件工程等專業(yè)畢業(yè);
2、熟悉windows、linux環(huán)境,具備基本辦公能力,熟練操作office,具有基礎(chǔ)英語能力,懂得應(yīng)用、系統(tǒng)、網(wǎng)絡(luò)基本知識;
3、熟悉MySQL數(shù)據(jù)庫及常用中間件,如MyCAT、ProxySQL等,熟悉數(shù)據(jù)庫的備份與恢復(fù)工作,熟練使用增刪查改,關(guān)聯(lián)查詢;
4、熟悉常用 web 服務(wù)器,例如 tomcat、jetty 等;
5、熟悉Nginx、Haproxy及LVS常用負載均衡配置及調(diào)度算法;
6、熟悉HDFS常用操作;
7、熟悉Ambari或CDH自動化部署工具;
8、熟悉Zabbix開源監(jiān)控工具;
9、有獨立分析問題和解決問題的能力,可以分析定位程序問題、日志排查、堆棧分析者優(yōu)先;
10、對技術(shù)有較強的興趣和好奇心,能夠不斷的自我提升、學(xué)習(xí),工作責(zé)任心強,具備較強的團隊精神;
11、具備良好的抗壓能力及任務(wù)組織協(xié)調(diào)能力,能夠在復(fù)雜任務(wù)面前有條不紊的推進;
12、在linux環(huán)境,可熟練維護應(yīng)用服務(wù)、搭建環(huán)境、部署、安裝數(shù)據(jù)庫、tomcat等應(yīng)用經(jīng)驗者優(yōu)先;
13、熟悉虛擬化技術(shù)、至少熟悉一種云管控平臺(阿里云、華為云)
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇13
職責(zé):
1.負責(zé)弱電集成系統(tǒng)日常維護,解答客戶提出的技術(shù)問題,負責(zé)產(chǎn)品工程安裝,包括產(chǎn)品安裝調(diào)試,故障排除,日常維護,產(chǎn)品演示等;
2.負責(zé)用戶培訓(xùn)和指導(dǎo)等技術(shù)支持工作;收集、匯總用戶的各種需求或建議,并及時提交需求任務(wù)或建議措施;
職位要求:
1、計算機、網(wǎng)絡(luò)相關(guān)專業(yè),大專以上學(xué)歷,有技術(shù)支持服務(wù)工作經(jīng)驗者優(yōu)先;
2、熟悉企業(yè)it環(huán)境,包括網(wǎng)絡(luò),操作系統(tǒng),應(yīng)用程序等,有華為、cisco等認證證書優(yōu)先;
3、良好的溝通能力,有親和力和強烈的責(zé)任感,以及很好的團隊合作精神,具備獨立分析問題和解決問題的能力。
4、具有較強的服務(wù)意識,時間觀念、耐心和責(zé)任心、良好的團隊合作精神。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇14
職責(zé):
1. 完成大數(shù)據(jù)平臺日常運維工作(上線/日常監(jiān)控/問題定位/腳本開發(fā)),涉及HDP/Hadoop/Spark/Tensorflow/Flink/Storm/Presto/Kudu/Alluxio等開源組件;
2. 完成大數(shù)據(jù)自研平臺工具運營,比如報表平臺、調(diào)度平臺和性能監(jiān)控平臺;
3. 提升系統(tǒng)可靠性,完善監(jiān)控策略,優(yōu)化運維流程,提升部門運維效率,保證7*24服務(wù);
4. 參與開源社區(qū)建設(shè),提升公司開源影響力;
任職條件:
1. 熟悉Hadoop工作原理,熟悉Hadoop、Hive、Storm、Presto、Flink、 Alluixo、Kudu等開源組件的搭建、維護以及問題定位;
2. 熟悉Linux操作系統(tǒng),熟練掌握Linux常用命令,了解ansible/puppet;
3. 熟練掌握shell/python/java;
4. 熟悉hive/spark sql工作原理,熟悉SQL語法,掌握數(shù)據(jù)庫的維護工作;
5. 對自動化運維有一定見解,使用過各種開源工具完成日常運維工作;
6. 有大數(shù)據(jù)平臺維護經(jīng)驗優(yōu)先;
7. 掌握dockerfile,了解大數(shù)據(jù)與k8s結(jié)合者優(yōu)先;
8. 參與開源社區(qū),有代碼貢獻或者高質(zhì)量博客文章者優(yōu)先;
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇15
職責(zé):
1、負責(zé)系統(tǒng)管理與安全維護及日常數(shù)據(jù)和報表的維護、監(jiān)控、內(nèi)部服務(wù)器的運維管理;
2、負責(zé)服務(wù)器系統(tǒng)部署方案的制定及實施;保障服務(wù)器與數(shù)據(jù)庫安全,檢查并消除安全漏洞;日常系統(tǒng)巡檢、數(shù)據(jù)備份、數(shù)據(jù)監(jiān)控、應(yīng)急響應(yīng)、故障排除等;
3、對Linux下各種網(wǎng)絡(luò)服務(wù)、應(yīng)用系統(tǒng)、監(jiān)控系統(tǒng)等進行自動化腳本的工作;
4、負責(zé)項目中Linux服務(wù)器的部署與維護,服務(wù)器安全管控,并根據(jù)項目對系統(tǒng)進行性能優(yōu)化;
5、處理IT日常維護和管理。
任職資格:
1、計算機相關(guān)專業(yè),1年以上服務(wù)器運維工作經(jīng)歷,優(yōu)秀應(yīng)屆生亦可考慮;
2、精通linux操作系統(tǒng),熟練部署和維護服務(wù)器以及l(fā)inux服務(wù)器上架設(shè)各種服務(wù);
3、熟悉Oracle、MySql管理和維護,數(shù)據(jù)備份;
4、熟悉常用Linux服務(wù)器軟件的配置,如Docker、Nginx、Tomcat、JDK等應(yīng)用,能夠熟練部署;
5、熟練掌握各類工具實現(xiàn)運維自動化;
6、掌握shell/perl/php/python中的一種或兩種腳本編程語言;
7、具有較強的責(zé)任心及良好的團隊合作精神,能夠在一定壓力下工作,積極主動、認真踏實、有良好自學(xué)能力和獨立解決問題的能力。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇16
職責(zé):
1.負責(zé)公司內(nèi)部運維工具或系統(tǒng)的開發(fā)與維護
2.參與運維工具、系統(tǒng)的功能設(shè)計
3.對運維工具和系統(tǒng)做持續(xù)改進以不斷提升系統(tǒng)性能、易用性與穩(wěn)定性
4.結(jié)合運維工具、系統(tǒng),參與公司產(chǎn)品架構(gòu)設(shè)計,優(yōu)化部署,提升產(chǎn)品高可用性
5.配合運維人員要求,進行實現(xiàn)各種報表的腳本的要求,實現(xiàn)自動化操作
6.實現(xiàn)系統(tǒng)非功能性要求,日志、分布式緩存、鏈接方式、并發(fā)、多線程
7.確保項目的設(shè)計部署包能夠支持自動化部署
任職資格:
1.4年以上大中型互聯(lián)網(wǎng)產(chǎn)品在線系統(tǒng)運維經(jīng)驗,對運維平臺建設(shè)有深入理解
2.2年以上Azure平臺自動化運維工具開發(fā)經(jīng)驗,熟練使用PowerShell等Windows平臺自動化腳本語言
3.深入理解Azure云平臺,具有系統(tǒng)調(diào)優(yōu)經(jīng)驗
4.高度的責(zé)任感,擅長分析問題、解決問題,對新技術(shù)敏感,樂于嘗試,溝通能力強,擅長團隊作戰(zhàn)。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇17
職責(zé):
1、負責(zé)維護服務(wù)器的運行,包括巡檢、故障排除、數(shù)據(jù)備份等業(yè)務(wù),保證服務(wù)器高質(zhì)量、高效率運行狀態(tài);
2、負責(zé)服務(wù)器漏洞整改及補丁升級;
3、負責(zé)hadoop運維相關(guān)工作;
4、負責(zé)大數(shù)據(jù)平臺的日常部署、升級、擴容、遷移;
5、負責(zé)高并發(fā),大存儲和實時流的Hadoop/spark大數(shù)據(jù)平臺規(guī)劃,運維,監(jiān)控和優(yōu)化工作。
任職資格:
1、2年左右服務(wù)器運維經(jīng)驗;
2、對linux基礎(chǔ)運維命令熟悉,shell,python至少精通一種,如會scala語言可優(yōu)先考慮;
3、熟悉Linux的維護和管理,熟悉bat及Shell腳本開發(fā),能看懂Python/Scala優(yōu)先;
4、做過大規(guī)模hadoop集群優(yōu)先;
5、大數(shù)據(jù)項目:包括不限于hadoop、hive、kafka、hbase、spark、Kudu、Impala等大數(shù)據(jù)生態(tài)的平臺搭建,監(jiān)控,運維,調(diào)優(yōu)、生產(chǎn)環(huán)境hadoop集群trouble shooting 、hadoop版本升級管理及優(yōu)化支持。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇18
職責(zé):
1.負責(zé)項目系統(tǒng)部署實施的過程執(zhí)行;
2.負責(zé)日常系統(tǒng)維護、產(chǎn)品上線實施和故障處理;
3.負責(zé)收集系統(tǒng)維護過程中的系統(tǒng)缺陷和軟件缺陷,提出合理化改進建議和意見;
4.為目標客戶提供系統(tǒng)技術(shù)培訓(xùn)和技術(shù)支持,完善系統(tǒng)維護知識庫建設(shè)。
任職要求:
1.具備?萍耙陨蠈W(xué)歷,計算機、軟件等相關(guān)專業(yè)畢業(yè),5年以上相關(guān)工作經(jīng)驗;
2.具備千萬級用戶量/設(shè)備的大型互聯(lián)網(wǎng)/物聯(lián)網(wǎng)系統(tǒng)建設(shè)運維經(jīng)驗及項目管理經(jīng)驗,熟悉互聯(lián)網(wǎng)/物聯(lián)網(wǎng)系統(tǒng)主流架構(gòu);
3.熟悉Tomcat、Nginx、IIS、Redis、MQTT和Apache等主流中間件及Docker等容器技術(shù);
4.熟悉windows server、Linux等主流操作系統(tǒng)的使用;
5.掌握Postgresql(主要)、Oracle、Mysql等主流數(shù)據(jù)庫的使用,包括存儲過程開發(fā),能編寫高效SQL。
6.熟悉Zabbix、Telegraf+InfluxDB+Grafana等監(jiān)控工具使用及Python腳本優(yōu)化;
7.掌握SVN/Git/Puppet/jenkins等自動化運維工具,具備應(yīng)用服務(wù)安裝配置、管理維護、故障分析和系統(tǒng)性能分析優(yōu)化經(jīng)驗。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇19
職責(zé):
1、負責(zé)公司產(chǎn)品系統(tǒng)的運維,包括系統(tǒng)部署上線、日常維護、平臺優(yōu)化、容量規(guī)劃
2、監(jiān)控業(yè)務(wù)的運行狀態(tài),及時處理項目運行中出現(xiàn)的故障,保障項目服務(wù)長期穩(wěn)定運行
3、負責(zé)服務(wù)器的資源調(diào)配和系統(tǒng)安全、數(shù)據(jù)備份
4、版本庫工具的使用和維護(git,svn,rsync)
任職資格:
1、熟悉互聯(lián)網(wǎng)公有云服務(wù)(AWS、阿里云、Ucloud) AWS 實際運維經(jīng)驗者優(yōu)先
2、熟練使用Shell/Python,Python優(yōu)先
3、對Linux操作系統(tǒng)原理有深入了解;熟悉TCP/IP以及常用的網(wǎng)絡(luò)協(xié)議
4、熟悉MySQL,Redis等存儲的高可用、容災(zāi)、備份恢復(fù)、數(shù)據(jù)遷移等技術(shù)
5、熟悉nginx,openresty,tomcat等WEB,應(yīng)用服務(wù)器
6、熟悉 Docker/K8s等容器化技術(shù),具備容器化項目實踐經(jīng)驗優(yōu)先
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇20
網(wǎng)絡(luò)方向:
1.掌握數(shù)據(jù)中心網(wǎng)絡(luò)環(huán)境與拓撲情況,并定期備份各網(wǎng)絡(luò)設(shè)備配置,記錄設(shè)備配置參數(shù)變更情況;
2.負責(zé)實時監(jiān)控數(shù)據(jù)中心整個網(wǎng)絡(luò)的運轉(zhuǎn)和網(wǎng)絡(luò)通信流量情況;負責(zé)對機房、網(wǎng)絡(luò)布線、網(wǎng)絡(luò)配線架的日常巡檢;
3.負責(zé)項目實施過程中網(wǎng)絡(luò)建設(shè)的技術(shù)支持等。
應(yīng)用軟件方向:
1.協(xié)助部門部署應(yīng)用系統(tǒng)、中間件、數(shù)據(jù)庫等;
2.協(xié)助部門承接的軟硬件、網(wǎng)絡(luò)維護項目;
3.綜合協(xié)調(diào)應(yīng)用系統(tǒng)維護疑難問題的會診、溝通和解決等。
平臺硬件方向:
1.Windows Server、Linux業(yè)務(wù)服務(wù)器的配置,維護,監(jiān)控,調(diào)優(yōu),故障排除等;
2.負責(zé)數(shù)據(jù)備份、平臺監(jiān)控、應(yīng)急響應(yīng)、故障排除、編寫分析報告等;
3.Vmware,Openstack的配置,維護,監(jiān)控,調(diào)優(yōu),故障排除等。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇21
職責(zé):
1、負責(zé)公司各項目架構(gòu)設(shè)計,優(yōu)化;
2、負責(zé)各項目應(yīng)用系統(tǒng)及中間件的安裝運維及故障處理。
3、負責(zé)推進公司自動化運維工作,包括應(yīng)用部署、服務(wù)器應(yīng)用統(tǒng)一管理、備份、告警等事項;
4、對運維新技術(shù)有濃厚興趣及研究能力,并引進適合公司的新技術(shù);
5、負責(zé)公司局域網(wǎng)、廣域網(wǎng)的管理及性能優(yōu)化;
6、能夠及時處理各類緊急事件,建立系統(tǒng)化運維流程與相關(guān)規(guī)范。
任職要求:
1、大專以上學(xué)歷,5年以上運維相關(guān)工作經(jīng)驗;
2、精通Centos、Ubuntu等linux系統(tǒng)操作系統(tǒng),對系統(tǒng)性能安全優(yōu)化深入了解。
3、精通Python開發(fā),能夠獨立編寫運維小工具完成自動化運維等工作。
4、精通Mysql數(shù)據(jù)庫,熟悉sql serveroracle數(shù)據(jù)庫,包括mysql安裝、性能優(yōu)化、性能監(jiān)控、冷熱備份、主從復(fù)制、大數(shù)據(jù)割 接, redis搭建、監(jiān)控等;
5、精通Nginx、Tomcat、redis、memcached、rabbitmq等應(yīng)用的安裝配置、性能優(yōu)化;
6、精通Zabbix監(jiān)控,熟悉prometheus更優(yōu);
7、熟悉Jenkins、Git、EFK等工具更優(yōu);
8、熟悉kubernetesdockerservice mesh等技術(shù),能熟練搭建管理集群;
9、刻苦耐勞,具有良好的溝通能力、責(zé)任心,具有較強的自主學(xué)習(xí)能力,獨立解決問題能力。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇22
職責(zé):
1.負責(zé)AWS服務(wù)器的配置、維護、監(jiān)控、優(yōu)化與故障排除,服務(wù)器網(wǎng)絡(luò)管理;
2.數(shù)據(jù)備份、監(jiān)控,應(yīng)急響應(yīng),故障排除;
3.負責(zé)網(wǎng)站程序及軟件服務(wù)器及客戶端的發(fā)布;
4.配合技術(shù)部其它同事,完成技術(shù)相關(guān)運維工作。
職位要求
1.2年以上網(wǎng)站維護及系統(tǒng)運維經(jīng)驗;
2.能熟練使用AWS ELB,AutoScaling,Route53;
3.能熟練掌握nginx,tomcat配置及優(yōu)化;
4.熟悉linux系統(tǒng),能夠安裝與配置,熟悉常用的linux命令及日常的系統(tǒng)維護;
5.熟悉mysql,redis,redshift的優(yōu)先;
6.樂觀開朗,能夠快速融入團隊者優(yōu)先。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇23
職責(zé):
1、軟件產(chǎn)品及項目的部署、安裝、升級、維護,確保系統(tǒng)正常穩(wěn)定運行;
2、項目數(shù)據(jù)庫維護、確保數(shù)據(jù)庫正常運行;
3、及時解決客戶在系統(tǒng)使用過程的各種問題,維護好客戶關(guān)系以及客戶培訓(xùn)工作;
4、收集客戶在系統(tǒng)過程遇到的問題,進行分析和確認,并反饋至相關(guān)負責(zé)人;
5、完成上級安排的其他任務(wù);
任職要求:
1、計算機相關(guān)專業(yè),?萍耙陨蠈W(xué)歷;
2、掌握計算機基礎(chǔ)知識,熟悉常用軟件的安裝與使用;
3、對軟件開發(fā)有一定的了解;
4、了解病毒防護、系統(tǒng)漏洞、防護墻等網(wǎng)絡(luò)安全知識;
5、具有良好的溝通和語言表達能力,邏輯思維能力強,有責(zé)任心,工作態(tài)度端正、積極,有團隊意識及良好的操作規(guī)范意識。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇24
職責(zé):
1、 跟蹤VIP客戶故障處理,做好內(nèi)部管控和客戶溝通。
2、 接應(yīng)服務(wù)請求,包括協(xié)助制定解決方案、審核服務(wù)條款、資源核查、了解運行狀態(tài)等。
3、 針對VIP客戶系統(tǒng)架構(gòu),提出高可用優(yōu)化建議。
4、 組織完成重保服務(wù),在VIP客戶重要活動期間需要短期內(nèi)對關(guān)鍵業(yè)務(wù)進行特別的保障服務(wù)。
5、實時同步客戶服務(wù)檔案,實現(xiàn)動態(tài)更新維護。
任職資格
1、計算機、軟件工程、通信工程等相關(guān)專業(yè),本科以上學(xué)歷;
2、3年以上信息系統(tǒng)維護和客戶業(yè)務(wù)支撐經(jīng)驗;
3、熟悉TCP/IP,能夠?qū)W(wǎng)絡(luò)設(shè)備進行配置;精通WINDOWS、LINUX操作系統(tǒng)配置和優(yōu)化;精通虛擬化、SAN存儲配置及故障處理;
4、熟悉運維流程,能熟練應(yīng)對故障、應(yīng)急事件;
5、具有良好的客戶服務(wù)觀念、工作責(zé)任心及團隊合作精神,具有良好的文檔編寫能力、溝通及表達能力;
6、良好的英文閱讀能力,能熟練上網(wǎng)查找相關(guān)英文技術(shù)資料;
7、獲得PMP、CCIE、CCNP、H3CTE、RHEL等認證資格者優(yōu)先;
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇25
職責(zé):
1、 負責(zé)維護短信管理平臺的系統(tǒng)部署、日志監(jiān)控、應(yīng)急響應(yīng)、平臺升級以及日常的維護等;
2、 負責(zé)linux服務(wù)器的日常維護及文件備份,保護文件安全和權(quán)限分配,維護系統(tǒng)的正常運作,Linux應(yīng)用程序的配置,管理;
3、 負責(zé)對接落地資源、接入資源;配置客戶數(shù)據(jù),為客戶提供技術(shù)支持;優(yōu)化落地線路、資源調(diào)度,使客戶質(zhì)量指標達到。
4、 檢測短信通道的運行情況,遠程重啟短信平臺服務(wù)器,激活短信通道;
5、 用mysql進行各種業(yè)務(wù)的數(shù)據(jù)統(tǒng)計分析。
任職資格:
1、 計算機或相關(guān)專業(yè)大專以上學(xué)歷,1年以上系統(tǒng)運維或相關(guān)工作經(jīng)驗;
2、 熟練使用VOS系統(tǒng)、linux、mysql、shell等腳本命令;
3、 對公有云產(chǎn)品(阿里云)有一定的經(jīng)驗和了解;
4、 豐富的IT平臺監(jiān)控、系統(tǒng)運維經(jīng)驗;
5、 熟悉Mysql、oracle數(shù)據(jù)庫以及redis編程者優(yōu)先;
6、 熟悉Java/Shell/PHP/Python等一種語言者優(yōu)先;
7、 有團隊精神,具有鉆研精神、具有較強的自主學(xué)習(xí)性;
8、 溝通能力強,有強烈的客戶服務(wù)意識;
9、 具有較強的責(zé)任心,能夠在一定壓力下工作,積極主動、認真踏實、獨立解決問題的能力。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇26
職責(zé):
1.負責(zé)公司相關(guān)平臺系統(tǒng)的部署、變更、優(yōu)化、改進;
2.負責(zé)對公司服務(wù)器進行日常維護,確保系統(tǒng)服務(wù)連續(xù)正常運行,無重大事故;
3.參與建立和制定運維標準化流程體系;
4.負責(zé)參與開發(fā)環(huán)境、測試環(huán)境、生產(chǎn)環(huán)境部署架構(gòu)規(guī)劃及落地執(zhí)行;
5.負責(zé)開發(fā)和維護部署工具和運維自動化平臺,實現(xiàn)自動化部署和自動化運維,建立全面/可靠的運維監(jiān)控及告警體系;
6.優(yōu)化產(chǎn)品部署流程,分析應(yīng)用的運行趨勢并找出潛在事件以防止其發(fā)生,定期統(tǒng)計系統(tǒng)運行狀態(tài)報表并提交軟硬件的升級建議;
任職資格:
1.?萍耙陨蠈W(xué)歷;
2.兩年及以上互聯(lián)網(wǎng)運維經(jīng)驗,熟悉公有云服務(wù)或自建機房運維服務(wù)
3.精通shell/awk/sed編程,掌握python/ruby/golang任一種編程語言
4.熟悉Docker、Mysql、Mongodb、Tomcat、LVS、Nginx、Zookeeper、Redis、Rabbitmq、ELK等工具及服務(wù)
5.熟悉如zabbix、openfalcon、grafana等監(jiān)控工具
6.熟悉TCP/IP協(xié)議,對網(wǎng)絡(luò)安全有一定的處理經(jīng)驗
7.了解 DevOps 概念, 熟悉常用的持續(xù)集成工具Jenkins、Git、SVN等
8.了解自動化運維工具如saltstack/ansible/puppet等
9.良好的溝通,表達能力,有責(zé)任心,良好的抗壓能力、學(xué)習(xí)能力。
大數(shù)據(jù)運維工程師的主要職責(zé)說明 篇27
職責(zé):
1.負責(zé)公司內(nèi)部、外部網(wǎng)絡(luò)設(shè)備的管理及運維,數(shù)據(jù)庫維護、優(yōu)化、備份、災(zāi)備與恢復(fù)、應(yīng)急措施等;
2.負責(zé)公司業(yè)務(wù)網(wǎng)絡(luò)設(shè)備的網(wǎng)絡(luò)整體解決方案與規(guī)劃,保證業(yè)務(wù)服務(wù)器、網(wǎng)站的正常運轉(zhuǎn)和升級;
3.負責(zé)各種辦公軟件的安裝、調(diào)試、維護和升級。
任職資格:
1. 本科及以上學(xué)歷,理工科專業(yè)背景;
2年以上互聯(lián)網(wǎng)行業(yè)企業(yè)局域網(wǎng)網(wǎng)絡(luò)調(diào)試、維護工作經(jīng)驗,精通主流數(shù)據(jù)庫的配置與優(yōu)化,數(shù)據(jù)備份與恢復(fù),數(shù)據(jù)安全,數(shù)據(jù)遷移與歸檔,數(shù)據(jù)庫日常監(jiān)控與管理,熟悉SQL SERVER、ORACLE等數(shù)據(jù)庫的安裝;
3.對windows、linux等主流操作系統(tǒng)的業(yè)務(wù)運營有豐富的經(jīng)驗;
4.精通sqlserver和mysql數(shù)據(jù)庫,精通IIS和Apache等中間件的配置和部署,精通windows7和linux服務(wù)器操作系統(tǒng)管理;