Hadoop運(yùn)維工程師崗位職責(zé)(精選30篇)
Hadoop運(yùn)維工程師崗位職責(zé) 篇1
1.負(fù)責(zé)Hadoop相關(guān)項(xiàng)目日常運(yùn)行維護(hù)、故障排查工作;
2.負(fù)責(zé)Hadoop集群的監(jiān)控和配置調(diào)優(yōu)工作;
3.負(fù)責(zé)Hadoop平臺的用戶管理、權(quán)限分配、資源分配;
4.負(fù)責(zé)集群服務(wù)器軟件的安裝、維護(hù)、部署、更新;
Hadoop運(yùn)維工程師崗位職責(zé) 篇2
1.負(fù)責(zé)高并發(fā),大存儲和實(shí)時(shí)流的Hadoop/spark大數(shù)據(jù)平臺規(guī)劃,運(yùn)維,監(jiān)控和優(yōu)化工作;
2.保證Hadoop/spark平臺各核心服務(wù)運(yùn)行的穩(wěn)定、高效;
3.對Hadoop/spark平臺運(yùn)維不斷優(yōu)化,提升數(shù)據(jù)產(chǎn)品的質(zhì)量和響應(yīng)速度;
4.開發(fā)各種Hadoop大數(shù)據(jù)自動化運(yùn)維與監(jiān)控工具;
5.平臺大數(shù)據(jù)環(huán)境的部署維護(hù)和技術(shù)支持;
6.應(yīng)用故障的處理跟蹤及統(tǒng)計(jì)匯總分析;
7.應(yīng)用安全,數(shù)據(jù)的日常備份和應(yīng)急恢復(fù)。
Hadoop運(yùn)維工程師崗位職責(zé) 篇3
1、負(fù)責(zé)移動大數(shù)據(jù)中心的建設(shè)與維護(hù);
2、負(fù)責(zé)安徽移動hadoop集群的故障排查、解決;
3、其他省份hadoop項(xiàng)目建設(shè)提供技術(shù)支持。
Hadoop運(yùn)維工程師崗位職責(zé) 篇4
1. 負(fù)責(zé)Hadoop及相關(guān)組件的部署和維護(hù),保證其穩(wěn)定運(yùn)行;
2. 開發(fā)和使用Hadoop大數(shù)據(jù)自動化運(yùn)維與監(jiān)控工具;
3. 基于大數(shù)據(jù)應(yīng)用需求,不斷調(diào)整和優(yōu)化Hadoop框架及組件的配置,提升性能;
4. 為數(shù)據(jù)倉庫、數(shù)據(jù)挖掘建模等數(shù)據(jù)應(yīng)用項(xiàng)目提供運(yùn)行環(huán)境支持;
Hadoop運(yùn)維工程師崗位職責(zé) 篇5
1.hadoop集群運(yùn)維、監(jiān)控、開發(fā);
2.hadoop生態(tài)圈框架部署、故障處理、異常排查等基本工作;
3.對有助于提升集群處理能力、高可用性、擴(kuò)展性的各種解決方案進(jìn)行跟蹤和落地;
4.解決海量數(shù)據(jù)不斷增長面臨的挑戰(zhàn),解決業(yè)務(wù)需求;
5、 對Hadoop集群進(jìn)行日常管理,保障系統(tǒng)正常運(yùn)行;
Hadoop運(yùn)維工程師崗位職責(zé) 篇6
職責(zé):
1、負(fù)責(zé)zabbix監(jiān)控優(yōu)化、日常告警分析處理;
2、協(xié)助開發(fā)構(gòu)建管理系統(tǒng)環(huán)境,不斷優(yōu)化系統(tǒng)架構(gòu)、提升部署效率、優(yōu)化資源利用率;
3、虛擬化管理,主動協(xié)調(diào)資源推動問題解決;
4、參與系統(tǒng)的監(jiān)控方案、容災(zāi)方案、自動化運(yùn)維方案的制定和實(shí)施。
5、完成協(xié)作團(tuán)隊(duì)領(lǐng)導(dǎo)分配任務(wù)。
任職要求:
1、大專以上學(xué)歷,具有5年以上運(yùn)維工作經(jīng)驗(yàn);
2、專業(yè)知識與技能要求:
A、熟悉常用的linux命令,具有Shell或Python腳本編寫能力;
B、熟悉mysql、mongodb、 ,elasticsearch 等數(shù)據(jù)庫常用的操作;
C、熟悉zabbix,Prometheus監(jiān)控系統(tǒng);
D、有騰訊云等云平臺使用經(jīng)驗(yàn)者優(yōu)先。
3、有 ,k8s經(jīng)驗(yàn);
4、較好的抗壓能力、問題分析與解決能力;
5、較強(qiáng)的責(zé)任感,良好的溝通與協(xié)調(diào)能力。
Hadoop運(yùn)維工程師崗位職責(zé) 篇7
職責(zé):
1、負(fù)責(zé)項(xiàng)目管理、服務(wù)臺、運(yùn)行檢查、設(shè)備管理等基礎(chǔ)維護(hù)工作;
2、根據(jù)運(yùn)維需求及時(shí)完成編寫腳本開發(fā);
3、協(xié)助完成系統(tǒng)升級過程中遇到的問題;
4、負(fù)責(zé)日常軟件的測試工作,主要包括功能性測試和硬件性能測試,向開發(fā)人員提供測試技術(shù)支持;
5、完成領(lǐng)導(dǎo)交辦的其他工作;
崗位要求
1、對操作系統(tǒng)、服務(wù)器及網(wǎng)絡(luò)設(shè)備有扎實(shí)的基礎(chǔ)知識;
2、熟練C++、Shell腳本開發(fā)與測試,掌握SQL等數(shù)據(jù)庫語言;
3、熟悉Windows、Linux操作系統(tǒng)的使用與配置;
4、有一定的系統(tǒng)測試經(jīng)驗(yàn)。
Hadoop運(yùn)維工程師崗位職責(zé) 篇8
職責(zé):
1、定點(diǎn)駐場(在客戶單位)做運(yùn)維工作,工作地址:西昌(請確定上班地址后投遞簡歷),維護(hù)公司各平臺軟件在客戶單位的正常運(yùn)行,解決客戶各種突發(fā)問題;
2、定期提交運(yùn)維報(bào)告,向公司匯報(bào);
3、項(xiàng)目運(yùn)維,客戶溝通售后服務(wù)等。
任職條件:
1、大專及以上學(xué)歷、計(jì)算機(jī)相關(guān)專業(yè),2年以上運(yùn)維相關(guān)工作經(jīng)驗(yàn);
2、熟悉主流交換機(jī)、路由器、防火墻等網(wǎng)絡(luò)設(shè)備的配置與調(diào)試;
3、熟悉linux操作系統(tǒng)的安裝、操作和維護(hù);熟悉mysql數(shù)據(jù)庫
4、具有軟件系統(tǒng)的運(yùn)維工作經(jīng)歷;
5、熟悉網(wǎng)絡(luò)設(shè)備和網(wǎng)絡(luò)安全設(shè)備,有一定網(wǎng)絡(luò)安全解決方案的寫作能力;
6、了解網(wǎng)絡(luò)設(shè)備及相關(guān)交換機(jī)、路由器配置;
7、性格積極向上,溝通及承壓能力強(qiáng),能適應(yīng)突發(fā)事件連續(xù)加班工作
Hadoop運(yùn)維工程師崗位職責(zé) 篇9
職責(zé):
1、負(fù)責(zé)各環(huán)境的虛擬化搭建及運(yùn)維,系統(tǒng)的安裝、配置、監(jiān)控和維護(hù)、問題處理、軟件升級,故障排除保證線上環(huán)境的穩(wěn)定運(yùn)行
2、負(fù)責(zé)分布式系統(tǒng)的部署、發(fā)布、監(jiān)控、數(shù)據(jù)備份、維護(hù)和優(yōu)化
3、負(fù)責(zé)集團(tuán)(香港、上海)網(wǎng)絡(luò)、防火墻、路由器的設(shè)置維護(hù)工作,加強(qiáng)公司信息安全管理。
4、主動發(fā)現(xiàn)生產(chǎn)環(huán)境的問題及隱患,針對突發(fā)事件能夠運(yùn)用監(jiān)控、日志、APM等工具進(jìn)行問題定位與分析,應(yīng)用自動化運(yùn)維工具來降低手工操作的維護(hù)成本。
5、配合制定并落實(shí)相關(guān)運(yùn)維制度及安全防范制度
任職要求:
1、全日制本科以上學(xué)歷,計(jì)算機(jī)網(wǎng)絡(luò)相關(guān)專業(yè)
2、精通Linux和Windows操作系統(tǒng)的維護(hù),擅長腳本開發(fā)
3、有阿里云/aws等云產(chǎn)品使用經(jīng)驗(yàn)
4、具備網(wǎng)絡(luò)故障排錯(cuò)能力,保障網(wǎng)絡(luò)安全
5、熟悉主流監(jiān)控系統(tǒng)Zabbix/Cacti/Nagios的應(yīng)用及擴(kuò)展
6、熟悉服務(wù)器虛擬化容器技術(shù)
7、熟悉常見Web系統(tǒng)架構(gòu),熟練配置、管理及其優(yōu)化,如lvs/nginx/haproxy/keepalived等相關(guān)
8、對中間件故障能快速定位、排查分析
Hadoop運(yùn)維工程師崗位職責(zé) 篇10
職責(zé):
1、 負(fù)責(zé)公司各類應(yīng)用系統(tǒng)的日常技術(shù)維護(hù)及系統(tǒng)配置;
2、 負(fù)責(zé)數(shù)據(jù)及報(bào)表的整理及分析;
3、 跟蹤、處理ERP系統(tǒng)異常數(shù)據(jù),解決用戶問題;
4、 負(fù)責(zé)用戶需求的收集與整理,完善軟件操作手冊、業(yè)務(wù)流程、方案、培訓(xùn)手冊及系統(tǒng)維護(hù)日志等各類文檔的編寫、整理、更新;
5、 參與系統(tǒng)開發(fā)與整體、單元測試工作。
任職要求:
1、全日制本科及以上學(xué)歷,2年以上ERP維護(hù)經(jīng)驗(yàn);
2、對業(yè)務(wù)流程及解決方案具備較好的理解力;
3、熟悉SQL Server/Oracle/MySql數(shù)據(jù)庫及SQL&PL/SQL編程語言,能熟練使用相關(guān)監(jiān)控、分析、開發(fā)和管理工具,具備DBA經(jīng)驗(yàn)者優(yōu)先;
4、精通linux操作系統(tǒng)指令,能夠利用shell進(jìn)行日常的運(yùn)維工作,能熟練編寫腳本,具有獨(dú)立部署日志收集、分析及圖表輸出的系統(tǒng)運(yùn)維管理經(jīng)驗(yàn);
5、熟悉Nginx/Tomcat/Redis等常用軟件安裝、維護(hù);
6、有良好的溝通和語言表達(dá)能力,邏輯清晰,學(xué)習(xí)能力強(qiáng),性格沉穩(wěn),有自我激勵(lì)能力,樂于承擔(dān)工作壓力,責(zé)任心強(qiáng)。
Hadoop運(yùn)維工程師崗位職責(zé) 篇11
職責(zé):
(1)負(fù)責(zé)網(wǎng)絡(luò)監(jiān)控系統(tǒng)的實(shí)施與維護(hù);
(2)系統(tǒng)日常運(yùn)維(Linux系統(tǒng)維護(hù)、應(yīng)用軟件的維護(hù)支持);
(3)軟件的部署與實(shí)施;
(4)協(xié)助IBM Tivoli Netcool網(wǎng)絡(luò)管理產(chǎn)品軟硬件售后服務(wù)的技術(shù)支持;
(5)協(xié)助相關(guān)網(wǎng)絡(luò)簡單文檔編寫,并進(jìn)行相關(guān)的實(shí)施與服務(wù);
(6)協(xié)助相關(guān)網(wǎng)絡(luò)集成項(xiàng)目中的售后實(shí)施和服務(wù)。
崗位要求:
1.具有1年以上軟件/系統(tǒng)運(yùn)維工作經(jīng)驗(yàn);
2.熟練使用Office辦公軟件;
3.了解網(wǎng)絡(luò)路由交換技術(shù),有一定實(shí)踐經(jīng)驗(yàn)更佳;
4.掌握Oracle、Linux、Unix操作系統(tǒng)相關(guān)技術(shù),有一定實(shí)踐經(jīng)驗(yàn);
5.計(jì)算機(jī)與通信相關(guān)專業(yè)本科及以上學(xué)歷;
6.良好的語言表達(dá)能力、溝通能力、責(zé)任心及團(tuán)隊(duì)合作意識。
7.有redhat等相關(guān)系統(tǒng)認(rèn)證優(yōu)先
8.熟悉主流開發(fā)語言優(yōu)先考慮
Hadoop運(yùn)維工程師崗位職責(zé) 篇12
職責(zé):
負(fù)責(zé)公司操作系統(tǒng)及其相關(guān)應(yīng)用組件的日常維護(hù)工作,確保系統(tǒng)穩(wěn)定、安全、可靠的運(yùn)行;
負(fù)責(zé)公司操作系統(tǒng)和應(yīng)用中間件的部署、配置和變更工作,確保配置項(xiàng)及時(shí)更新和穩(wěn)定的運(yùn)行;
負(fù)責(zé)公司操作系統(tǒng)和應(yīng)用的日常監(jiān)控及巡檢,及時(shí)進(jìn)行故障排除,確保系統(tǒng)的健康程度;
負(fù)責(zé)公司業(yè)務(wù)系統(tǒng)的程序發(fā)布工作,優(yōu)化發(fā)布流程,確保業(yè)務(wù)系統(tǒng)的穩(wěn)定運(yùn)行;
按公司運(yùn)維體系的要求及時(shí)完成相關(guān)工作任務(wù);
協(xié)助部門主管完善運(yùn)維的工作流程和制度;
完成部門領(lǐng)導(dǎo)交辦的工作任務(wù);
職位要求:
本科及以上學(xué)歷,計(jì)算機(jī)或相關(guān)專業(yè),3年以上IT運(yùn)維的工作經(jīng)驗(yàn);
有ITIL Foundation、PRINCE2、DEVOPS證書者優(yōu)先考慮;
有操作系統(tǒng)、數(shù)據(jù)庫等任一類認(rèn)證證書者優(yōu)先考慮;
熟悉Linux系統(tǒng)的管理工作,能夠獨(dú)立編寫腳本解決日常問題者優(yōu)先考慮;
具有良好的客戶服務(wù)和團(tuán)隊(duì)合作意識,有較強(qiáng)的責(zé)任感和執(zhí)行力;
具有較強(qiáng)的溝通表達(dá)、歸納總結(jié)的能力,良好的文檔撰寫能力;
具有較強(qiáng)的數(shù)據(jù)安全和保密意識;
Hadoop運(yùn)維工程師崗位職責(zé) 篇13
職責(zé):
1、負(fù)責(zé)公司業(yè)務(wù)系統(tǒng)、網(wǎng)絡(luò)、數(shù)據(jù)庫、應(yīng)用的維護(hù)、管理及優(yōu)化等;
2、處理系統(tǒng)、應(yīng)用、數(shù)據(jù)庫、網(wǎng)絡(luò)等故障,分析并挖掘問題隱患、配合制作相關(guān)預(yù)案;
3、負(fù)責(zé)日志分析備份、數(shù)據(jù)備份、故障排除、性能優(yōu)化等工作,對提高系統(tǒng)可用性提出建議;
4、辦公網(wǎng)日常管理。
任職要求:
1. 大學(xué)本科學(xué)歷,1年以上系統(tǒng)運(yùn)維工作經(jīng)驗(yàn);
2. 具有良好的計(jì)算機(jī)軟、硬件知識,能夠發(fā)現(xiàn)、診斷、獨(dú)立分析、解決系統(tǒng)運(yùn)行中出現(xiàn)的問題;
3. 熟悉常用的操作系統(tǒng)(Windows,Linux)的安裝、操作、配置、故障處理,具備微軟商業(yè)桌面部署的相關(guān)知識及實(shí)施能力;
4.具備網(wǎng)絡(luò)基礎(chǔ)知識,對相關(guān)網(wǎng)絡(luò)設(shè)備及綜合布線有一定了解;
5.有一定的數(shù)據(jù)庫基礎(chǔ),熟悉MsSQL、Oracle、MySQL等;
6.具備良好的服務(wù)意識與職業(yè)素養(yǎng),溝通能力和良好的語言表達(dá)能力,具備團(tuán)隊(duì)協(xié)作精神。
Hadoop運(yùn)維工程師崗位職責(zé) 篇14
職責(zé):
1、負(fù)責(zé)軟件項(xiàng)目的日常運(yùn)維、測試及升級;
2、負(fù)責(zé)軟件項(xiàng)目的日常使用過程中的業(yè)務(wù)答疑及用戶培訓(xùn)工作;
3、負(fù)責(zé)軟件系統(tǒng)運(yùn)維相關(guān)流程的規(guī)劃、設(shè)計(jì)、推行、實(shí)施和持續(xù)改進(jìn);
4、負(fù)責(zé)編寫運(yùn)維相關(guān)文檔。
任職要求:
1、大專學(xué)歷,計(jì)算機(jī)、軟件工程等相關(guān)專業(yè)優(yōu)先;
2、一年以上制造相關(guān)軟件系統(tǒng)(WMS、ERP、MES、HR)運(yùn)維工作經(jīng)驗(yàn);
3、至少熟悉一種數(shù)據(jù)庫,如ORACLE、MySQL,有開發(fā)經(jīng)驗(yàn)優(yōu)先;
4、具備Office辦公套件的基本使用能力;
5、積極、主動、敬業(yè),具備良好的溝通協(xié)調(diào)、文字表達(dá)能力和團(tuán)隊(duì)精神;
6、工作認(rèn)真、細(xì)致,獨(dú)立工作能力強(qiáng),可適應(yīng)突發(fā)性加班。
Hadoop運(yùn)維工程師崗位職責(zé) 篇15
職責(zé):
1、負(fù)責(zé)服務(wù)器的配置、維護(hù)、監(jiān)控、調(diào)優(yōu),故障排除等。
2、運(yùn)維自動化及運(yùn)維腳本開發(fā)。
3、高可用性服務(wù)器系統(tǒng)部署方案的制定及實(shí)施與監(jiān)控。
4、及時(shí)響應(yīng)并處理線上故障。
5、推動及開發(fā)高效的自動化運(yùn)維、管理工具,提升運(yùn)維工作效率。
任職要求:
1、大學(xué)?埔陨蠈W(xué)歷,有2年及以上互聯(lián)網(wǎng)公司運(yùn)維方面經(jīng)驗(yàn)。
2、高度責(zé)任感,性格沉穩(wěn),心思縝密,有耐心,能積極應(yīng)對壓力,能接受并完成高重復(fù)性的事情。
3、熟練使用Linux和Mysql,熟悉nginx、tomcat、redis、mq、git的安裝部署和優(yōu)化。
4、至少掌握一種自動化運(yùn)維工具(ansible、puppet、saltstack)。
5、熟悉TCP/IP、HTTP等協(xié)議,有良好的網(wǎng)絡(luò)、數(shù)據(jù)傳輸、安全、計(jì)算機(jī)體系結(jié)構(gòu)方面的知識。
6、高度的責(zé)任感,較強(qiáng)的故障分析及排查能力,善于在工作中學(xué)習(xí),能承受工作壓力。
7、認(rèn)同DevOps文化,積極了解和學(xué)習(xí)自動化方式處理各種問題。
Hadoop運(yùn)維工程師崗位職責(zé) 篇16
職責(zé):
1、負(fù)責(zé)規(guī)劃和優(yōu)化系統(tǒng)架構(gòu),提升系統(tǒng)性能及穩(wěn)定性,保證系統(tǒng)7*24穩(wěn)定運(yùn)行;
2、負(fù)責(zé)開發(fā)、完善系統(tǒng)監(jiān)控、報(bào)警體系;
3、負(fù)責(zé)建立和實(shí)施系統(tǒng)部署自動化和標(biāo)準(zhǔn)化的工具體系和日常操作;
4、參與業(yè)務(wù)系統(tǒng)的設(shè)計(jì)與實(shí)施,系統(tǒng)架構(gòu)的可運(yùn)維性設(shè)計(jì)、容量規(guī)劃;
5、深入研究運(yùn)維相關(guān)技術(shù),包括運(yùn)維自動化技術(shù),虛擬化技術(shù),監(jiān)控技術(shù),網(wǎng)絡(luò)技術(shù)等;
6、探索、研究新的運(yùn)維技術(shù)方向,跟蹤業(yè)界的趨勢并以合理的性價(jià)比轉(zhuǎn)化率公司內(nèi)部生產(chǎn)力;
任職要求:
1、三年以上的LINUX服務(wù)器集群運(yùn)維經(jīng)驗(yàn);
2、深入理解Linux操作系統(tǒng)、體系結(jié)構(gòu),精通Shell/Perl/Python等語言中的一種或多種;
3、精通nagios/cacti/zabbix等監(jiān)控管理工具,有二次開發(fā)經(jīng)驗(yàn)更佳;
4、深入理解openstack/kubernetes架構(gòu)和運(yùn)維;
5、具備中大型集群的網(wǎng)絡(luò)結(jié)構(gòu)設(shè)計(jì)和規(guī)劃能力;
6、具備虛擬化技術(shù)、云計(jì)算技術(shù)、容器技術(shù)等相關(guān)經(jīng)驗(yàn)者優(yōu)先考慮;
7、強(qiáng)烈的責(zé)任心與主動性,對所負(fù)責(zé)工作有owner意識,并能自我驅(qū)動。
Hadoop運(yùn)維工程師崗位職責(zé) 篇17
職責(zé):
1、負(fù)責(zé)公司業(yè)務(wù)項(xiàng)目網(wǎng)絡(luò)支撐工作(搭建內(nèi)部網(wǎng)絡(luò),硬件管理,外部賬號);
2、負(fù)責(zé)公司云服務(wù)器的管理工作;
3、負(fù)責(zé)業(yè)務(wù)系統(tǒng)的應(yīng)用運(yùn)維工作,包括安裝、配置、升級、監(jiān)控、異常處理等;
4、負(fù)責(zé)業(yè)務(wù)系統(tǒng)的日常巡檢,并進(jìn)行應(yīng)用運(yùn)維自動化的研究和探索。
任職資格:
1、大專以上學(xué)歷,計(jì)算機(jī)/軟件工程等相關(guān)專業(yè);
2、4年以上互聯(lián)網(wǎng)運(yùn)維經(jīng)驗(yàn),有知名互聯(lián)網(wǎng)公司運(yùn)維經(jīng)驗(yàn)者優(yōu)先;
3、精通docker、jenkins,J2EE架構(gòu),Java基礎(chǔ)扎實(shí),理解IO、多線程、集合等基礎(chǔ)框架;
4、有自動化運(yùn)維、持續(xù)交付等項(xiàng)目的建設(shè)及管理經(jīng)驗(yàn)優(yōu)先;
5、有高并發(fā)、高負(fù)載產(chǎn)品成功經(jīng)驗(yàn)者優(yōu)先。
Hadoop運(yùn)維工程師崗位職責(zé) 篇18
與主要客戶員建立良好關(guān)系;
SLA達(dá)成及客戶滿意度高;
圍繞問題和機(jī)遇進(jìn)行良好的溝通——把事情做好,解決緊急case;
做好服務(wù)報(bào)告;
技術(shù)文件的更新和整理。
自學(xué)新技術(shù)和新產(chǎn)品
服務(wù)報(bào)告及承辦服務(wù)提供會議;
消除客戶滿意的所有障礙
關(guān)注客戶和MTS的長期利益;
跟進(jìn)服務(wù)提供不符合預(yù)期的情況; 成功的服務(wù)交付;
Hadoop運(yùn)維工程師崗位職責(zé) 篇19
1、設(shè)計(jì)網(wǎng)絡(luò)設(shè)備、服務(wù)器及安全系統(tǒng)的拓?fù)浣Y(jié)構(gòu)
2、開展對公司各平臺服務(wù)器硬件的巡檢;桌面計(jì)算機(jī)軟硬件(計(jì)算機(jī)、顯示器、電話、網(wǎng)絡(luò)設(shè)施和其他附屬硬件設(shè)施,如打印機(jī)、掃描儀)安裝、配置、升級、運(yùn)行維護(hù)與管理,保障桌面系統(tǒng)正常運(yùn)行,滿足日常工作的需要;對網(wǎng)絡(luò)設(shè)備、服務(wù)器及安全系統(tǒng)等運(yùn)行監(jiān)控與管理,負(fù)責(zé)對公司綜合布線系統(tǒng)的維護(hù)與管理;撰寫運(yùn)維技術(shù)文檔。
3、根據(jù)運(yùn)維、巡檢報(bào)告等統(tǒng)計(jì)整理運(yùn)維數(shù)據(jù)定期評估平臺的硬件、軟件的服務(wù)能力,出具評估報(bào)告。
4、完成領(lǐng)導(dǎo)交辦的其他工作。
Hadoop運(yùn)維工程師崗位職責(zé) 篇20
職責(zé):
1、負(fù)責(zé)分布式大數(shù)據(jù)平臺產(chǎn)品的運(yùn)維和運(yùn)維開發(fā),保證其高可用和穩(wěn)定性;
2、負(fù)責(zé)大數(shù)據(jù)系統(tǒng)架構(gòu)的可運(yùn)維性設(shè)計(jì)、容量規(guī)劃、服務(wù)監(jiān)控,持續(xù)優(yōu)化服務(wù)架構(gòu)、集群性能;
3、通過技術(shù)手段控制和優(yōu)化成本,通過自動化工具及流程提升大數(shù)據(jù)平臺運(yùn)維效率;
4、為項(xiàng)目開發(fā)人員提供大數(shù)據(jù)技術(shù)指導(dǎo)及解決大數(shù)據(jù)平臺應(yīng)用中遇到的技術(shù)難題;
任職資格:
1、三年以上大數(shù)據(jù)運(yùn)維相關(guān)工作經(jīng)驗(yàn),有大型互聯(lián)網(wǎng)公司工作經(jīng)驗(yàn)者優(yōu)先,全日制本科及以上學(xué)歷;
2、熟練掌握至少一門開發(fā)語言,有Java或Python語言開發(fā)經(jīng)驗(yàn)優(yōu)先;
3、精通Hadoop生態(tài)及高性能緩存相關(guān)的各種工具并有實(shí)戰(zhàn)經(jīng)驗(yàn),包括但不限于Hadoop、HBase、Hive、Presto、Kafka、Spark、Yarn、Flink、Logstash、Flume、ClickHouse等;
4、熟悉Mysql等常用關(guān)系數(shù)據(jù)庫,熟練編寫SQL語句,有分布式nosql數(shù)據(jù)庫應(yīng)用、性能調(diào)優(yōu)經(jīng)驗(yàn)優(yōu)先;
5、熟悉Linux環(huán)境,能夠熟悉使用shell腳本;
6、對大數(shù)據(jù)技術(shù)有強(qiáng)烈興趣,有志于往大數(shù)據(jù)方向深層次發(fā)展;
7、具有很強(qiáng)的責(zé)任心、執(zhí)行力、服務(wù)意識、學(xué)習(xí)能力和抗壓能力;
8、具備較好的溝通能力、主動性及責(zé)任感。
Hadoop運(yùn)維工程師崗位職責(zé) 篇21
職責(zé)
1、維護(hù)基于Linux的系統(tǒng)和相應(yīng)的組件;
2、維護(hù)Hadoop集群,包括hdfs、hive、sqoop、kafka等核心生態(tài)系統(tǒng),確保集群運(yùn)行平穩(wěn);
3、基于實(shí)踐,根據(jù)業(yè)務(wù)需求設(shè)計(jì)和優(yōu)化Hadoop生態(tài)系統(tǒng);
4、設(shè)計(jì)和維護(hù)Hadoop相關(guān)基礎(chǔ)設(shè)施的監(jiān)控;
5、維護(hù)技術(shù)文件;
6、根據(jù)業(yè)務(wù)需求設(shè)計(jì)和安裝新的生態(tài)系統(tǒng)或技術(shù)組件,并制定最終解決方案。
任職資格
1、本科及以上,信息技術(shù)或相關(guān)專業(yè);
2、2年以上企業(yè)Linux系統(tǒng)和Hadoop經(jīng)驗(yàn);
3、Hadoop生態(tài)系統(tǒng)的經(jīng)驗(yàn)和知識(必須具備:HDFS, Yarn, Hive, HUE;傾向具備:MapReduce、Spark、Kafka、Logstash、Flume);
3、較強(qiáng)的事故分析和故障排除能力,較強(qiáng)的shell腳本編寫能力;
4、了解HA機(jī)制者優(yōu)先;有ITIL知識者優(yōu)先;
5、有跨國工作經(jīng)驗(yàn)者優(yōu)先;
6、愿意學(xué)習(xí)新事物,解決問題。
Hadoop運(yùn)維工程師崗位職責(zé) 篇22
1.負(fù)責(zé)公司大數(shù)據(jù)業(yè)務(wù)集群的運(yùn)維工作(Hadoop/Hbase/Hive/Yarn/Spark/impala/kudu等)確保集群環(huán)境的穩(wěn)定可用;
2.負(fù)責(zé)集群容量規(guī)劃、擴(kuò)容及性能優(yōu)化;
3.負(fù)責(zé)大數(shù)據(jù)集群性能監(jiān)控與優(yōu)化,故障處理,數(shù)據(jù)備份及容災(zāi)恢復(fù),集群出現(xiàn)異常時(shí),能快速定位問題,并及時(shí)給出解決方案;
4.設(shè)計(jì)實(shí)現(xiàn)大規(guī)模分布式集群的運(yùn)維、監(jiān)控和管理平臺;
5.參與/主導(dǎo)業(yè)務(wù)架構(gòu)設(shè)計(jì),在設(shè)計(jì)階段給出可運(yùn)維性改進(jìn)建議;
6.深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運(yùn)維技術(shù),持續(xù)優(yōu)化集群服務(wù)架構(gòu),探索新的大數(shù)據(jù)運(yùn)維技術(shù)及發(fā)展方向;
7.參與例如服務(wù)器維護(hù)、項(xiàng)目維護(hù)、監(jiān)控維護(hù)等常見運(yùn)維事務(wù)
Hadoop運(yùn)維工程師崗位職責(zé) 篇23
職責(zé):
1、根據(jù)業(yè)務(wù)需求,為JAVA應(yīng)用性能管理提供規(guī)劃、建設(shè)、運(yùn)營所需技術(shù)支持和建議。
2、保障JAVA應(yīng)用業(yè)務(wù)軟件(tomcat、websphere、Jboss、WebLogic)和tuxedo平臺運(yùn)行的穩(wěn)定性和可靠性。
3、對數(shù)據(jù)庫問題排查,SQL語句性能優(yōu)化;
4、對多個(gè)產(chǎn)品,應(yīng)用業(yè)務(wù)軟件故障的及時(shí)響應(yīng)與定位分析,架構(gòu)優(yōu)化。
5、排查定位跟蹤故障處理過程。
6、對應(yīng)用性能持續(xù)管理。
7、定期匯報(bào)應(yīng)用性能狀況。
8、對應(yīng)用性能管理制定規(guī)范和標(biāo)準(zhǔn)。
2年及以上互聯(lián)網(wǎng)系統(tǒng)運(yùn)維經(jīng)驗(yàn)
崗位要求:
1、計(jì)算機(jī)或相關(guān)專業(yè)本科或以上學(xué)歷
2、精通Linux操作系統(tǒng)原理、網(wǎng)絡(luò)原理、JAVA語言,有相關(guān)系統(tǒng)優(yōu)化經(jīng)驗(yàn)者優(yōu)先。
3、精通tomcat、websphere、Jboss、WebLogic等中間件的故障排查、性能調(diào)優(yōu);
4、熟悉數(shù)據(jù)庫以及SQL語言,精通SQL語句性能優(yōu)化;
5、熟悉linux系統(tǒng),精通nginx,memcache等常用應(yīng)用服務(wù)器的架設(shè)管理與維護(hù),能夠排查故障、性能調(diào)優(yōu);
6、熟悉高可用集群、負(fù)載均衡集群的規(guī)劃與搭建;
7、良好的溝通、組織協(xié)調(diào)能力和強(qiáng)烈的責(zé)任心,具備很強(qiáng)的分析和解決問題的能力;
8、善于學(xué)習(xí),樂于溝通,高度責(zé)任感。
9、有產(chǎn)品線架構(gòu)優(yōu)化,性能優(yōu)化,海量JAVA應(yīng)用優(yōu)化經(jīng)驗(yàn)者優(yōu)先。
Hadoop運(yùn)維工程師崗位職責(zé) 篇24
職責(zé):
1、負(fù)責(zé)公司服務(wù)器維護(hù)保證業(yè)務(wù)穩(wěn)定.
2、負(fù)責(zé)日志分析、健康檢查、性能監(jiān)控等.
3、負(fù)責(zé)公司開發(fā)相關(guān)賬號的權(quán)限控制以及維護(hù).
4、配合業(yè)務(wù)運(yùn)維、開發(fā)、測試以及其他相關(guān)團(tuán)隊(duì)完成運(yùn)維相關(guān)工作.
技能要求:
1、熟悉自動化運(yùn)維工具
2、熟悉Linux命令
3、熟悉阿里云常用產(chǎn)品的維護(hù)與優(yōu)化.
4、熟悉Docker原理并有使用經(jīng)驗(yàn)
5、有打造DevOps平臺的想法(將CI、CD、日常運(yùn)維、監(jiān)控告警、智能運(yùn)維打造一體化DevOps平臺)
6、熟悉keepalived、nginx、php、java、redis等生產(chǎn)環(huán)境的部署應(yīng)用及調(diào)優(yōu)
7、有pc電腦以及企業(yè)網(wǎng)絡(luò)(交換機(jī),路由器,無線AP)維護(hù)經(jīng)驗(yàn)優(yōu)先
8、熟悉k8s,istio優(yōu)先
Hadoop運(yùn)維工程師崗位職責(zé) 篇25
職責(zé):
1、負(fù)責(zé)項(xiàng)目在客戶現(xiàn)場的系統(tǒng)搭建、初始化設(shè)定和系統(tǒng)升級、功能測試、用戶驗(yàn)收
2、負(fù)責(zé)項(xiàng)目運(yùn)維階段應(yīng)用回訪、跟進(jìn)、改善和報(bào)告編寫,定期分析客戶數(shù)據(jù)并溝通記錄新需求;
3、根據(jù)要求參與項(xiàng)目各個(gè)階段的工作例會并完成相關(guān)報(bào)告
4、編制參與項(xiàng)目各個(gè)階段的項(xiàng)目文件:如工作記錄等;
5、與項(xiàng)目相關(guān)方日常溝通協(xié)調(diào),保證項(xiàng)目順利執(zhí)行;
6、負(fù)責(zé)客戶使用培訓(xùn)及客戶使用問題答疑。
崗位要求
1、計(jì)算機(jī)相關(guān)專業(yè),具備2年以上項(xiàng)目實(shí)施工作經(jīng)驗(yàn);
2、能夠適應(yīng)不定期的出差工作;
3、具備較強(qiáng)的溝通和協(xié)調(diào)能力,問題發(fā)現(xiàn)和解決的能力;
4、具備高度的自我激勵(lì)能力、團(tuán)隊(duì)管理能力、有責(zé)任心、使命感以及誠信度;
5、熟練應(yīng)用sql語句,熟悉sqlserver/mysql/oracle任何一種數(shù)據(jù)庫,熟悉office 有良好的文檔編寫能力;
6、熟悉tomcat,熟練使用Linux等主流服務(wù)器操作系統(tǒng)。
Hadoop運(yùn)維工程師崗位職責(zé) 篇26
職責(zé):
負(fù)責(zé)機(jī)房數(shù)據(jù)中心內(nèi)的網(wǎng)絡(luò)及系統(tǒng)維護(hù)工作,了解企業(yè)網(wǎng)絡(luò)布局、內(nèi)外網(wǎng)聯(lián)接情況,監(jiān)控內(nèi)部網(wǎng)絡(luò)運(yùn)轉(zhuǎn)情況;
負(fù)責(zé)服務(wù)器的系統(tǒng)安裝,如windows/Linux操作系統(tǒng)等;
負(fù)責(zé)解決各類網(wǎng)絡(luò)和服務(wù)器技術(shù)問題,及相關(guān)故障處理;
計(jì)算機(jī)系統(tǒng)日常維護(hù)(軟硬件維護(hù));
負(fù)責(zé)運(yùn)維部門管理、團(tuán)隊(duì)建設(shè),人員培養(yǎng),KPI考核 。
任職要求:
5年以上團(tuán)隊(duì)管理經(jīng)驗(yàn)
精通主流IBM、DELL等品牌服務(wù)器的安裝、調(diào)試;
精通常用服務(wù)器或PC機(jī)硬件配置,有組裝和拆裝硬件經(jīng)驗(yàn);
精通VMware、Citrix等虛擬化產(chǎn)品部署發(fā)布;
精通windows/Linux服務(wù)器操作系統(tǒng)安裝、配置;
精通使用OSPF、BGP、二三層交換、vlan、生成樹、策略路由、WLAN等技術(shù);
精通臺式電腦、筆記本電腦故障診斷。
Hadoop運(yùn)維工程師崗位職責(zé) 篇27
1、負(fù)責(zé)用戶桌面運(yùn)維(Helpdesk),包括電腦、顯示器、外設(shè)、電話、打印機(jī)、監(jiān)控、門禁系統(tǒng)、視頻會議設(shè)備的維護(hù)、巡檢、盤點(diǎn)
2、負(fù)責(zé)網(wǎng)絡(luò)設(shè)備及線路的維護(hù)、監(jiān)控、盤點(diǎn)、故障登記及處理
3、負(fù)責(zé)操作系統(tǒng)的重裝、Ghost鏡像封裝、軟件安裝、網(wǎng)絡(luò)配置、病毒查殺、標(biāo)準(zhǔn)化
4、負(fù)責(zé)接收用戶提交的桌面故障和服務(wù)請求、快速響應(yīng)和處理,提供高質(zhì)量的服務(wù)
5、對公司內(nèi)部人員進(jìn)行日常IT培訓(xùn),提升員工電腦操作水平
6、撰寫常見的故障處理方法(FAQ)、操作指引、知識庫等
7、參與對機(jī)房、網(wǎng)絡(luò)設(shè)備、服務(wù)器的日常巡檢、維護(hù) 8、完成領(lǐng)導(dǎo)交辦的其他事務(wù)工作
Hadoop運(yùn)維工程師崗位職責(zé) 篇28
職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)基礎(chǔ)架構(gòu)平臺(Hadoop/Spark/MPP DB)的自動部署;
2、負(fù)責(zé)線上數(shù)據(jù)平臺的運(yùn)維,保障服務(wù)的穩(wěn)定性和可用性;
3、參與超大規(guī)模數(shù)據(jù)快速查詢系統(tǒng)的架構(gòu)設(shè)計(jì)和開發(fā);
4、研究大數(shù)據(jù)前沿技術(shù),改進(jìn)現(xiàn)有系統(tǒng)的服務(wù)和運(yùn)維架構(gòu),提升系統(tǒng)的運(yùn)維效率。
任職要求:
1. 熟悉linux shell及SQL語言
2. 了解Hadoop等分布式技術(shù),數(shù)據(jù)倉庫技術(shù);
3. 熟悉數(shù)據(jù)倉庫數(shù)據(jù)流監(jiān)控、故障自動化定位及運(yùn)維;
4. 強(qiáng)烈的責(zé)任心與求知欲,愿意學(xué)習(xí)新技術(shù)并能快速應(yīng)用;
5. 有較強(qiáng)的書面與口頭溝通表達(dá)能力,獨(dú)立分析、解決問題的能力;
6、做事認(rèn)真負(fù)責(zé),自學(xué)能力較強(qiáng)。
Hadoop運(yùn)維工程師崗位職責(zé) 篇29
職責(zé):
1、負(fù)責(zé)業(yè)務(wù)系統(tǒng)基礎(chǔ)設(shè)施維護(hù),保障服務(wù)器與數(shù)據(jù)庫安全,檢查并消除安全漏洞;數(shù)據(jù)備份、數(shù)據(jù)監(jiān)控、應(yīng)急響應(yīng)、故障排除、編寫數(shù)據(jù)分析報(bào)告等。
2、負(fù)責(zé)Linux服務(wù)器的配置,維護(hù),監(jiān)控,調(diào)優(yōu),故障排除,網(wǎng)絡(luò)優(yōu)化等;大用戶量下高性能服務(wù)器系統(tǒng)部署方案的制定及實(shí)施;
任職要求(任意三條):
1、擁有對業(yè)務(wù)流向的邏輯理解能力,對軟件相關(guān)流量中的安全性有所考慮,對安全設(shè)備、網(wǎng)絡(luò)設(shè)備有了解。
2、熟悉centos/redhat系列l(wèi)inux系統(tǒng),有2年以上linux系統(tǒng)工作經(jīng)驗(yàn);
3、熟悉常見的分布并發(fā)及負(fù)載均衡實(shí)現(xiàn)方案并有實(shí)際實(shí)施經(jīng)驗(yàn),有負(fù)載壓力及并發(fā)量控制經(jīng)驗(yàn);
4、熟練掌握Linux系統(tǒng)及常見服務(wù)的安裝配置,能靈活運(yùn)用shell等相關(guān)腳本語言,熟悉mysql、Oracle等數(shù)據(jù)庫的部署、配置、數(shù)據(jù)備份機(jī)制等;
5、熟悉apache,nginx,php,squid,lvs,haproxy,mysql,redis,java等服務(wù)的安裝配置,有實(shí)際運(yùn)維經(jīng)驗(yàn)者優(yōu)先;
6、負(fù)責(zé)Linux服務(wù)器的配置,維護(hù),監(jiān)控,調(diào)優(yōu),故障排除,網(wǎng)絡(luò)優(yōu)化等;大用戶量下高性能服務(wù)器系統(tǒng)部署方案的制定及實(shí)施;
Hadoop運(yùn)維工程師崗位職責(zé) 篇30
職責(zé):
1、提供運(yùn)維相關(guān)咨詢,幫助客戶解決疑難問題并提出改進(jìn)建議;
2、保障線上環(huán)境的正常運(yùn)行,處理線上的各種問題;
3、監(jiān)控線上系統(tǒng),分析和預(yù)防線上系統(tǒng)出現(xiàn)問題;
4、構(gòu)建自動化運(yùn)維平臺,提高運(yùn)維效率;
5、規(guī)范運(yùn)維流程,定期提交匯總報(bào)告;
6、優(yōu)化運(yùn)維系統(tǒng),加強(qiáng)系統(tǒng)穩(wěn)定性和高可用性。
7、工作責(zé)任心強(qiáng)、性格開朗、善于溝通、工作細(xì)心、做事有條理、善于在工作中學(xué)習(xí)與總結(jié);
任職要求:
1、精通linux系統(tǒng)操作和優(yōu)化、操作系統(tǒng)的管理及一定的排錯(cuò)能力;
2、精通Shell、Python中的至少一種語言,負(fù)責(zé)產(chǎn)品的一鍵安裝包制作;
3、熟練postgresql數(shù)據(jù)庫性能調(diào)優(yōu)、錯(cuò)誤排查、各種架構(gòu)部署及備份恢復(fù)機(jī)制;
4、熟悉分布式系統(tǒng)的維護(hù),有mq、zookeeper、docker等中間件維護(hù)經(jīng)驗(yàn),熟悉dubbo更好;
5、熟悉分布式系統(tǒng)下的tomcat、nginx、redis、fastdfs、mq、等軟件安裝部署和調(diào)優(yōu);
6、5年以上運(yùn)維經(jīng)驗(yàn),有虛擬化、容器技術(shù)、產(chǎn)品部署方案等經(jīng)驗(yàn)者優(yōu)先;
7、具備較強(qiáng)的抗壓能力,有良好的團(tuán)隊(duì)合作精神和溝通能力配合研發(fā)共同完成任務(wù)。