大數(shù)據(jù)運維工程師崗位的主要職責
大數(shù)據(jù)運維工程師崗位的主要職責
大數(shù)據(jù)運維工程師需要及時反饋技術(shù)處理過程中的異常情況，及時向上級反饋告警，同時主動協(xié)調(diào)資源推動問題解決。以下是學(xué)習啦小編整理的大數(shù)據(jù)運維工程師崗位的主要職責。
大數(shù)據(jù)運維工程師崗位的主要職責1
1) 承擔團隊的日常管理，如值班安排、工作分配、日常考評等;
2) 組織制訂、完善與本部門相關(guān)的管理制度、標準操作手冊SOP、維護操作MOP和應(yīng)急預(yù)案等;
3) 組織制定中心基礎(chǔ)設(shè)施保養(yǎng)計劃，做好相關(guān)計劃的實現(xiàn)、控制及優(yōu)化工作;
4) 審核、報批、組織實施各類變更申請、事件報告工作，做好相關(guān)應(yīng)急工作的指揮與處理;
5) 組織開展數(shù)據(jù)中心基礎(chǔ)設(shè)施運行維護相關(guān)培訓(xùn)、訓(xùn)練與演練;
6) 協(xié)助商務(wù)部與外包服務(wù)商洽談相關(guān)維護服務(wù)合同，監(jiān)督服務(wù)實施并要求進行審核與考評，確保相關(guān)基礎(chǔ)設(shè)施的穩(wěn)定運行;
7) 負責數(shù)據(jù)中心基礎(chǔ)設(shè)施資源統(tǒng)計、容量預(yù)警工作，做好每月用水用電統(tǒng)計、PUE統(tǒng)計與分析;
8) 配合數(shù)據(jù)中心進駐客戶的場地選址、平面布局、改造實施、進駐管理等支持協(xié)調(diào)工作;
9) 基礎(chǔ)設(shè)施月報、環(huán)境報告的編寫和提交;
10) 數(shù)據(jù)中心基礎(chǔ)設(shè)施的持續(xù)優(yōu)化和改善;
11) 負責上級主管領(lǐng)導(dǎo)交辦的其它工作。
大數(shù)據(jù)運維工程師崗位的主要職責2
職責：
根據(jù)產(chǎn)品需求，完成產(chǎn)品功能的設(shè)計、編碼、測試和發(fā)布;
現(xiàn)場項目支持工作，對現(xiàn)場反饋工單問題進行分析、定位和解決;
對現(xiàn)場項目提出的新需求進行分析、設(shè)計并完成;
根據(jù)產(chǎn)品和技術(shù)發(fā)展要求，完成平臺的設(shè)計、開發(fā)和支持維護工作。
職位要求：
本科及以上學(xué)歷，計算機、軟件工程相關(guān)專業(yè)，3年以上相關(guān)工作經(jīng)驗;
精通sql、greenplum/postgresql、impala、oracle、mysql至少1種技術(shù)、可融匯貫通靈活轉(zhuǎn)換使用;
熟悉hadoop平臺zookeeper、hdfs、spark、MR及hbase等常用組件的運行原理;
基于linux/unix平臺進行shell、python的常用腳本開發(fā)。
大數(shù)據(jù)運維工程師崗位的主要職責3
職責：
1、負責公司大數(shù)據(jù)平臺自動化運維開發(fā)、監(jiān)控和優(yōu)化工作，保障數(shù)據(jù)平臺服務(wù)的穩(wěn)定性和可用性;
2、負責公司Hadoop核心技術(shù)組件日常運維工作 ;
3、負責公司大數(shù)據(jù)平臺現(xiàn)場故障處理和排查工作;
4、研究大數(shù)據(jù)前沿技術(shù)，改進現(xiàn)有系統(tǒng)的服務(wù)和運維架構(gòu)，提升系統(tǒng)可靠性和可運維性;
任職要求：
1、本科或以上學(xué)歷，計算機、軟件工程等相關(guān)專業(yè)，3年以上相關(guān)從業(yè)經(jīng)驗
2、精通Linux運維命令，熟悉Linux的維護和管理，熟悉Shell/Python腳本開發(fā)，掌握Scala/JAVA優(yōu)先;
3、熟悉大數(shù)據(jù)項目實施：包括不限于Kafka、Hadoop、Hive、Hbase、Spark等大數(shù)據(jù)生態(tài)的平臺搭建，監(jiān)控和調(diào)優(yōu);
4、良好團隊精神服務(wù)意識，溝通協(xié)調(diào)能力;
大數(shù)據(jù)運維工程師崗位的主要職責4
職責：
1、負責Hadoop、HBase、Hive、Spark等大數(shù)據(jù)平臺 規(guī)劃、部署、監(jiān)控、系統(tǒng)優(yōu)化等，確保高可用;
2、負責公司大數(shù)據(jù)平臺的運維管理工作，集群容量規(guī)劃、擴容及性能優(yōu)化;
3、處理公司大數(shù)據(jù)平臺各類異常和故障，確保系統(tǒng)平臺的穩(wěn)定運行;
4、設(shè)計實現(xiàn)大規(guī)模分布式集群的運維、監(jiān)控和管理平臺;
5、深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運維技術(shù)，持續(xù)優(yōu)化集群服務(wù)架構(gòu)，探索新的大數(shù)據(jù)運維技及發(fā)展方向。
任職要求：
1、熟悉Hadoop/HBase/Hive/Spark/Kafka/Zookeeper等開源項目的安裝與調(diào)試,升級擴容;
2、熟悉Hadoop大數(shù)據(jù)生態(tài)圈，包括但不限于HDFS、YARN、Hive、HBase、Spark、Kafka、Flume等;
3、精通一門以上腳本語言(shell/perl/python等),熟練掌握Linux系統(tǒng)及常規(guī)命令與工具，熟練的Shell腳本編寫能力。
大數(shù)據(jù)運維工程師崗位的主要職責5
職責：
1.負責大數(shù)據(jù)管理平臺產(chǎn)品的運維支撐工作，包括項目實施(安裝、調(diào)優(yōu)、培訓(xùn))、項目聯(lián)調(diào)以及其他日常維護等;
2.負責大數(shù)據(jù)管理平臺產(chǎn)品的自動化運維相關(guān)腳本的開發(fā)、維護等;
3.參與大數(shù)據(jù)管理平臺其他相關(guān)工作;
4.領(lǐng)導(dǎo)交付的其他事宜任職要求
任職要求：
1.熟悉Linux(redhat/centos)軟硬件環(huán)境、系統(tǒng)管理和優(yōu)化，熟練部署、優(yōu)化各種常用服務(wù)，熟練使用Linux 命令;
2.具備一定的故障排查能力，能夠獨立排查及解決操作系統(tǒng)層的各類問題，有良好的技術(shù)敏感度和風險識別能力，熟悉一門以上腳本語言(Shell/Python等);
3.熟悉Hadoop大數(shù)據(jù)生態(tài)圈，包括但不限于Zookeeper、HDFS、YARN、Hive、Hbase、Spark、Kafka、Flume、ES、MySQL等;
4.熟悉Hadoop各組件的原理和實現(xiàn)，有實際部署維護、管理( 包括元數(shù)據(jù)管理)及優(yōu)化經(jīng)驗，并擁有持續(xù)調(diào)優(yōu)能力，運維管理過大規(guī)模數(shù)據(jù)平臺經(jīng)驗者優(yōu)先考慮;
5.熟悉掌握常用的安全協(xié)議和組件服務(wù)，對hadoop各組件的權(quán)限、安全、kerberos進行配置管理。熟悉SSL、ACL、kerberos等在大數(shù)據(jù)環(huán)境場景的使用;
6.大型節(jié)假日需低頻次維護各項目，可以調(diào)休;
7.具備良好的服務(wù)意識，善于主動思考，自我驅(qū)動力強。有良好的溝通、協(xié)調(diào)能力，富有團隊精神，有較強的文檔編寫能力;
8.本科或碩士畢業(yè)于211、985等國內(nèi)知名高校者優(yōu)先(注意，僅是加分項，不是必須);
9.有實際工作經(jīng)驗者優(yōu)先;
相關(guān)文章：