大數(shù)據(jù)運維工程師的主要職責(zé)說明

　　大數(shù)據(jù)運維工程師需要設(shè)計實現(xiàn)大規(guī)模分布式集群的運維、監(jiān)控和管理平臺。下面是學(xué)習(xí)啦小編為您精心整理的大數(shù)據(jù)運維工程師的主要職責(zé)說明。

　　大數(shù)據(jù)運維工程師的主要職責(zé)說明1

　　職責(zé)：

　　1、響應(yīng)及解決客戶的技術(shù)要求、疑問以及系統(tǒng)使用過程中的各種問題;

　　2、負(fù)責(zé)服務(wù)過程中問題現(xiàn)象和處理方案的收集撰寫，形成知識庫，并對知識庫進(jìn)行維護(hù)更新;

　　3、及時反饋技術(shù)處理過程中的異常情況，及時向上級反饋告警，同時主動協(xié)調(diào)資源推動問題解決;

　　4、定期對所有服務(wù)問題進(jìn)行分析，并對服務(wù)效率有影響的問題提供反饋意見，提升服務(wù)支撐團(tuán)隊專業(yè)度。

　　5、能夠獨當(dāng)一面，具備獨立思考和處理問題的能力，并能夠與客戶建立良好的關(guān)系。

　　6、明確工作范圍，定期與客戶溝通工作量，并獲取客戶回執(zhí)，及時歸檔。

　　7、能夠快速熟悉參與項目中的業(yè)務(wù)，總結(jié)后與研發(fā)定期溝通。

　　崗位要求：

　　1、3年及以上工作經(jīng)驗，計算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;

　　2、熟悉weblogic中間件的安裝部署;

　　3、熟悉Oracle數(shù)據(jù)庫的增刪改查操作;

　　4、了解ETL相關(guān)內(nèi)容，如Informatica、kettle等，具備基礎(chǔ)操作技能;

　　5、了解BI報表相關(guān)內(nèi)容，如cognos、tableau、自助式分析工具等，具備基礎(chǔ)操作技能;

　　6、掌握基本的windows/linux操作命令;

　　7、熟練操作Office辦公軟件;具有較強的文檔理解與編寫能力，具有較強的語言表達(dá)及溝通協(xié)調(diào)能力;

　　8、熟悉電網(wǎng)業(yè)務(wù)優(yōu)先。

　　大數(shù)據(jù)運維工程師的主要職責(zé)說明2

　　職責(zé):

　　1. 管理公司大數(shù)據(jù)集群，提供高可用、高性能大數(shù)據(jù)集群系統(tǒng)，并保障系統(tǒng)穩(wěn)定運行

　　2. 負(fù)責(zé)大數(shù)據(jù)集群性能監(jiān)控與優(yōu)化，故障處理，數(shù)據(jù)備份及災(zāi)難恢復(fù)

　　3. 負(fù)責(zé)大數(shù)據(jù)集群自助平臺的高可用架構(gòu)設(shè)計和負(fù)載均衡的設(shè)計和實現(xiàn)

　　4. 負(fù)責(zé)業(yè)務(wù)系統(tǒng)大數(shù)據(jù)集群管理，包括數(shù)據(jù)庫日常維護(hù)，系統(tǒng)數(shù)據(jù)安全以及權(quán)限管理、故障處理、日常錯誤情況處理等

　　5. 負(fù)責(zé)依據(jù)業(yè)務(wù)需求優(yōu)化數(shù)據(jù)存儲結(jié)構(gòu)，負(fù)責(zé)數(shù)據(jù)庫系統(tǒng)部署方案的計劃、設(shè)計和實施

　　6. 負(fù)責(zé)系統(tǒng)大數(shù)據(jù)集群定期檢查，進(jìn)行性能分析與調(diào)優(yōu)，充分保證信息系統(tǒng)數(shù)據(jù)的安全及系統(tǒng)高效運行

　　任職資格:

　　1. 全日制本科及以上學(xué)歷，計算機(jī)或相關(guān)專業(yè)，1年以上hadoop運維經(jīng)驗

　　2. 熟悉Hadoop生態(tài)圈Hadoop、Kafka、Zookeeper、HBase、Spark、hive等的安裝配置和優(yōu)化

　　3. 熟悉MySQL等關(guān)系型數(shù)據(jù)庫的部署與優(yōu)化，了解MongoDB或Cassandra等NoSQL數(shù)據(jù)庫

　　4. 熟悉Linux類操作系統(tǒng)的基礎(chǔ)命令操作，能夠編寫腳本開展日常運維工作

　　5. 熟悉Linux開發(fā)環(huán)境，會使用Shell/Java/Python中的一門腳本語言

　　6. 熟悉常見開源工具如Nginx、Zabbix、Grafana等的安裝配置和使用

　　大數(shù)據(jù)運維工程師的主要職責(zé)說明3

　　職責(zé):

　　1、負(fù)責(zé)大數(shù)據(jù)運維體系中的監(jiān)控工作;

　　2、負(fù)責(zé)處理用戶服務(wù)請求事件;

　　3、負(fù)責(zé)監(jiān)控報警事件的處理;

　　4、負(fù)責(zé)協(xié)助完善監(jiān)控體系;

　　5、負(fù)責(zé)監(jiān)控平臺運維工作，持續(xù)優(yōu)化監(jiān)控體系;

　　6、按時完成領(lǐng)導(dǎo)交辦的其他相關(guān)工作。

　　任職要求：

　　1、大專及以上學(xué)歷，計算機(jī)相關(guān)專業(yè)，1年以上大數(shù)據(jù)系統(tǒng)運維經(jīng)驗;

　　2、熟悉linux操作系統(tǒng)，熟悉hadoop、hive、hbase、yarn、spark、storm等組件的原理及運維方式;

　　3、熟悉中間件工作原理，對TOMCAT/jetty/nginx/微服務(wù)有一定了解，具備一定的操作能力;

　　4、至少熟悉python/bash/shell一種或多種語言，可獨立編寫維護(hù)及監(jiān)控腳本;

　　5、有強烈的求知欲和鉆研技巧，具有良好的獨立分析問題與迅速解決問題的能力;

　　6、有良好的職業(yè)責(zé)任心和團(tuán)隊協(xié)作意識;

　　7、能適應(yīng)7*24小時三班倒工作時間。

　　大數(shù)據(jù)運維工程師的主要職責(zé)說明4

　　職責(zé)：

　　1、負(fù)責(zé)公司大數(shù)據(jù)集群的構(gòu)建，任務(wù)調(diào)度、監(jiān)控預(yù)警，持續(xù)完善大數(shù)據(jù)平臺，保證穩(wěn)定性、安全性;

　　2、負(fù)責(zé)集群容量規(guī)劃、擴(kuò)容、集群性能優(yōu)化及日常巡檢和應(yīng)急值守，參與大數(shù)據(jù)基礎(chǔ)環(huán)境的架構(gòu)設(shè)計與改進(jìn);

　　3、深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運維技術(shù)，持續(xù)優(yōu)化集群服務(wù)架構(gòu)，探索新的Hadoop、Spark運維技術(shù)及發(fā)展方向;

　　4、具備ownership，故障排查能力，有很好的技術(shù)敏感度和風(fēng)險識別能力;

　　5、良好的服務(wù)意識，主動思考，自我驅(qū)動力。

　　任職資格：

　　1、熟悉RedHat、CentOS、Ubuntu系列Linux系統(tǒng)的配置、管理、內(nèi)核優(yōu)化。能夠獨立編寫(Shell/Python)腳本語言，腳本開展日常服務(wù)器的運維;

　　2、熟悉hadoop生態(tài)圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安裝、調(diào)試和運維經(jīng)驗; 熟悉分布式日志分析系統(tǒng)ELK及相關(guān)技術(shù);

　　3、熟悉軟硬件設(shè)備，網(wǎng)絡(luò)原理，有豐富的大數(shù)據(jù)平臺部署，性能優(yōu)化和運維經(jīng)驗; 了解運維高容量、大流量、大并發(fā)Web系統(tǒng)的業(yè)務(wù)知識以及解決方案;

　　4、工作認(rèn)真負(fù)責(zé)，有較強的學(xué)習(xí)能力，動手能力和分析解決問題的能力;

　　5、能夠利用各種開源監(jiān)控工具、運維工具，HA、負(fù)載均衡軟件完成工作任務(wù);

　　6、mongodb、mysql等配置、調(diào)優(yōu)和備份。

　　大數(shù)據(jù)運維工程師的主要職責(zé)說明5

　　職責(zé)：

　　1.負(fù)責(zé)參與公司大數(shù)據(jù)基礎(chǔ)架構(gòu)平臺規(guī)劃，運維，監(jiān)控和優(yōu)化工作，保障數(shù)據(jù)平臺服務(wù)的穩(wěn)定性和可用性;

　　2.研究大數(shù)據(jù)前沿技術(shù)，改進(jìn)現(xiàn)有系統(tǒng)的服務(wù)和運維架構(gòu)，提升系統(tǒng)可靠性和可運維性;

　　3.負(fù)責(zé)公司Hadoop核心技術(shù)組件HDFS、Yarn、MapReduce、HBase、Storm大數(shù)據(jù)存儲計算核心的監(jiān)控和日常運維工作。

　　4.獨立完成大數(shù)據(jù)運維過程中問題定位、問題解決、并進(jìn)行總結(jié)及部門的大數(shù)據(jù)基礎(chǔ)技能培訓(xùn);

　　任職要求：

　　1. 計算機(jī)、信息系統(tǒng)、數(shù)學(xué)或相近專業(yè)本科以上學(xué)歷;

　　2. 擁有至少3年以上Hadoop運維經(jīng)驗、具備基于CDH與HDP的維護(hù)經(jīng)驗;

　　3. 熟悉Hadoop大數(shù)據(jù)生態(tài)圈服務(wù)的工作原理，具備相關(guān)實戰(zhàn)維護(hù)經(jīng)驗，包括但不限于HDFS、YARN、Hive、HBase、ELK、Spark、Kafka、Zookeeper、Flume等;

　　4. 至少獨立維護(hù)過中大型Hadoop集群系統(tǒng)服務(wù);

　　5. 至少精通Python,shell中的一種,了解JAVA;有良好的系統(tǒng)性能優(yōu)化及故障排除能力;

　　6. 有大數(shù)據(jù)架構(gòu)師工作經(jīng)驗更佳;

相關(guān)文章：

1.大數(shù)據(jù)運維工程師的具體職責(zé)描述

2.運維經(jīng)理的具體職責(zé)

3.運維服務(wù)工程師的職位職責(zé)

4.運維經(jīng)理的崗位職責(zé)

5.運維總監(jiān)崗位的崗位職責(zé)表述