大數據架構師的工作職責描述

　　大數據架構師需要負責公司大數據產品的架構設計，包含數據收集、數據存儲、數據應用，并完成相關架構設計文檔的撰寫。下面是學習啦小編為您精心整理的大數據架構師的工作職責描述。

　　大數據架構師的工作職責描述1

　　職責：

　　1、 基于公司大數據基礎和數據資產積累，負責大數據應用整體技術架構的設計、優(yōu)化，建設大數據能力開放平臺;負責大數據應用產品的架構設計、技術把控工作。

　　2、 負責制定大數據應用系統(tǒng)的數據安全管控體系和數據使用規(guī)范。

　　3、 作為大數據技術方案到產品實現(xiàn)的技術負責人，負責關鍵技術點攻堅工作，負責內部技術推廣、培訓及知識轉移工作。

　　4、 負責大數據系統(tǒng)研發(fā)項目任務規(guī)劃、整體進度、風險把控，有效協(xié)同團隊成員并組織跨團隊技術協(xié)作，保證項目質量與進度。

　　5、 負責提升產品技術團隊的技術影響力，針對新人、普通開發(fā)人員進行有效輔導，幫助其快速成長。

　　任職資格：

　　1、 計算機、數學或相關專業(yè)本科以上學歷，5-10年工作經驗，具有大型系統(tǒng)的技術架構\應用架構\數據架構相關的實踐工作經驗。

　　2、 有分布式系統(tǒng)分析及架構設計經驗，熟悉基于計算集群的軟件系統(tǒng)架構和實施經驗。

　　3、 掌握Hadoop/Spark/Storm生態(tài)圈的主流技術及產品，深入了解Hadoop/Spark/Storm生態(tài)圈產品的工作原理及應用場景。

　　4、 掌握Mysql/Oracle等常用關系型數據庫，能夠對SQL進行優(yōu)化。

　　5、 熟悉分布式系統(tǒng)基礎設施中常用的技術，如緩存(Varnish、Memcache、Redis)、消息中間件(Rabbit MQ、Active MQ、Kafka、NSQ)等;有實踐經驗者優(yōu)先。

　　6、 熟悉Linux，Java基礎扎實，至少3-5年以上Java應用開發(fā)經驗，熟悉常用的設計模式和開源框架。

　　大數據架構師的工作職責描述2

　　職責：

　　1、負責面向政府信領域的企業(yè)(不限于)大數據平臺、大數據應用等系統(tǒng)的架構設計、技術規(guī)劃、技術選型

　　2、跟進業(yè)界大數據技術發(fā)展動態(tài)，匹配行業(yè)應用訴求，制定大數據策略，提前識別關鍵技術并完成技術驗證;

　　3、支撐售前完成項目解決方案技術架構的設計及重要客戶的交流;

　　4、負責指導研發(fā)完成大數據產品的開發(fā)

　　5、帶領團隊進行產品核心技術的創(chuàng)新和積累

　　崗位要求：

　　1、熟悉BI和大數據領域的解決方案，具備該領域全面的技術積累，包括報表平臺，OLAP引擎和DB，ETL，數據倉庫建模和設計，海量分布式數據處理分析架構;

　　2、在大數據處理和分析領域具有3年或者以上的技術規(guī)劃、架構設計經驗，并有成功的項目實踐;

　　3、4年以上Hadoop實戰(zhàn)經驗，熟悉Hadoop底層文件系統(tǒng)及分布式計算框架，具備傳統(tǒng)數據倉庫、MPP、Hadoop等混搭平臺架構的設計能力和數據建模能力，對大規(guī)模數據并行計算、傳輸、處理等有豐富的經驗;

　　4、有實際應用storm、spark、flume、kafka等項目經驗優(yōu)先;

　　5、卓越的技術領導力，善于溝通、發(fā)現(xiàn)和解決產品需求階段、開發(fā)階段和測試階段的問題，并能提供合理解決方案，有大中型互聯(lián)網企業(yè)工作背景優(yōu)先。

　　大數據架構師的工作職責描述3

　　職責：

　　1、負責公司大數據平臺架構的技術選型和技術難點攻關工作;

　　2、依據行業(yè)數據現(xiàn)狀和客戶需求，完成行業(yè)大數據的特定技術方案設計與撰寫;

　　3、負責研究跟進大數據架構領域新興技術并在公司內部進行分享;

　　4、參與公司大數據項目的技術交流、解決方案定制以及項目的招投標工作;

　　5、參與公司大數據項目前期的架構設計工作;

　　任職要求：

　　1、計算機及相關專業(yè)本科以上，5年以上數據類項目(數據倉庫、商務智能)實施經驗，至少2年以上大數據架構設計和開發(fā)經驗，至少主導過一個大數據平臺項目架構設計;

　　2、精通大數據生態(tài)圈的技術，包括但不限于MapReduce、Spark、Hadoop、Kafka、Mongodb、Redis、Flume、Storm、Hbase、Hive，具備數據統(tǒng)計查詢性能優(yōu)化能力。熟悉星環(huán)大數據產品線及有過產品項目實施經驗者優(yōu)先;

　　3、優(yōu)秀的方案撰寫能力，思路清晰，邏輯思維強，能夠根據業(yè)務需求設計合理的解決方案;

　　4、精通ORACLE、DB2、mySql等主流關系型數據庫，熟悉數據倉庫建設思路和數據分層架構思想;

　　5. 熟練掌握java、R、python等1-2門數據挖掘開發(fā)語言;

　　6. 熟悉云服務平臺及微服務相關架構思想和技術路線，熟悉阿里云或騰訊云產品者優(yōu)先;

　　7、有煙草或制造行業(yè)大數據解決方案售前經驗者優(yōu)先;

　　8、能適應售前支持和項目實施需要的短期出差;

　　大數據架構師的工作職責描述4

　　職責：

　　1、負責規(guī)劃大數據平臺及應用產品的需求和技術方案設計;

　　2、負責數據對接和對外服務設計、開發(fā)和維護，并能保證質量和性能;

　　3、負責基于大數據平臺的應用設計、開發(fā)和維護;

　　4、能從系統(tǒng)全局和各子系統(tǒng)的角度思考可能存在的問題，并提出改進方案建議;

　　任職要求：

　　1、大學本科6年以上工作經驗，計算機相關專業(yè)。

　　2、至少4年以上的Java開發(fā)經驗，3年以上大數據應用系統(tǒng)的開發(fā)和設計經驗。

　　3、熟悉Hadoop生態(tài)圈技術體系， 對離線計算、內存計算和流式計算均有深刻理解， 如Hadoop、Storm、Spark三個中的任意二個， 能進行平臺和組件優(yōu)化。

　　4、精通Hive、HBase倉庫設計，深刻理解MR運行原理和機制，能進行以提供高任務執(zhí)行效率的優(yōu)化。

　　5、精通Java開發(fā)，熟悉JVM調優(yōu)， 對GC有深刻理解。

　　6、熟悉Linux、Shell、Kafka、Oracle、Mysql、Redis等相關技術， 能進行hbase可靠性診斷和維護。

　　7、快速研究和學習技術能力。

　　大數據架構師的工作職責描述5

　　職責：

　　1、負責相關開源系統(tǒng)/組件的性能、穩(wěn)定性、可靠性等方面的深度優(yōu)化;

　　2、負責解決項目上線后生產環(huán)境的各種實際問題，保障大數據平臺在生產上的安全、平穩(wěn)運行;

　　3、推動優(yōu)化跨部門的業(yè)務流程， 參與業(yè)務部門的技術方案設計、評審、指導;

　　4、負責技術團隊人員培訓、人員成長指導。

　　5、應項目要求本月辦公地址在錦江區(qū)金石路316號新希望中鼎國際辦公，月底項目結束后在總部公司辦公

　　任職要求：

　　1、熟悉linux、JVM底層原理，能作為技術擔當，解決核心技術問題;

　　2、3年以上大數據平臺項目架構或開發(fā)經驗，對大數據生態(tài)技術體系有全面了解，如Yarn、Spark、HBase、Hive、Elasticsearch、Kafka、PrestoDB、Phoenix等;

　　3、掌握git、maven、gradle、junit等工具和實踐， 注重文檔管理、注重工程規(guī)范優(yōu)先;

　　4、熟悉Java后臺開發(fā)體系，具備微服務架構的項目實施經驗，有Dubbo/Spring cloud微服務架構設計經驗優(yōu)先;

　　5、性格開朗、善于溝通，有極強的技術敏感性和自我驅動學習能力，注重團隊意識。