電信企業(yè)數(shù)據(jù)域系統(tǒng)集約化運營探索論文
集約化管理是現(xiàn)代企業(yè)集團提高效率與效益的基本取向。集約化的“集”就是指集中,集合人力、物力、財力、管理等生產要素,進行統(tǒng)一配置,集約化的“約”是指在集中、統(tǒng)一配置生產要素的過程中,以節(jié)儉、約束、高效為價值取向,從而達到降低成本、高效管理,進而使企業(yè)集中核心力量,獲得可持續(xù)競爭的優(yōu)勢。以下是今天學習啦小編為大家精心準備的:電信企業(yè)數(shù)據(jù)域系統(tǒng)集約化運營探索相關論文。內容僅供參考,歡迎閱讀:
電信企業(yè)數(shù)據(jù)域系統(tǒng)集約化運營探索全文如下:
一、引言
隨著電信企業(yè)數(shù)據(jù)域系統(tǒng)的不斷建設和完善,企業(yè)數(shù)據(jù)的不斷匯聚,數(shù)據(jù)的儲備和數(shù)據(jù)應用范圍不斷擴大。如何發(fā)揮數(shù)據(jù)價值,構建智慧型企業(yè),在去電信化過程中,適應市場化變革,實現(xiàn)差異化經營,離不開“快、精、準”的數(shù)據(jù)服務支撐,數(shù)據(jù)已逐漸成為中國電信最重要的戰(zhàn)略資源。企業(yè)數(shù)據(jù)應用范圍越來越廣,數(shù)據(jù)應用領域越來越專業(yè)化。在數(shù)據(jù)應用域,在建的系統(tǒng)也越來越多,越來越突出應用的專業(yè)化。對系統(tǒng)的運營維護提出的更高的要求,對維護人員水平提出高標準。如何在人員保持不增長情況下,提升系統(tǒng)的維護支撐水平。只有采取集約化的運營維護模式,緊緊抓住“數(shù)據(jù)”這個主線,持續(xù)優(yōu)化,才能提升維護水平。
二、數(shù)據(jù)域系統(tǒng)在電信企業(yè)信息化系統(tǒng)定位及架構
在中國電信的CTG_MBOSS規(guī)范中,將信息系統(tǒng)劃分為管理支持系統(tǒng)(MSS)、業(yè)務支撐系統(tǒng)(BSS)、運營支撐系統(tǒng)(OSS)及企業(yè)數(shù)據(jù)架構(EDA)四大域系統(tǒng)。企業(yè)數(shù)據(jù)倉儲(ODS)和企業(yè)數(shù)據(jù)倉庫(EDW)屬于數(shù)據(jù)架構(EDA)域的系統(tǒng)。數(shù)據(jù)架構(EDA)域的系統(tǒng)主要實現(xiàn)的目標是從業(yè)務生產系統(tǒng)中(MBOSS域中)抽取相關的數(shù)據(jù)進行整合、清洗、匯總加工等處理。企業(yè)數(shù)據(jù)倉儲ODS主要實現(xiàn)企業(yè)數(shù)據(jù)整合,提供數(shù)據(jù)共享和準實時數(shù)據(jù)同步和監(jiān)控。企業(yè)數(shù)據(jù)倉庫EDW主要面向分析型應用,提供企業(yè)經營分析和營銷決策支撐兩方面功能。
根據(jù)應用主題,形成企業(yè)有關的市場經營統(tǒng)一數(shù)據(jù)平臺,通過報表查詢、多維展示等方式提供給數(shù)據(jù)分析用戶和營銷決策人員; 而另一方面,數(shù)據(jù)倉庫經過分析或挖掘,將發(fā)掘的客戶異常消費、流失客戶預警、營銷活動目標客戶等信息反饋到各客戶接觸系統(tǒng),供營銷經理、營業(yè)員、客服人員對相應客戶提供針對性營銷和服務企業(yè)。
三、數(shù)據(jù)域系統(tǒng)的集約化運營探索
廣西電信IT運營中心根據(jù)數(shù)據(jù)應用專業(yè)特點,從組織架構、制度保障、技術創(chuàng)新上對數(shù)據(jù)倉庫集約化運營進行了探索,實現(xiàn)數(shù)據(jù)應用專業(yè)(EDA域)人員結構調整,完善運維維護團隊的組織架構,對系統(tǒng)基礎架構重點優(yōu)化,對生產運營中存在的硬骨頭問題進行重點突破和攻關,重點解決運營中的難點問題以點帶面實現(xiàn)整體提升。
具體做法包括:
3.1組織架構調整
調整人員結構,以數(shù)據(jù)流向為主線,把運營維護團隊人員縱向劃分為數(shù)據(jù)維護人員和數(shù)據(jù)應用人員,實現(xiàn)運營支撐和應用支撐專業(yè)集約化運營。
隨著企業(yè)信息化隊伍的整體調整,集約化運營的要求。企業(yè)數(shù)據(jù)運營支撐隊伍人數(shù)下降,數(shù)據(jù)專業(yè)的運營維護工作有增無減,要求更高。 如何完成目前的支撐工作。變革勢在必行。為了能更好的適應形式發(fā)展需求,打破原來的按數(shù)據(jù)專業(yè)(EDA域)內各系統(tǒng)橫向分工模式(EDA域內ODS/EDW/企業(yè)數(shù)據(jù)門戶系統(tǒng)、渠道系統(tǒng)、針對性營銷系統(tǒng)等各自負責各自系統(tǒng)),以數(shù)據(jù)流向為主線,把運營維護團隊人員縱向劃分為數(shù)據(jù)維護人員和數(shù)據(jù)應用人員(EDA域內不在按系統(tǒng)來劃分,按維護和應用來劃分)。
數(shù)據(jù)運營維護人員,負責基礎的數(shù)據(jù)平臺ODS和EDW系統(tǒng),負責數(shù)據(jù)在EDA域中從匯聚采集到處理加工、數(shù)據(jù)存儲數(shù)據(jù)發(fā)布的全流程運營維護。數(shù)據(jù)運營維護人員,負責數(shù)據(jù)應用層面的統(tǒng)籌管理,數(shù)據(jù)業(yè)務層面的指標統(tǒng)計口徑審核統(tǒng)一歸檔和實施,數(shù)據(jù)質量稽核等。通過人員職責的調整,實現(xiàn)了數(shù)據(jù)運營和數(shù)據(jù)應用的統(tǒng)一集約化運營,解決了原來按系統(tǒng)劃分職責時的 數(shù)據(jù)維護不連貫耗費維護人力,數(shù)據(jù)指標口徑各系統(tǒng)不統(tǒng)一等問題。數(shù)據(jù)專業(yè)(EDA域)數(shù)據(jù)的采集整合加工處理是按系統(tǒng)串行的,數(shù)據(jù)先由ODS系統(tǒng)采集初步數(shù)據(jù)處理后,流到EDW系統(tǒng)或其他的應用系統(tǒng)中。這種串行的特點,運營維護,更適合按職能來劃分人員的職責而不是按系統(tǒng)來劃分。這樣按數(shù)據(jù)維護和數(shù)據(jù)應用 職能來分人員職責,更體現(xiàn)出EDA數(shù)據(jù)專業(yè)的特點。
系統(tǒng)維護建設中,流程更優(yōu)效率更高。比如:原來一個系統(tǒng)故障或一個新的需求需要從源系統(tǒng)采集新數(shù)據(jù),數(shù)據(jù)需要從源系統(tǒng)到ODS系統(tǒng)在到EDW系統(tǒng)在到企業(yè)數(shù)據(jù)門戶展現(xiàn),需要3個不同系統(tǒng)的維護人員參與處理。現(xiàn)在只需要1個數(shù)據(jù)維護人員參與處理即可,提高的維護效率和降低了維護人力。 同時更是創(chuàng)新性的將EDA的數(shù)據(jù)維護人員嵌入到CRM專業(yè)中,承接CRM系統(tǒng)與EDA系統(tǒng)接口的數(shù)據(jù)維護工作,極大的提高了EDA系統(tǒng)與外系統(tǒng)的接口維護質量。降低了接口的維護成本。
3.2制度保障
在組織架構調整基礎上,完善管理制度,強調內部溝通協(xié)調,依靠外部協(xié)作,逐步完善生產制度,作業(yè)計劃細化到小時。
在完成相應的人員調整后,需要對現(xiàn)有的管理制度,運營流程生產制度作業(yè)計劃等進行相應的調整和進一步完善。從數(shù)據(jù)生產全流程考慮,重新梳理生產流程的各個環(huán)節(jié),融合原來各系統(tǒng)的生產作業(yè)計劃,制定數(shù)據(jù)全流程的生產作業(yè)計劃。明確輸入輸出的確認工作,方便實現(xiàn)各系統(tǒng)的銜接。完善各系統(tǒng)間的故障處理流程,完善內部的溝通確認機制。完善生產管理制度,進一步強人員責任以及運營維護工作紀律。逐步實現(xiàn)維護的流程標準化。依靠外部協(xié)作,做好外系統(tǒng)的數(shù)據(jù)接口完善各類文檔,并加強與外系統(tǒng)數(shù)據(jù)源的溝通協(xié)作,完善溝通機制,完善數(shù)據(jù)源的監(jiān)控告警,及時督促外系統(tǒng)進行數(shù)據(jù)質量的整改。
按照全流程的數(shù)據(jù)生產過程來編制作業(yè)計劃,按照數(shù)據(jù)生產的要求細化到每日的小時,逐步實現(xiàn)的維護工作標準化,來提升的我們數(shù)據(jù)生產的維護質量。同時進行事后總結評估來不斷的優(yōu)化我們的作業(yè)計劃和維護工作。進一部強調了,版本發(fā)布的審核測試流程,標準化了審核的步驟,加強的性能方面的技術層面審核。制定嚴格的準入標準,從準入方面控制版本質量,來實現(xiàn)系統(tǒng)穩(wěn)定和優(yōu)化,來提升我們的維護質量。 3.3技術優(yōu)化創(chuàng)新
圍繞數(shù)據(jù)支撐的“快、精、準”,逐步在技術上進行提升,進行數(shù)據(jù)庫底層優(yōu)化、抽取轉換加載(etl)功能優(yōu)化、庫表優(yōu)化。來提升維護支撐水平。
通過進行各類優(yōu)化提升工作,數(shù)據(jù)分層優(yōu)化,基本架構提升,運維重點難點問題的攻關和擊破。
(1)數(shù)據(jù)分層優(yōu)化,著眼于全局,將原來各系統(tǒng)割裂的數(shù)據(jù)分層,數(shù)據(jù)存儲,統(tǒng)籌考慮分析。
優(yōu)化EDA域類的數(shù)據(jù)分層架構。從數(shù)據(jù)庫底層優(yōu)化分析,提升數(shù)據(jù)處理效率。
(2)優(yōu)化數(shù)據(jù)處理流程,減少冗余數(shù)據(jù)的分散處理,冗余存儲。
梳理核心數(shù)據(jù),進行數(shù)據(jù)相關的冗余字段,指標清理。調整各系統(tǒng)的數(shù)據(jù)融合,按照集團規(guī)范優(yōu)化分層架構。分析完成日報數(shù)據(jù)月報生產的不合理數(shù)據(jù)流程。完成基本架構提升,優(yōu)化了ETL 調度系統(tǒng)平臺的性能。增加了ETL調度平臺的集群數(shù)量增置3個。大大的提供的ETL的并行處理效率。解決了在月生產之初,大并發(fā)量瓶頸導致的延誤生產情況,提高了維護的便利性和簡單性。
(3)對重點難點問題的攻關和擊破,特別是企業(yè)數(shù)據(jù)門戶日監(jiān)控報表數(shù)據(jù)的優(yōu)化。
企業(yè)數(shù)據(jù)門戶日監(jiān)控報表是領導特別關注的報表,日監(jiān)控報表的整合處理任務,每月月初的時候都會因為任務卡死而導致報表延遲,但確無法確診是平臺問題、數(shù)據(jù)庫問題還是應用系統(tǒng)問題。故障發(fā)生時有如下特點:在凌晨的時候發(fā)生,不容易發(fā)現(xiàn)和處理;故障無法重現(xiàn),只能等月初月末時發(fā)生;故障發(fā)生影響大,門戶日監(jiān)控報表無法展示,領導感知差。因為影響到領導看數(shù),對EDA域影響非常大。為確保穩(wěn)定,曾經還一度采用人海戰(zhàn)術,通過值班人員的通宵達旦的值守監(jiān)控來確保報表及時展示。但收效甚微,問題未得到有效解決。經過長時間的觀察分析,并協(xié)調應用系統(tǒng)、數(shù)據(jù)庫系統(tǒng)、平臺系統(tǒng)專家進行綜合研究,最后經過多次的故障重現(xiàn)后跟蹤分析,最綜定位到此問題是由于應用程序的BUG導致。經過整改后,困擾過一段時間的問題得到了根本解決,每日早上數(shù)據(jù)展示及時。
四、實施后效果
實施企業(yè)數(shù)據(jù)應用集約化運營與提升后,實現(xiàn)了人員的減員增效,在維護人員不增反減的情況下,完成了EDA域各系統(tǒng)的運營維護工作。優(yōu)化了數(shù)據(jù)支撐維護流程,并進行了大量的優(yōu)化,EDA域系統(tǒng)有較大的提升。特別是企業(yè)數(shù)據(jù)門戶的穩(wěn)定性及時性得到很大的提升。
數(shù)據(jù)基礎管理數(shù)據(jù)應用方面:統(tǒng)一了數(shù)據(jù)基礎管理,一點管理統(tǒng)一建模統(tǒng)一編碼。形成了企業(yè)數(shù)據(jù)的統(tǒng)一視圖。通過統(tǒng)一的組織統(tǒng)籌數(shù)據(jù)應用,極大的提升了數(shù)據(jù)的應用的質量。
數(shù)據(jù)運營維護方面:通過人員組織調整,優(yōu)化職責分工,實現(xiàn)數(shù)據(jù)全流程全生命周期的運營生產管理和數(shù)據(jù)質量統(tǒng)一管理和控制,提高了數(shù)據(jù)運營維護效率以及系統(tǒng)維護保障質量。加強和完善了數(shù)據(jù)運營維護體系建設,保障全生命周期的數(shù)據(jù)質量。通過對系統(tǒng)的全面優(yōu)化提升完善系統(tǒng)的不足,加強對系統(tǒng)的自動化的監(jiān)控手段,夯實數(shù)據(jù)平臺系統(tǒng)基礎,提升系統(tǒng)的健壯性降低系統(tǒng)故障發(fā)生率,整體提升維護數(shù)據(jù)運營維護的水平。
五、結束語
后續(xù)將進一步的完善數(shù)據(jù)稽核告警功能,進一步提升數(shù)據(jù)質量。提升系統(tǒng)的健壯性,完善自動稽核功能,逐步提供系統(tǒng)運營的自動化水平,逐步的解放運營人員的壓力降低運維人員的投入,從數(shù)據(jù)生產向數(shù)據(jù)應用的進行轉變。