- 主數據驅動的數據治理:原理、技術與實踐
- 王兆君 曹朝輝 王鉞
- 1937字
- 2019-12-09 14:53:39
1.1 數據治理背景
伴隨著互聯網技術的高速發展,數據正在呈現爆發式的增長。以互聯網流量為例,2001年,全世界一年的互聯網流量是1EB(1EB=1018B),足以刻滿1.68億張DVD; 2004年,用掉這些流量僅需要1個月;2007年,只需要一周便可以達到1EB; 2012年,全世界互聯網一天的流量就達1EB。截至2016年,全球數據體量增長到16.1ZB(1ZB=1000EB),根據國際數據公司(IDC)發布的白皮書《數據時代2025》預測,到2025年,這一數字將擴展至163ZB,相當于2016年的10倍。
與此同時,以云計算、大數據、物聯網、人工智能為代表的新一輪科技變革正在推動數據采集、管理、分析加工能力的持續升級。新一代的信息技術正在把近乎無限多的供給和需求、無限多的生產要素和無限廣闊的市場適時結合與對接,從而催生出新的產品、新的服務、新的業態、新的模式。當前,以信息技術為基石的新的經濟形態已經從技術變革層面拓展到企業運行、產業融合、社會生活、人類交往等各個維度,正在釋放它推動產業融合、經濟轉型升級和社會進步的巨大能量。
從企業角度而言,新的經濟環境以及全球化分工和跨地域競爭格局的產生,促使企業在管理與運作方面不斷推出和適應新的模式與理念。企業戰略逐步向全球化、精益化、服務化、智能化和協同化的趨勢發展;企業市場競爭的內容已經由傳統的規模、效率、質量的競爭轉向了個性化及差異化的競爭、速度的競爭、信息的競爭和知識的競爭。
企業在產品和服務方面的創新能力、精細化的運營能力以及全球化的戰略管控能力,大大依賴于企業開發和利用信息資源的能力。數據和信息是企業的經濟命脈,成為一項重要的企業資產。正如經濟學家湯姆·彼得斯所指出的:“一個組織如果沒有認識到管理數據和信息如同管理有形資產一樣極其重要,那么它在新經濟時代將無法生存。”
在新的經濟環境下,為加速企業增長、提高效率、降低成本、吸引并留存客戶、更有效地創造新產品和新服務,優秀企業的管理者對諸如商業智能、移動技術、協同技術、云計算、物聯網、大數據、人工智能等IT技術的演進進行積極的關注,積極推動企業信息化的進程向更加深入的方向發展。可見,面對新經濟大潮的沖擊,企業在不斷變化的環境中必須依靠先進的IT技術,深度挖掘信息資源,占領信息化的制高點,及時調整自身發展戰略,才能保持在新的局面下持續發展的動力。企業信息化與新的商業運作模式相互融合,推動企業的管理變革,是企業面對新環境挑戰的必要對策。
企業信息化是指企業利用現代信息技術,通過對信息資源的深度開發和廣泛利用,不斷提高生產、經營、管理、決策的效率和水平,從而提高企業經濟效益和提升企業核心競爭力的過程。企業信息化是一個寬泛的概念,是對企業的集成化、系統化、規范化、創新性管理思想的體現。企業信息化是一個持續的過程,在復雜多變的內外部環境中,企業必須針對商業模式演變、技術創新等機遇和挑戰,對信息化建設工作的方向和目標不斷提出新的、全面的要求。
信息化的實質是通過先進業務流程、管理理念與信息技術的融合,改變企業收集、處理、利用信息的方式,從而導致業務流程和組織形式的巨大變革。企業信息化進程的第一階段,以業務自動化作為關注的重點,專注于人工流程到自動流程的轉變(如手工賬變為電子賬),各個業務部門以其職能為中心構建應用系統,數據只是應用的副產品。而當信息化進程進入第二階段,其重心將由自動化轉向持續優化,從以職能為中心轉向以服務為中心,以產品或應用為中心轉向以客戶為中心,數據不再僅僅是應用的副產品,而是驅動新業務、催生新應用的核心動力。為提升業務管理水平、實現更高的業務目標,信息必須成為戰略資產。
因此,隨著企業信息化進程的深入,關注的重點將由應用系統的構建轉變為更優質信息資源的獲得,以及如何從信息資源中挖掘更大的商業價值。國際標準ISO/IEC 17799《信息安全管理標準》中明確指出:“信息是一種資產,像其他重要的業務資產一樣,對組織具有價值,因此需要妥善保護。”而數據作為信息資源的基本表現形式和重要組成部分,對數據的投資能更大化地實現企業的業務價值。所以,體現業務價值的企業信息化藍圖,必然需要以企業數據為核心。
另外,隨著企業信息化的發展,特別是大數據概念的提出,導致企業數據的種類和數量急劇增加,企業面臨的數據環境日趨復雜;同時,企業信息化的深度應用對跨部門、跨職能領域的協作提出了更高的要求,信息系統之間互通、互聯、互操作的復雜性持續增加。海量的數據、復雜的數據環境、潛在的數據質量缺陷阻礙了企業級的信息集成和信息深度利用,成為制約企業信息化發展的瓶頸。為了使龐大的企業數據發揮更大的價值,企業必須加強數據資產的管理和綜合利用,通過數據治理推動企業信息化的升級。因此,數據的治理應該是企業信息化的一項核心的基礎性工作,其目標是保證企業數據的高質量、有效性、可訪問性、一致性、可審計性和安全性。
- Hands-On Cybersecurity with Blockchain
- JBoss ESB Beginner’s Guide
- Apache Spark Deep Learning Cookbook
- 大數據驅動的設備健康預測及維護決策優化
- 人工智能實踐錄
- 新編計算機組裝與維修
- PVCBOT機器人控制技術入門
- Azure PowerShell Quick Start Guide
- 網絡存儲·數據備份與還原
- ASP.NET 2.0 Web開發入門指南
- 生物3D打印:從醫療輔具制造到細胞打印
- HBase Essentials
- 系統安裝、維護與數據備份技巧
- Flash CS3動畫制作
- Mastering SQL Server 2014 Data Mining