隨著全球進入“大數(shù)據(jù)時代”，大數(shù)據(jù)的價值已經受到廣泛關注，部分國家甚至將大數(shù)據(jù)提升到了國家戰(zhàn)略層面。近幾年，電網企業(yè)信息化建設得到大規(guī)模的發(fā)展，IT技術在電網企業(yè)中的得到廣泛應用，隨著電力行業(yè)數(shù)據(jù)總量的持續(xù)增長和急速膨脹，電網企業(yè)的大數(shù)據(jù)時代已經來臨。對于電網企業(yè)來說，大數(shù)據(jù)應用建設的必要性主要體現(xiàn)在以下幾點：

1)      宏觀政策層面的要求

2014年5月16日國家發(fā)改委與中科院正在啟動“基礎研究大數(shù)據(jù)服務平臺應用示范項目”，意在大數(shù)據(jù)上做頂層設計；為推動云計算和大數(shù)據(jù)等戰(zhàn)略性新興產業(yè)在云南的布局，提升云計算和大數(shù)據(jù)服務、運營、管理創(chuàng)新能力，云南省工業(yè)和信息化委員會發(fā)布《云南省促進云計算和大數(shù)據(jù)產業(yè)發(fā)展的若干政策》，鼓勵和支持大數(shù)據(jù)的研究探索。

2)      電力行業(yè)發(fā)展所帶來的必然性

電力大數(shù)據(jù)將貫穿未來電力工業(yè)生產及管理等各個環(huán)節(jié)，起到獨特而巨大的作用，是中國電力工業(yè)在打造下一代電力工業(yè)系統(tǒng)過程中有效應對資源有限、環(huán)境壓力等問題，實現(xiàn)厚積厚發(fā)、綠色可持續(xù)性發(fā)展的關鍵。

3)      電網企業(yè)經營決策快速響應用電需求的需要

為了緩解目前電力供需矛盾的問題，使電網企業(yè)快速響應用電需求，合理安排經營計劃，減少供電成本，避免不合理的投資建設，提高供電質量，提升企業(yè)經營效益和客戶服務水平，需要對傳統(tǒng)的決策分析技術進行改進，為營銷管理能力和客戶服務滿意度的提升提供更加準確、實時的決策數(shù)據(jù)。

4)      電網企業(yè)數(shù)據(jù)有效管理的需要

隨著電網企業(yè)越來越多信息系統(tǒng)投入運行，企業(yè)所有日常業(yè)務都在信息系統(tǒng)中進行處理，業(yè)務數(shù)據(jù)實時性越來越高、增長越來越快，數(shù)據(jù)規(guī)模向PB級發(fā)展，由于這些業(yè)務數(shù)據(jù)結構多樣、關系復雜，如果對這些數(shù)據(jù)進行統(tǒng)一有效的管理，來保障數(shù)據(jù)的標準性、準確性、可訪問性和安全性，將可用于企業(yè)發(fā)現(xiàn)新知識、創(chuàng)造新價值，否則歷史數(shù)據(jù)將成為信息系統(tǒng)運行的“累贅”。

5)      電網企業(yè)數(shù)據(jù)存儲技術改進的需要

目前，在電網企業(yè)大型信息系統(tǒng)建設中，數(shù)據(jù)存儲主要基于小型機搭建，存在成本高、伸縮性差的問題，關系型數(shù)據(jù)庫一般僅支持到TB級，且數(shù)據(jù)倉庫不支持實時計算，傳統(tǒng)的數(shù)據(jù)存儲模式難以管理多種復雜的數(shù)據(jù)格式。

6)      電網企業(yè)數(shù)據(jù)應用的需要

目前存在大量與電網企業(yè)相關的非結構化數(shù)據(jù)，這些非結構化數(shù)據(jù)基本沒有得到分析和挖掘，專項分析功能也分散在不同的系統(tǒng)中，數(shù)據(jù)交互成網狀結構，投資重復，且以傳統(tǒng)的因果分析為主，不同結構的數(shù)據(jù)之間缺少關聯(lián)。

 

目前，在電網企業(yè)，大數(shù)據(jù)技術的應用和探索還處于起步階段，它的應用價值雖然已經得到了普遍的認可，但如何建設適合電力行業(yè)的大數(shù)據(jù)應用仍然需要我們進一步的探討。對此，首先要掌握現(xiàn)狀，分析自身的優(yōu)勢和劣勢；二是要提高認識，理解大數(shù)據(jù)技術與傳統(tǒng)數(shù)據(jù)分析技術的區(qū)別和聯(lián)系；三是要結合現(xiàn)狀，規(guī)劃適合電網企業(yè)的大數(shù)據(jù)應用架構。

下面以云南電網公司為例進行探討。在10多年的信息化建設和探索過程中，云南電網公司一直保持著對新技術研究的熱情，如在SOA、云計算、信息安全等領域的研究建設保持著國內領先水平，這些領域的建設將為大數(shù)據(jù)應用提供良好的基礎。而在信息分類編碼方面，由于信息化建設早于標準規(guī)范發(fā)布的現(xiàn)狀，出現(xiàn)了部分系統(tǒng)間信息分類編碼不一致的問題，使數(shù)據(jù)的歸集和共享變得困難，這將是云南電網公司在未來建設大數(shù)據(jù)應用的一個劣勢。在應用系統(tǒng)建設方面，云南電網公司還建設了營銷管理系統(tǒng)、安全生產管理系統(tǒng)、調度管理系統(tǒng)等業(yè)務系統(tǒng)，以及計量自動化系統(tǒng)、調度自動化系統(tǒng)等專業(yè)系統(tǒng)，這些系統(tǒng)經過10來年的運行，已經產生了海量的業(yè)務數(shù)據(jù)，將為大數(shù)據(jù)應用提供豐富的數(shù)據(jù)資源。另外，云南電網公司還建設了一些決策分析系統(tǒng)，這些決策分析系統(tǒng)采用了傳統(tǒng)的數(shù)據(jù)分析技術實現(xiàn)，與大數(shù)據(jù)技術的差別主要體現(xiàn)在：

傳統(tǒng)的數(shù)據(jù)分析所使用的數(shù)據(jù)來源單一，如營銷綜合分析系統(tǒng)的數(shù)據(jù)僅來源于營銷管理系統(tǒng)，而大數(shù)據(jù)應用所使用的數(shù)據(jù)將來自很多系統(tǒng)，甚至要獲取跨企業(yè)的數(shù)據(jù)。

傳統(tǒng)的數(shù)據(jù)分析預測使用的是邏輯模型，而大數(shù)據(jù)應用使用的是數(shù)據(jù)關聯(lián)模型進行分析預測。

傳統(tǒng)的數(shù)據(jù)分析技術，采用集中式的數(shù)據(jù)處理和存儲方式，計算周期在幾個小時到幾天不等，而大數(shù)據(jù)應用的處理速度將達到秒級，極大的提高了數(shù)據(jù)分析處理的能力。

因此，云南電網公司大數(shù)據(jù)應用的建設可以依托于目前信息化建設的成果，通過SOA企業(yè)信息集成平臺從各類業(yè)務系統(tǒng)、專業(yè)系統(tǒng)和企業(yè)外部系統(tǒng)采集數(shù)據(jù)，基于云計算平臺搭建大數(shù)據(jù)分布式計算平臺，并完善現(xiàn)有信息安全保障體系，構建深入挖掘企業(yè)數(shù)據(jù)價值的大數(shù)據(jù)應用。

基于上述認識，對云南電網公司大數(shù)據(jù)應用的整體架構進行了初步的規(guī)劃，如下圖所示：

         云南電網公司大數(shù)據(jù)應用按照五層結構進行規(guī)劃，包括：數(shù)據(jù)源、數(shù)據(jù)存儲、數(shù)據(jù)融合、數(shù)據(jù)計算、分析應用等。其中，數(shù)據(jù)源主要包括現(xiàn)有的應用系統(tǒng)、專業(yè)系統(tǒng)和外部跨企業(yè)系統(tǒng)等三大類，這些數(shù)據(jù)經過采集匯集后，存放在數(shù)據(jù)存儲層，該層可以支持結構化數(shù)據(jù)、非結構化數(shù)據(jù)、準實時數(shù)據(jù)等多種類型的數(shù)據(jù)存儲，然后通過數(shù)據(jù)融合層實現(xiàn)不同來源系統(tǒng)數(shù)據(jù)的歸集和關聯(lián)關系的建立，在數(shù)據(jù)計算層實現(xiàn)了不同種數(shù)據(jù)的處理，最后在分析應用層實現(xiàn)反竊電分析、用電預測、節(jié)能降損、用戶行為分析和輿情分析等不同領域的主題分析。

         對電網企業(yè)來說，大數(shù)據(jù)是電網企業(yè)深化應用、提升應用層次、強化集團企業(yè)管控的有力技術手段。隨著電網企業(yè)各類IT系統(tǒng)對業(yè)務流程的基本覆蓋，采集到的數(shù)據(jù)量迅速增長。電網企業(yè)面臨的問題不僅僅是收集和存儲數(shù)據(jù)，而是圍繞數(shù)據(jù)采用相應的定量和統(tǒng)計信息，挖掘更加有價值的信息。利用大數(shù)據(jù)可對業(yè)務進行分析，加工成有用的數(shù)據(jù)，進而全面掌控企業(yè)業(yè)務。