智能電網大數據平臺及其關鍵技術研究

　　智能電網是大數據的重要技術應用領域之一。智能電網大數據結構復雜、種類繁多，具有分散性、多樣性和復雜性等特征，這些特征給大數據處理帶來極大的挑戰。智能電網大數據平臺是大數據挖掘的基礎，通過智能電網大數據平臺可實現智能電網全數據共享，為業務應用開發和運行提供支撐。

引言

　　智能電網是以物理電網為基礎，將現代先進的傳感測量技術、通信技術、信息技術、計算機技術和控制技術與物理電網高度集成而形成的新型電網，見圖1。它涵蓋發電、輸電、變電、配電、用電和調度等各個環節，對電力市場中各利益方的需求和功能進行協調，在保證系統各部分高效運行、降低運營成本和環境影響的同時，盡可能提高系統的可靠性、自愈性和穩定性。隨著智能電網的發展，電網在電力系統運行、設備狀態監測、用電信息采集、營銷業務系統等各個方面產生和沉淀了大量數據，充分挖掘這些數據的價值具有重要的意義。

　　大數據是近年來受到廣泛關注的新概念，一般是指無法在可容忍的時間內用傳統的IT技術、軟硬件工具和數學分析方法，對其進行感知、獲取、管理、處理和分析的數據集合。智能電網被看作是大數據應用的重要技術領域之一。目前許多學者正在進行智能電網大數據研究，包括發展戰略研究、大數據技術研究、應用研究等。

　　智能電網大數據應用眾多，涉及電網安全穩定運行、節能經濟調度、供電可靠性、經濟社會發展分析等諸多方面，進行智能電網大數據分析需要統一智能電網大數據，并且由于應用眾多，對計算、存儲、網絡等性能提出了較高要求，因此需要構建面向智能電網應用的統一大數據處理平臺。本文首先分析智能電網大數據特點以及業務應用需求，接著結合業務應用介紹大數據關鍵技術，進而提出智能電網大數據平臺和應用框架。

1智能電網大數據概述

1.1智能電網大數據特點

　　根據數據來源的不同，可以將智能電網大數據分為電力企業內部數據和電力企業外部數據。電力企業內部數據源主要包括廣域量測系統(WAMS)、數據采集與監控系統(SCADA)、在線監測系統、用電信息采集系統、生產管理系統、能量管理系統、配電管理系統、客戶服務系統、財務管理系統等;電力企業外部數據源包括氣象信息系統、地理信息系統、互聯網數據、公共服務部門數據、社會經濟數據等。這些數據分散放置在不同地方，由不同單位/部門管理，具有分散放置、分布管理的特性。

　　智能電網大數據結構復雜、種類繁多，除傳統的結構化數據外，還包含大量的半結構化、非結構化數據，如客戶服務中心信息系統的語音數據，設備在線監測系統中的視頻數據與圖像數據等。這些數據的采樣頻率與生命周期也各不同，從微秒級、分鐘級、小時級，一直到年度級，見圖2。

1.2大數據業務需求分析

　　智能電網大數據業務應用根據對象不同可分為面向電力公司運行管理、面向電力用戶服務、面向政府部門輔助決策等3類。面向電力公司運行管理類應用包括電力系統穩定性分析與控制、輸變電設備故障診斷與狀態檢修、配電網運行狀態評估與預警、配電網故障定位、負荷預測、城市電網規劃等;面向電力用戶服務類應用包括用戶用電行為分析、需求側管理、能效分析、供電服務輿情分析等;面向政府部門輔助決策類應用包括社會經濟狀況分析與預測、政府決策支持與相關政策評估，如電價政策、新能源補貼政策等是否合理等。這些需求需要綜合電網運行狀態信息、用戶用電信息、客服系統信息、氣象數據、經濟社會數據和互聯網數據等。

2智能電網大數據關鍵技術

　　根據信息處理流程，大數據在智能電網中的應用可以分為數據采集、數據清理、數據存儲及處理、數據分析、數據解讀和數據應用6個環節，其關鍵技術包括數據集成技術、數據存儲技術、數據處理技術和數據分析技術。

2.1數據集成技術

　　智能電網大數據具有分散性、多樣性和復雜性等特征，這些特征給大數據處理帶來極大的挑戰。要想處理智能電網大數據，首先就需要對眾多數據源的數據進行集成，通過數據抽取、轉換、剔除、修正等處理，建立正確、完整、一致、完備、有效的智能電網大數據。目前通常采用的數據集成模型包括數據聯邦、基于中間件模型和數據倉庫等。

　　ETL是企業數據集成的主要解決方案。ETL指Extract、Transform、Load，即抽取、轉換、加載。數據抽取是從源數據源系統抽取目的數據源系統需要的數據;數據轉換是將從源數據源獲取的數據按照業務需求，轉換成目的數據源要求的形式，并對錯誤、不一致的數據進行清洗和加工;數據加載是將轉換后的數據加載到目的數據源。ETL過程中的主要環節就是數據抽取、數據轉換和加工、數據加載。為了實現這些功能，各個ETL工具一般會進行一些功能上的擴充，例如工作流、調度引擎、規則引擎、腳本支持、統計信息等。