王豐錦:城市運行體征大數(shù)據(jù)中心 驅(qū)動智慧城市發(fā)展
數(shù)據(jù)中心經(jīng)過多年的發(fā)展,正在由數(shù)據(jù)的保管者和服務(wù)者轉(zhuǎn)變?yōu)閿?shù)據(jù)的管理者和決策者,從被動的響應(yīng)領(lǐng)導(dǎo)的要求轉(zhuǎn)變?yōu)橹鲃酉蝾I(lǐng)導(dǎo)及各業(yè)務(wù)部門提供數(shù)據(jù)服務(wù)。大數(shù)據(jù)時代的到來,賦予了數(shù)據(jù)中心更多新的使命。這種背景下,打造有靈魂的數(shù)據(jù)中心成為同方的發(fā)展方向,延伸到智慧城市的市場理念,“用數(shù)據(jù)管理城市運行體征,用數(shù)據(jù)驅(qū)動智慧城市發(fā)展”也就成為了同方的重要發(fā)展目標(biāo)。
同方物聯(lián)網(wǎng)應(yīng)用產(chǎn)業(yè)本部軟件開發(fā)部總監(jiān) 王豐錦
城市運行體征大數(shù)據(jù)中心形成過程
城市運行體征這個概念由同方在2010年首次提出。形象的解讀“城市運行體征”,就是把城市看成一個人,“城市”是一個生命體,同樣需要依靠各種神經(jīng)去感知各項身體狀況。依照人的身體健康體征如身高體重等,同方從五個方面去描述城市運行狀態(tài)即基礎(chǔ)設(shè)施、公共安全、監(jiān)測評價、綜合服務(wù)和績效考核。繼續(xù)對以上五個方面進(jìn)行細(xì)分,比如在公共安全方面,分為應(yīng)急資源的分布情況以及對于整個應(yīng)急預(yù)案的情況,還有應(yīng)急考核指標(biāo)情況,把這些數(shù)據(jù)從頂往下分就形成一個能夠完整描述城市運行體征的指標(biāo)體系樹,以這個指標(biāo)體系樹為依據(jù),再去梳理現(xiàn)有的眾多基礎(chǔ)數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)進(jìn)入這個系統(tǒng)里面,這些數(shù)據(jù)從物理上是集中的,從邏輯上是按照智慧城市指標(biāo)體系進(jìn)行邏輯化,這樣就形成了智慧城市的城市運行體征大數(shù)據(jù)中心。
同方提出“城市運行體征”理念,是運用物聯(lián)網(wǎng)、云計算等科技手段進(jìn)行基于“城市運行體征”管理的“智慧城市”建設(shè),對城市體征進(jìn)行監(jiān)測分析、數(shù)據(jù)處理,對事件和事故進(jìn)行應(yīng)急處理,有效保障城市高速、健康運行,讓城市更具智慧的感知能力。
城市運行體征大數(shù)據(jù)中心落地應(yīng)用
用數(shù)據(jù)管理城市運行體征,就是采用大數(shù)據(jù)相關(guān)技術(shù)及應(yīng)用,對城市運行體征進(jìn)行管理。關(guān)于城市運行體征的大數(shù)據(jù)中心如何驅(qū)動智慧城市的發(fā)展,同方物聯(lián)網(wǎng)應(yīng)用產(chǎn)業(yè)本部軟件開發(fā)部總監(jiān)王豐錦日前在接受采訪時通過南水北調(diào)東線工程項目介紹了城市運行體征大數(shù)據(jù)中心的應(yīng)用狀況。王豐錦介紹說,南水北調(diào)東線山東段調(diào)度運行管理系統(tǒng)項目從今年5月25號到6月25號是試通水階段,從10月22日開始為通水試運行,目前都已經(jīng)獲得了成功,每秒大概以500立方的抽水速度北上,送至魯北、膠東地區(qū)。在這個運行過程中,基本實現(xiàn)了預(yù)期的信息監(jiān)測與管理,自動化數(shù)據(jù)采集和閘泵站自動監(jiān)控等等。
在技術(shù)上,南水北調(diào)東線山東段調(diào)度運行管理系統(tǒng)利用城市運行體征的大數(shù)據(jù)中心所涵蓋的公共基礎(chǔ)服務(wù)平臺、GIS公共服務(wù)平臺、數(shù)據(jù)分析平臺等系統(tǒng),實現(xiàn)了信息自動采集、數(shù)據(jù)存儲、數(shù)據(jù)轉(zhuǎn)發(fā)、數(shù)據(jù)分析服務(wù)以及可視化大數(shù)據(jù)展示等功能。
王豐錦繼續(xù)介紹說,這個項目目前的主要監(jiān)測對象為94個閘站,每5分鐘采集一下水位、流量、閘門開度和基礎(chǔ)運行狀態(tài)這些信息,每天的數(shù)據(jù)量大概在50萬條左右,每一年將近是1.5億條,每天就將近有一個G的數(shù)據(jù)量會產(chǎn)生。在這個系統(tǒng)里面,可以分別實現(xiàn)對大數(shù)據(jù)的實時采集、數(shù)據(jù)存儲、數(shù)據(jù)分析和綜合查詢等。首先基于同方原有的ezM2M平臺進(jìn)行升級,改造成信息采集平臺。通過這個信息采集平臺去實現(xiàn)對94個閘泵站的水位、水情、水質(zhì)和閘門開度等基礎(chǔ)信息的采集。南水北調(diào)東線山東段調(diào)度項目是通過傳感器和PLC自動化控制設(shè)備利用信息采集平臺實現(xiàn)了實時的傳感信息和設(shè)備運行信息的自動采集,這使得同方的大數(shù)據(jù)具備物聯(lián)網(wǎng)的特色??紤]到南水北調(diào)調(diào)度系統(tǒng)目前還是以業(yè)務(wù)系統(tǒng)為主,分析輔助決策為輔,所以同方在數(shù)據(jù)庫設(shè)計上還是以關(guān)系型數(shù)據(jù)為主,但為了適應(yīng)大規(guī)模數(shù)據(jù)量日志分析,也會采用混合數(shù)據(jù)結(jié)構(gòu)的方式來進(jìn)行技術(shù)支持。
落地應(yīng)用過程中需注意的問題
數(shù)據(jù)轉(zhuǎn)移存儲難度大
“通過具體的項目,我們發(fā)現(xiàn)數(shù)據(jù)整合是很耗時耗人的過程,一方面你要對業(yè)務(wù)數(shù)據(jù)進(jìn)行理解,需要了解原有數(shù)據(jù),第二要進(jìn)行轉(zhuǎn)換,要把原有的結(jié)構(gòu)形式甚至非結(jié)構(gòu)化的形式轉(zhuǎn)化成符合現(xiàn)有系統(tǒng)的要求。第三,原有數(shù)據(jù)有可能出現(xiàn)數(shù)據(jù)口徑、數(shù)據(jù)含義、數(shù)據(jù)含義不一致的情況,這就需要數(shù)據(jù)質(zhì)量校核,把數(shù)據(jù)質(zhì)量不一致的情況篩選出來,用來判斷哪個是最終數(shù)據(jù)。所以這方面的工作量是很大的。”王豐錦這樣向記者表示到。為此,同方制定了非常獨特的元數(shù)據(jù)指標(biāo)體系,比如智慧城市指標(biāo)體系和具體行業(yè)的指標(biāo)體系,以這個指標(biāo)體系為依據(jù)去梳理現(xiàn)有的基礎(chǔ)數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù),然后再對它們進(jìn)行標(biāo)準(zhǔn)化、體系化和關(guān)聯(lián)化。這樣就能保證不同的業(yè)務(wù)數(shù)據(jù)有統(tǒng)一的業(yè)務(wù)體系規(guī)范標(biāo)準(zhǔn),按照這個標(biāo)準(zhǔn)進(jìn)行數(shù)據(jù)查詢、綜合分析和挖掘應(yīng)用。
數(shù)據(jù)安全是重中之重
有人說,大數(shù)據(jù)時代無隱私,尤其是“棱鏡門”事件后,關(guān)于數(shù)據(jù)安全的問題持續(xù)發(fā)酵。同方一直重視數(shù)據(jù)安全問題,從技術(shù)上加強數(shù)據(jù)安全管理。第一,業(yè)務(wù)上進(jìn)行權(quán)限的控制,細(xì)粒度的基礎(chǔ)數(shù)據(jù)是單獨存在一個數(shù)據(jù)庫的,在基礎(chǔ)數(shù)據(jù)基礎(chǔ)之上生成的分析數(shù)據(jù)和綜合數(shù)據(jù)就相當(dāng)于是比較中觀和宏觀的,這個庫根據(jù)系統(tǒng)設(shè)置的權(quán)限訪問規(guī)則可讓相應(yīng)的用戶能夠訪問。第二,技術(shù)上也有嚴(yán)格的權(quán)限管理,從這兩方面進(jìn)行考慮,既支持業(yè)務(wù)功能訪問權(quán)限的設(shè)置,又支持?jǐn)?shù)據(jù)訪問權(quán)限的設(shè)置,以此來保證數(shù)據(jù)的安全。一方面是功能訪問權(quán)限,不同的功能模塊是控制不同的人能夠訪問的,比如說像基礎(chǔ)數(shù)據(jù)查詢,只有具體的操作業(yè)務(wù)人員授權(quán),非授權(quán)的人員是無法使用基礎(chǔ)數(shù)據(jù)查詢功能的,而只能查到綜合數(shù)據(jù),就相當(dāng)于把隱私的基礎(chǔ)數(shù)據(jù)抹掉了,另一方面是數(shù)據(jù)訪問權(quán)限,不同部門、不同地區(qū)、不同層級的數(shù)據(jù)是可以設(shè)置不同的人可訪問的。關(guān)于數(shù)據(jù)安全這塊,王豐錦表示,“技術(shù)上的保障并不足夠,還需要相應(yīng)的管理措施、條例及數(shù)據(jù)的保護(hù)法等方面的加強?!?/P>