基于傾斜攝影和實時視頻的輸電三維動態(tài)管控平臺研究

蘇州大學機電工程學院 朱富云

輸電線路是電力系統(tǒng)的重要組成部分，其特點是點多、面廣、布設(shè)復雜，且容易受氣候、地理環(huán)境等外部因素的影響。伴隨著計算機信息的迅速發(fā)展，GIS在電力工業(yè)中的應用也越來越廣泛。將三維可視化技術(shù)引入輸電網(wǎng)管理中，為各層次管理者提供方便快捷的一整套輸電網(wǎng)，已成為現(xiàn)代電力企業(yè)提高管理水平和工作效率的有效手段。

傳輸線是指距離地理空間較遠、地理環(huán)境復雜的人造建筑物，同其它電力、通訊線形成交叉，也通過社區(qū)和其他特殊地區(qū)。輸電線桿塔的位置與其地理空間位置密切相關(guān)，分層在垂直方向上顯得尤為重要。近年來計算機圖形計算及計算機硬件技術(shù)得到了迅速發(fā)展，讓三維可視化技術(shù)日臻完善，利用這些技術(shù)可以真實地再現(xiàn)傳輸線走廊的全貌。地表模型和各種設(shè)備模型能為輸電線路的規(guī)劃、設(shè)計、檢修和決策提供最新的三維視覺信息。近年來三維重建技術(shù)逐漸發(fā)展成熟，其應用范圍逐漸從影視游戲的室內(nèi)對象建模擴展到對戶外場景進行大規(guī)模三維重建。可視化三維重建技術(shù)利用計算機視覺技術(shù)來重建物體的三維模型，就是把數(shù)碼相機用作圖像傳感器，對非接觸式三維測量，綜合利用圖像處理、視覺計算等技術(shù)，利用電腦程序獲得物體三維信息。

蘇黎世聯(lián)邦理工大學（ETH）、德國慕尼黑工業(yè)大學（TUM）等著名高校都進行了完整的三維重建流程的研究，COLMAP、PMVS、GIPUMA等國外開源三維重建軟件也可進行非實時重建計算。除了科研院所，Pix4D及Bently等商業(yè)公司也開發(fā)了相應的三維重建軟件服務(wù)于測繪、建模等傳統(tǒng)領(lǐng)域。不過由于電力系統(tǒng)中電塔、電線具有細長、特征不明顯的特點，目前的開源及商業(yè)軟件均不能得到很好的重建效果，在應用到電力系統(tǒng)前需針對電塔、電線的特點對每一步的算法進行特殊優(yōu)化。

1 傾斜攝影三維重構(gòu)技術(shù)

傾角照相測量技術(shù)是一種新的照相測量技術(shù)[1]，它是在同一飛行平臺上搭載多個傳感器的基礎(chǔ)上對傳統(tǒng)攝影測量技術(shù)的新發(fā)展，該系統(tǒng)還能采集垂直、橫向和前后三個角度的圖像，比較完整地獲取地面建筑的側(cè)面紋理信息。

該軟件與現(xiàn)有的具有協(xié)同并行處理能力的傾斜影像數(shù)據(jù)處理軟件相結(jié)合，可快速地實現(xiàn)大規(guī)模城市三維建模，大大提高三維模型的生產(chǎn)效率。傾角攝影測量技術(shù)以其多視角、高真實度、全要素等優(yōu)勢，被廣泛應用于應急救援、國土監(jiān)測、城市建設(shè)、稅收評估、資源開發(fā)等領(lǐng)域。傾角攝影測量技術(shù)的數(shù)據(jù)處理流程包括圖像預處理、多視點聯(lián)合調(diào)整、多視點密集匹配、高精度DSM自動提取和三維建模等。

圖像預處理主要有畸變校正、勻光勻色等方法。受到攝像機系統(tǒng)安裝誤差和鏡頭畸變的影響，所拍攝的圖像存在主點偏移和圖像邊緣畸變等問題，所以航飛前需在地面檢校場對相機進行檢查，求解出相機的內(nèi)方位元素和畸變參數(shù)，并將求出的檢校參數(shù)與相應的軟件相結(jié)合，完成圖像的畸變處理。多視圖聯(lián)合平差主要考慮了視角變化較大時的幾何形變和遮擋，采用POS系統(tǒng)提供的傾斜攝影瞬間多角度圖像的外方位元素作為初值，在構(gòu)造圖像金字塔時采用了由粗到細的金字塔匹配策略，在每一級圖像上自動提取連接點，提取后進行束網(wǎng)區(qū)域網(wǎng)平差，以達到較好的匹配效果。

圖像匹配是圖像處理中的一個核心問題，圖像匹配還將涉及到攝影測量技術(shù)領(lǐng)域，圖像匹配的結(jié)果直接決定了空三質(zhì)量。常規(guī)方法通常采用單一匹配單元，這種方法容易產(chǎn)生“病態(tài)解”，導致匹配精度和可靠性降低。多視像具有覆蓋范圍廣、分辨率高、同一種地物將對應多種視角的影像，利用這些冗余信息進行匹配時，采用多視圖像密集匹配模型快速提取多視圖像上特征點坐標，實現(xiàn)多視圖像特征點的自動匹配，從而獲得地物的三維信息[2]。

經(jīng)多視圖像密集匹配后可獲得高精度、高分辨率的數(shù)字表面模型，數(shù)字化曲面模型能真實反映地表物體的起伏狀態(tài)，是空間基礎(chǔ)框架數(shù)據(jù)的重要組成部分。通過聯(lián)合區(qū)域網(wǎng)對多視圖像進行平差后，能自動求解每幅圖像的精確外方位元素，基于該方法選擇合適的多視圖圖像匹配單元進行逐像素密集匹配，得到成像區(qū)域地物的超高密度點云，然后通過點云構(gòu)網(wǎng)實現(xiàn)高精度高分辨率自動提取DSM。

相同的三維TIN模型在不同的層次上的細度也能被建立[3]。對于地面比較平坦的地區(qū)，可根據(jù)地形復雜程度自動調(diào)整三角網(wǎng)的網(wǎng)格密度，其三角網(wǎng)通過優(yōu)化可降低數(shù)據(jù)冗余。三角網(wǎng)絡(luò)建立好后就形成了三維模型的TIN向量結(jié)構(gòu)。在傾斜攝影測量模型生成結(jié)果中，受到平臺、氣象條件和軟件算法等客觀因素的影響，常會出現(xiàn)多種畸變現(xiàn)象，主要有模腔、紋理變形、紋理不均勻、懸浮物漂浮等。為實現(xiàn)精細建模可采用相應的模型輔助編輯系統(tǒng)，采用空三加密和初始化的三維模型，在空三加密后的圖像上繪制地物目標輪廓線；采用伸縮等方法生成三維模型實體，選擇變形校正較小的傾斜圖像提取紋理并進行自動映射，可對模型原缺陷明顯的目標區(qū)域進行修補[4]。

2 基于HLS的實時視頻傳輸

Http Live Streaming (HLS)是蘋果公司提出的一種基于HTTP的流媒體傳輸協(xié)議[5]。HLS有一個非常大的優(yōu)點：HTML5可直接打開播放，這意味著可通過微信等轉(zhuǎn)發(fā)分享一個實時鏈接，無需安裝任何獨立APP，擁有瀏覽器即可。在HLS結(jié)構(gòu)中Audio/Video inputs指視頻源，Server接收到視頻源后，Media encoder將源視頻轉(zhuǎn)碼成HLS支持的編碼格式和封裝格式，根據(jù)需求可輸出多個碼率分別送至Stream segmenter，在segmenter中被切分成指定大小或時間長度的TS切片，并生成索引文件M3U8；Distribution是一個HTTP文件服務(wù)器，負責將流媒體文件推送出去或響應客戶端的請求。客戶端只要訪問一級M3U8文件路徑就能自動播放HLS視頻流了。

M3U8文件其實就是以UTF-8編碼的M3U文件，該文件本身不能播放，只是用于存放待播放視頻流的基本信息。HLS有兩級索引，第一級索引存放的是不同碼率HLS源的M3U8地址，也就是二級索引文件的地址；第二級索引則記錄了同一碼率下TS切片序列的下載地址。客戶端獲取一級M3U8文件后，根據(jù)自己的帶寬去下載相應碼率的二級索引文件，然后再按二級索引文件的切片順序下載并播放TS文件序列。

3 平臺功能應用

本系統(tǒng)平臺基于計算機三維視覺重建核心技術(shù)，打造了從二維圖片還原三維模型的實景三維的全自動重建服務(wù)。

相機姿態(tài)恢復，空三解算，生成帶導線的輸電線路通三維道密集點云成果：相機姿態(tài)恢復技術(shù)構(gòu)建出多視角精確的相機姿態(tài)并產(chǎn)生稀疏的三維點云，利用高可靠性粗差剔除技術(shù)，并結(jié)合基于圖片檢索方法快速、有效地找到匹配的圖片并進行快速特征點匹配，圖像匹配精度達到1/3像素；結(jié)合最新的三維密集點云匹配方法得到精確的三維密集點云，并對相機局部姿態(tài)進行優(yōu)化，從而產(chǎn)生亞像素級的密集點云匹配。

網(wǎng)格模型重建：基于相機點云可見性的三維TIN模型構(gòu)建技術(shù)能實現(xiàn)高效的像素級的密集點云匹配和傾斜影像三維紋理TIN模型的快速全自動構(gòu)建，突破了基于Mutual Information和Census Transform匹配代價相結(jié)合的SGM密集匹配技術(shù)、基于Possion方程的三維TIN模型構(gòu)建技術(shù)和影像紋理自動優(yōu)選映射技術(shù)，能夠?qū)崿F(xiàn)高效的像素級的密集點云匹配和傾斜影像三維紋理TIN模型的快速全自動構(gòu)建；紋理映射：應用影像紋理自動優(yōu)選映射技術(shù)，結(jié)合圖像的三維網(wǎng)格模型的優(yōu)化算法實現(xiàn)高精度紋理映射。

生成線路通道實景三維模型成果：可將海量二維影像數(shù)據(jù)生成真三維實景模型，并可進行通道三維模型展示和三維模型編輯（圖1）。針對輸電線路的三維點云數(shù)據(jù)，采用聚類算法可擬合出輸電線路中的電力導線（圖2）。擬合出輸電線路電力導線之后，則可將擬合的導線數(shù)據(jù)與輸電通道實景三維網(wǎng)格模型融合（圖3）。利用流媒體傳輸協(xié)議，可在三維點云模型基礎(chǔ)上查看攝像頭實時視頻流，以實時掌握輸電線路狀況（圖4）。

圖1 三維點云模型展示效果

圖2 輸電線路電力導線擬合

圖4 實時視頻流查看

綜上，本平臺系統(tǒng)構(gòu)建能夠準確有效地實景再現(xiàn)輸電線路走廊內(nèi)地形、地貌、地物的管控分析平臺，實景再現(xiàn)了輸電線路周圍的地形地貌、輸電設(shè)備，實現(xiàn)輸電線路信息和地理信息完美結(jié)合。應用流媒體傳輸協(xié)議實時傳輸通道監(jiān)控影像，在后端可視化平臺上以實景三維模型底圖上實現(xiàn)了無插件瀏覽器監(jiān)控視頻播放、實景三維模型和動態(tài)視頻監(jiān)控無縫融合。