時間:2021年08月07日 分類:免費文獻 次數:
《基于數字孿生技術的考古系統的設計和實現》論文發表期刊:《電子質量》;發表周期:2021年05期
《基于數字孿生技術的考古系統的設計和實現》論文作者信息:李超(1988-),男,江西宜春人,工程師,碩士,2011 年畢業于瑞典克里斯蒂安斯塔德大學學院嵌入式系統專業,主要從事智慧城市,數字孿生相關數據處理與應用工作。
摘要:針對考古領域的高分影像智能輔助診斷系統需求,提出了基于數字孿生技術的高分影像分析方法。
該文主要是通過利用分布式云存儲技術、多模式影像識別、AI智能計算模型算法,結合先進的可視化技術,實現智能化的信息分析和輔助決策,實現對物理實體運行指標的監測與可視化,對模型算法的自動化運
行",以及對物理實體未來發展的在線預演,從而得到一個科學研究判定結果。實際運行表明該系統具有良
好的可行性和可用性。
關鍵詞:數字孿生;高分遙感;無人機;增強現實;GIS
Abstract:In response to the needs of the high-resolution imaging intelligent diagnosis system in the archaeological field,a high-resolution imaging analysis method based on digital twin technology is proposed.This article mainly discuss distributed cloud storage technology,multi-mode image recognition,Al intelligent computing algorithm,combined with advanced visualization technology to display intelligent information,and monitoring and visualization of physical entity operation indicators.The automatic process of the model algorithm and the online preview of the future development of the physical entity will obtain a scientific research result.The practical operation shows that the system has good feasibility and usability.
Key words:Digital twin;Remote sensing satellite;UAV;Augmented reality;GIS
0 引言
世界各國在高分影像衛星的研發設計上都是在競 爭式的進行研發比拼,同時高分影像的行業應用也在層出不窮的出現,而且通過調查研究,最尖端的間諜高分 衛星的影像分辨率已經精細到可以從衛星上看到田地 里種植的植物種類。
那么,針對這種尖端科技技術的行業應用前景,通 過高效的挖掘方法在大體量的 3D、2D 數據中實現價值 提煉,是當前極具科學價值的問題之一。研究的主要難 點主要是存在于衛星的傳感器和觀測環境的條件,它的姿態、高度、速度等不同的因素在不停地進行變化,這樣 就會造成影像的噪聲和變形,同時高分衛星影像本身在 光譜分辨率上的不足,也會造成數據精度的影響[2],因此在遙感衛星影像處理中還是存在不少的技術難點,具體內容包括:
(1)市面上的軟件需要專業的知識以及商業授權,價 格不菲,而且不宜操作。
(2)自動化處理程度不高,同時無法結合使用 AI 深 度學習模型。
(3)針對 2D 和 3D 數據的存儲管理,沒有一個友好的軟件平臺。
(4)缺乏一個有良好的虛實結合的可視化管理界面。
因此,針對上面問題,本文開發了基于數字孿生技 術的考古系統,提高數據分析處理的算法智能化和流程 化水平。
1 系統設計
1.1 系統設計目標
系統是基于大數據平臺通用技術進行二次開發和 集成。對高分影像和無人機影像采集到的多模態數據進 行數據集管理、可視化查看;可以在線上對多模態數據 進行自動化處理;可以將數據掛載到機器學習虛擬平臺 上進行數據建模和深度學習模型的構建;可以自動規劃 無人機路線。因此,基于數字孿生技術的考古系統設計主要針對以下幾個目標:
(1)滿足數據的管理的功能需求,具有數據分布式存 儲能力,較高的安全性和穩定性。
(2)盡可能地實現自動化的一鍵操作,可以自動規劃 無人機航飛區域范圍,可以自動對復雜地形進行數據處 理分析。
(3) 可以后臺將數據掛載到虛擬化機器學習平臺進行模型構建和自動分析。
(4)自動化生成可視化模型,可以在多設備端上進行可視化查看。
1.2 系統總體架構
系統采用 Java 語言開發,spring cloud 微服務架構,包括了基礎支撐層、數據互動層、模型構建層、仿真分析 層。基礎支撐層包含了數據采集源;數據互動層采用自 建云存儲進行分布式存儲、數據通信、交互服務請求;模 型構建層包含了傾斜攝影和點云結合的三維模型重建,基于多用途場景的 CAD 模型構建;仿真分析層包含了 虛擬模型仿真大數據分析、數據處理、圖像顯示。系統總體結構如圖 1 所示。
2 關鍵技術
2.1 基于高分衛星影像的 3D 深度神經網絡架構
目前關于圖像數據深度神經網絡模型都是基于平 面圖像(2D 圖像)的,雖然在圖像處理和分析,取得了一 系列耀眼的成果,但是難以處理 3D 影像,目前的處理方法大都將 3D 影像分為若干 2D 影像,分別送入處理2D 圖像的卷積神經網絡,但是此方法忽略了各層間拓 撲聯系,本系統設計了一套具有時空信息的 3D 深度神 經網絡架構,能通過學習方法高效判讀各類 3D 高分影 像,也能在 3D 影像的人工智能領域在模型和方法上取 得突破[3]。
卷積神經網絡由于強調圖形的拓撲信息,被證明是一種有效的特征提取模型,將每類影像數據通過前面提 出的 3D 深度神經網絡進行特征提取,再將各個模態的深度學習網絡進行集成學習,在保證數據量進行充分訓 練的條件下,可充分利用每種模態影像的信息,綜合考 慮達到最優學習效果,而且由于每種模態數據分開訓練, 此方法并不需要每個個體都具有所有模態數據,這便更 利于實際應用。不僅如此,這還能為多模態數據的深度學習提供新的技術手段。
2.2 Arch-Yolo 無人機路徑規劃及目標檢測算法
為了彌補高分影像在獲取數據源的清晰度不夠的情況下,該系統還會額外使用無人機設備采集近距離高 清影像,本系統所使用的無人機是搭載了多種傳感器, 并經過特殊改造的無人機設備,即包含 2D 影像采集設 備和 3D LiDAR 數據采集設備,基于此創新性地研發了一種無人機路徑規劃及目標檢測算法,只要根據輸入的 區域位置,無人機可以進行動態的路徑規劃。基于目前 市面上 LiDAR 點云采集數據算法框架的缺陷,部分細 節復雜區域需要動態調整無人機的高度、角度和多次采 集數據才能完整的進行三維圖像重建,所以該路徑規劃算法會實時檢測出復雜區域的位置,并進行多次來回掃 描,從而得到一個可進行科學研究的數據模型樣本[4-5]。
2.3 基于點云的虛實結合數字孿生可視化模塊
目前市面上主流顯示數字孿生可視化的模塊,基本是在 web 上顯示可拖曳 3D 模型,或者是以增強現實AR 的模式進行顯示 [6],而如今最新的趨勢是用 LiDAR點云數據方式進行實時重建,但是利用點云數據進行三 維重建存在一些局限性,例如構建出來的模型的精細度 不夠保真。本系統以攻克高保真模型生成的角度出發, 以 LiDAR 數據點云為基礎生成一個大致的粗略模型, 然后再使用 2D 影像圖像進行輔助校準。這樣就初步生 成了的高精度、高保真模型。同時,研究人員可以在這個高保真模型基礎上進行人工的標注工作,可以把一些自 己構建的一些三維圖形模塊融合進這個高保真模型里,最后實現一種虛實結合的可視化效果。
2.4 高可用的數據采集、傳輸、存儲
不同于城市里高度發達的基礎設施的建設,由于考 古工作的特殊性,一些考古外業工作常常在一些無人區 進行工作,但所幸的是考古工作者對數據傳輸的時效性 的要求并不是很高,所以數據存儲的便利性、穩定性、安 全性則需求優先級較高。采集數據之后可以等到網絡恢 復的時候,再進行一些數據上傳同步工作。 所以該系統從 5G 和數據云存儲的方向進行綜合 性改進,在無人機整套設備系統上配備一個 5G 信號放大裝置器,可以增強網絡傳輸信號,同時配備一個本地存儲容量池,可以緩存數據內容。保證在離線狀態,數據 也不會溢出,滿足了數字孿生大數據的應用場景。
3 系統主要功能實現
(1)系統界面
系統界面主要包括導航欄、可視化窗口、數據集管 理窗口、虛擬容器管理窗口、無人機管理窗口和狀態欄。
(2)數據集管理
數據集管理主要是可以人工上傳和查看多模態數 據,包括 2D 數據和 3D 數據,支持設置數據的管理權限, 數據的過期時間,同時支持數據打包下載。
(3)可視化
可視化數據查看模塊支持查看二維圖表數據,用 web 方式進行查看檢測出來的 3D 模型,也可以將模型導出為主流 3D 處理軟件支持的格式文件。
(4)虛擬容器
虛擬容器則是可以創建機器學習框架的鏡像容器, 例如 pytorch、tensorflow,利用這些預搭載的鏡像,再加載采集到的影像數據,便可以進行數據的自動化處理,可以進行模型自動調參,最后得到效果良好的算法模型, 將這些模型部署到無人機搭載的端邊設備進行智能檢測。
(5)無人機管理
包括無人機設備的注冊管理、增加、刪除。同時可以 在系統上查看無人機的實時位置、航飛區域規劃以及可 視化查看采集到的數據。
4 結束語
高分衛星因為其全局戰略意義相對比較高,可以為 軍方、政府、企業提供很多幫助,所以針對于高分影像遙 感信息的處理應用研究極具戰略意義的,本文針對高分 影像在考古領域中的應用,介紹了智能目標識別檢測的 一些方法和設計,同時,系統也結合了虛實結合的可視 化數據分析方法、自動化流程方法,極大地減少了考古 人員外業工作時的工作量,可以實現一鍵自動化進行數據采集和自動建模等工作,促進了考古自動化數字化進程,為提高系統的適用性,未來可以從以下幾個方向進 行完善:1)優化無人機運載數據傳輸系統,增強圖傳數據的速率,減少巡航次數,提高采集效率;2)支持自動化建模工作去可以在移動端進行,減少對網絡云端的依賴。
參考文獻:
[1]劉大偉,韓玲,韓曉勇.基于深度學習的高分辨率遙感 影像分類研究[J].光學學報,2016,36(4):306-314.
[2]張良培,武辰.多時相遙感影像變化檢測的現狀與展望 [J].測繪學報,2017,46(10):1447-1459.
[3]劉心燕,孫林,楊以坤,等.高分四號衛星數據云和云陰 影檢測算法[J].光學學報,2019,39(1):446-457 [4]吳宏正,陳曦,陳文惠.無人機 RGB 影像植被分類方法研究 -- 以福建省三明市尤溪縣為例[J].亞熱帶水土保持,2020,32(4):1-8.
[5]李東升,劉海紅,張兵良,等.基于無人機影像的綠色植被提取方法[J].昆明冶金高等專科學校學報,2019,35(4):58-65.
[6]任冠,魏堅.城市考古研究中空間分析的理論與實踐-- 基于遙感與地理信息系統[J].河南大學學報(社會科學版),2021,61(1):77-82.