(院新聞網訊 曾憲森)近日,永利王薇博士團隊的兩項研究成果——《夜間整體可見度提升:不規則輝光去除與輝光感知增強方法》與《基于時空變化運動模糊的三維盲視頻穩定方法》,分别接收到國際權威期刊《IEEE Transactions on Circuits and Systems for Video Technology》與《ACM Transactions on Multimedia Computing, Communications, and Applications》的錄用通知。王薇是該文章的通訊作者,永利碩士研究生吳萬昱和李恒威分别參與完成了這兩項重要研究。
視頻穩像是一項具有挑戰性的任務,旨在補償視頻采集過程中的幀抖動。在視頻中,運動模糊的強度會不斷變化,直接結合方法無法充分利用時空信息,提供不足的跨幀補償線索。為了解決這一難題,王薇博士團隊提出了跨幀時空模塊框架,采用了一種無需預訓練的在測試時進行訓練的策略,用于處理由各種條件引起的盲運動模糊問題,該框架利用跨幀時空特征來估計深度圖和攝像機運動。大量的實驗結果表明,本方法在畫幅幀間連貫性方面具有更優性能。

圖1 基于時空變化運動模糊的三維盲視頻穩定方法流程圖
此外,在現實世界中,多種形狀的輝光效應對夜間能見度造成了嚴重影響,而這一領域的研究尚顯不足。為了有效提升夜間整體能見度,王薇博士團隊提出了一個基于物理模型指導的訓練框架,該框架能夠生成接近場光源輻射特性的夜間成像模型,并對六種輝光形狀類别中的光源生成器進行了生成有效性的驗證。在此基礎上,團隊進一步提出了一種可擴展的光敏盲反卷積網絡,以解決直接傳輸圖和光源圖的盲分解問題。該方法巧妙融合了深度學習策略和物理領域知識,構建了高效的算法框架,并在多個真實數據集上取得了顯著成效,不僅提升了夜間可見度,還優化了多個下遊高級視覺任務的表現。

圖2 輝光現象及其頻域分析圖
《IEEE Transactions on Circuits and Systems for Video Technology》作為計算機圖形學與多媒體領域的頂級期刊,擁有高達,并被中科院SCI期刊大類一區評為TOP期刊(影響因子8.3),同時也是中國計算機學會(CCF)認定的B類期刊。而《ACM Transactions on Multimedia Computing, Communications and Applications》作為國際計算機學會(ACM)的權威會刊,專注于多媒體計算、通信和應用領域的學術論文發表,是多媒體領域的國際一流刊物,同樣獲得了中國計算機學會(CCF)的B類期刊推薦。
王薇所屬的視覺人工智能研究組(https://vai-lab.com),在計算機視覺和人工智能領域深耕多年,始終堅持唯實創新、外引内培的發展理念,不斷開拓新的研究方向。作為6774澳门永利培養并留校任教的博士生,王薇近年來以第一作者或通訊作者身份,在CCF-A類和IEEE/ACM trans.等國際頂級刊物上發表了多篇重要論文,展現了其在學術界的卓越影響力。