NEC與日本東京工業大學共同研發「多模態影像融合技術」,運用AI技術將一般攝影機拍攝的可見光影像、熱顯像攝影機拍攝的不可見光影像進行自動合成,針對影像中拍攝的對象與狀況,可大幅提高辨別度。
這次共同研發的「多模態影像融合技術」,為NEC尖端AI技術群「NEC the WISE」其中之一,可讓AI自動從多個影像中,挑選出較易辨別的影像進行合成,並強調不可見光影像之中的細小特徵,能合成做出高辨識度的影像。AI會依據攝影機的種類,如熱顯像攝影機或太赫茲攝影機、環境特徵,如亮度、光線方向、是否有障礙物等,針對影像內各個部份的辨識程度進行評比,再從不同影像中自動挑選。
此外,AI在處理不可見光攝影機所拍攝的影像時,能夠針對異常或危險物品等細小特徵來解析,進行適當的強弱調整,避免產生過度曝光或曝光不足而破壞影像的情形,因而能自動產生以往無法達到的高辨識度多模態,即可見光與不可見光的合成影像。
在各個需要以視覺瞬間辨別的領域中,運用此技術即使在惡劣條件下也能夠做出正確判斷,例如在夜晚或濃霧等惡劣氣候狀況下,也能用於設施監控;對向來車的頭燈太過刺眼或暗處視覺死角的狀況,可用於支援自動駕駛;進行基礎設施維護點檢時,不僅可監測建築表面裂縫,還能找出內部異常等情形。
以往,想要將不同種類攝影機拍攝的影像合成,需要專家進行複雜的手動轉檔作業。本技術則能運用AI,將各種不同攝影機拍攝的影像,自動而高效率地進行合成,不需要任何手動作業。不僅如此,更能充分利用可見光影像與不可見光影像各自的優勢,傳統技術難以視覺化的環境條件下,也能獲得較高的視覺辨別度。
資料來源:NEC