曉霧未散的湖畔,一只薄翼蜻蜓,似被時光按下了暫停鍵,懸停在漣漪微漾的湖面上。蜻蜓琥珀色的復(fù)眼泛著微光,凝視著水波褶皺中游弋的美味佳肴,其視神經(jīng)快速地傳遞著目標(biāo)信號,讓轉(zhuǎn)瞬即逝的殘影在其感官中延展成可供精準(zhǔn)捕捉的運(yùn)動軌跡。
“蟲眼看世界”——昆蟲以超大的視野、超快的響應(yīng)感知微觀世界。這種令人驚嘆的視覺系統(tǒng),為人類的科技探索打開了全新思路。

AI賦能仿生視覺技術(shù)
科學(xué)家們之前已通過模仿昆蟲復(fù)眼的多單元陣列設(shè)計,開發(fā)出各類由微透鏡陣列和傳感器組成的成像系統(tǒng)——仿生復(fù)眼成像系統(tǒng),有望將昆蟲眼中的微觀奇跡轉(zhuǎn)化為改變?nèi)祟惿畹膭?chuàng)新技術(shù)。然而,傳統(tǒng)仿生復(fù)眼成像系統(tǒng)因其復(fù)雜的三維結(jié)構(gòu)、有限的空間解析能力,僅能以模糊的馬賽克圖像形式呈現(xiàn)出微觀世界。
近日,在莊松林院士的指導(dǎo)下,上海理工大學(xué)張大偉教授領(lǐng)銜的超精密光學(xué)制造團(tuán)隊(duì)戴博教授及同事,指導(dǎo)博士生龍嚴(yán)與美國杜克大學(xué)Tony Jun Huang教授課題組合作,提出利用AI賦能仿生成像系統(tǒng),展示了百萬像素的高分辨全景成像,實(shí)現(xiàn)了狹小空間中對特定目標(biāo)準(zhǔn)確識別、精準(zhǔn)三維定位及三維跟蹤。相關(guān)研究成果以“蟲眼看世界:AI賦能仿生視覺高分辨多任務(wù)成像”(Seeing through arthropod eyes: An AI-assisted, biomimetic approach for high-resolution, multi-task imaging))為題發(fā)表在《科學(xué)進(jìn)展》(Science Advances)期刊上,并被選為封面論文。龍嚴(yán)、戴博和常琛亮副教授為第一作者,張大偉和Tony Jun Huang為通訊作者。

仿生視覺系統(tǒng)及成像效果
(A 節(jié)肢動物視覺系統(tǒng)和仿生視覺系統(tǒng);B 仿生復(fù)眼及視覺系統(tǒng)的實(shí)物圖;C,D 利用仿生視覺系統(tǒng)進(jìn)行目標(biāo)成像和定位)
“不僅要讓仿生視覺系統(tǒng)‘看到’世界,還要讓它‘看清’、‘看懂’這個大千世界。”張大偉教授團(tuán)隊(duì)如此介紹這項(xiàng)科研工作。這套仿生視覺系統(tǒng)的靈感,來源于節(jié)肢動物復(fù)眼的結(jié)構(gòu)特點(diǎn)及信息處理方式。昆蟲通過成百上千個“子眼”協(xié)同工作,實(shí)現(xiàn)對復(fù)雜環(huán)境的即時響應(yīng)。團(tuán)隊(duì)模擬這一結(jié)構(gòu),設(shè)計出一套0.8立方米厘米的仿生視覺系統(tǒng),實(shí)現(xiàn)了百萬像素級的全彩超大視野(165°×360°)高清成像。更重要的是,他們不僅“模仿”昆蟲的視覺系統(tǒng),還利用AI為其“賦能”。科研人員通過深度學(xué)習(xí)構(gòu)建了一套多級架構(gòu)的視覺處理模型,能夠開展全景圖像高清重構(gòu)、大視野中多目標(biāo)定位、目標(biāo)識別、目標(biāo)跟蹤的多項(xiàng)復(fù)雜任務(wù),讓“仿生視覺”真正具備了“看清”“看懂”的能力。
科研團(tuán)隊(duì)正計劃進(jìn)一步優(yōu)化仿生復(fù)眼結(jié)構(gòu),并深入挖掘仿生視覺技術(shù)在微小無人平臺、內(nèi)窺檢測儀器等高端儀器及裝備中的應(yīng)用潛力,助力AI賦能的科學(xué)儀器創(chuàng)制。
來源:上海楊浦
原文鏈接:https://ypweb.shmedia.tech/h5/yp/share/index.html?id=09fdb768fc64456391eaea01c219ad9c&type=article








