圖像傳感器可以測量光的強度，但要在機器視覺上取得長足的進步，還必須提取光的其他屬性，如角度和光譜。

（a）只能檢測光強度的傳統傳感器和（b）納米結構多模態傳感器的原理圖，該傳感器可以通過亞波長尺度上的光物質相互作用檢測不同質量的光。

在AIPPublishing出版的《應用物理快報》中，威斯康星大學麥迪遜分校、圣路易斯華盛頓大學和OmniVisionTechnologies的研究人員著重介紹集成在圖像傳感器芯片上的最新納米結構組件，這些組件最有可能在多模態中產生最大影響成像。

這些發展可以使自動駕駛汽車能夠看到拐角處，而不僅僅是直線，生物醫學成像可以檢測不同組織深度的異常，望遠鏡可以看穿星際塵埃。

威斯康星大學麥迪遜分校的合著者YuruiQu說：“圖像傳感器將逐漸轉變為機器的理想人工眼睛。”“利用現有成像傳感器的顯著成就的進化可能會產生更直接的影響。”

將光轉換為電信號的圖像傳感器由單個芯片上的數百萬像素組成。挑戰在于如何將多功能組件組合并小型化作為傳感器的一部分。

在他們自己的工作中，研究人員詳細介紹了一種通過制造片上光譜儀來檢測多波段光譜的有前途的方法。他們將由硅制成的光子晶體濾光片直接沉積在像素頂部，以在入射光和傳感器之間產生復雜的相互作用。

薄膜下方的像素記錄了光能的分布，從中可以推斷出光譜信息。該設備尺寸不到百分之一平方英寸，可編程以滿足各種動態范圍、分辨率水平以及從可見光到紅外的幾乎任何光譜狀態。

研究人員構建了一個組件，可檢測角度信息以測量深度并在亞細胞尺度上構建3D形狀。他們的工作受到了在壁虎等動物身上發現的定向聽覺傳感器的啟發，壁虎的頭部太小，無法像人類和其他動物一樣確定聲音的來源。相反，他們使用耦合耳膜來測量聲音的方向，其尺寸比相應的聲波波長小幾個數量級。

類似地，成對的硅納米線被構造為諧振器以支持光學諧振。存儲在兩個諧振器中的光能對入射角很敏感。離燈最近的電線發出最強的電流。通過比較來自兩根導線的最強和最弱電流，可以確定入射光波的角度。

數以百萬計的納米線可以放置在一個1平方毫米的芯片上。該研究可以支持無鏡頭相機、提高真實度和機器人視覺的進步。