基于可調諧突觸光晶體管的多級圖像傳感器內調整技術實現高清晰度輪廓提取

《SCIENCE ADVANCES》:In-sensor multilevel image adjustment for high-clarity contour extraction using adjustable synaptic phototransistors

【字體: 時間:2025年05月03日 來源:SCIENCE ADVANCES 11.7

編輯推薦:

  為解決機器人視覺系統中高能耗、高延遲的數據傳輸問題,研究人員開發了一種基于可調諧突觸光晶體管(adjustable synaptic phototransistors)的傳感器內多級圖像調整方法。該技術通過模擬多巴胺介導的神經元興奮性調節機制,實現了對不同光照條件下圖像亮度/對比度的自適應優化,使輪廓提取的全局準確率達到86.7%,數據壓縮比達91.8%。這項發表在《Science Advances》的研究為能效敏感的移動視覺系統提供了硬件級解決方案。

  

在自動駕駛和無人機等移動系統中,傳統視覺傳感器產生的高達40 Gb/s數據流給邊緣計算帶來巨大壓力。雖然云計算能處理這些數據,但數據傳輸延遲嚴重制約實時決策。當前解決方案面臨兩難困境:直接傳輸原始圖像耗能巨大,而軟件壓縮又增加處理負擔。更棘手的是,多變光照條件(如強光/陰天)會導致圖像質量波動,使常規輪廓提取方法難以穩定工作。

為解決這些挑戰,某研究團隊受生物神經系統中多巴胺(dopamine)調控突觸可塑性的啟發,開發出基于二硫化鉬(MoS2)的可調諧突觸光晶體管。該器件通過模擬D1/D2樣多巴胺受體的興奮/抑制機制,實現了類似生物神經元的動態響應特性。研究人員采用化學氣相沉積法制備單層MoS2通道,與石墨烯電極和pV3D3介電層構成三明治結構。通過精確調控靜電門電壓(Vel),器件可分別在抑制模式(Vel=-5V)和興奮模式(Vel=2V)下工作,模擬了生物突觸的神經調節功能。研究使用劍橋駕駛視頻數據庫(CamVid)進行驗證,并采用DeepLab v3+模型評估語義分割效果。

【In-sensor multilevel image adjustment for high-clarity contour extraction】
研究發現,器件的雙模式運作機制源于光門效應(photogating)與靜電門效應的協同作用。在抑制模式下,器件選擇性增強亮區對比度(圖像對比度從102提升至168.5);興奮模式則強化暗區細節(對比度從51升至137.1)。這種非線性光電轉換特性(線性系數α=0.5-1.8)使單次曝光即可獲得兩種優化圖像。

【Characterization of adjustable synaptic phototransistors】
透射電鏡分析顯示MoS2-pV3D3異質結具有清晰的界面結構。開爾文探針力顯微鏡證實Vel可調制MoS2費米能級。時間分辨光電流測量表明,器件在250ms曝光下可實現激活閾值(Ith=0.10nA)的精確調控,且具有優異的循環穩定性。

【Evaluation of in-sensor multilevel image adjustment】
3×3陣列測試顯示,在模擬晴/陰天光照條件下,器件能自適應調整響應特性。與原始圖像相比,傳感器內處理使道路標志的輪廓提取清晰度顯著提升,且無需額外的軟件增強步驟。

【Evaluation on high-clarity contour extraction】
語義分割測試表明,經自適應閾值處理的雙模式輪廓合并圖像,使全局準確率達86.7%(原始圖像83.2%),加權交并比(IoU)達0.79。盡管數據體積壓縮91.8%,其識別精度仍接近高分辨率原圖。

這項研究開創性地將神經調節機制引入光電傳感器設計,解決了移動視覺系統的能效與精度矛盾。通過硬件級圖像優化,不僅減少90%以上的數據傳輸量,還提升了復雜光照下的識別魯棒性。雖然器件均勻性和陣列集成仍需突破,但該技術為新一代仿生視覺傳感器指明了方向,在自動駕駛、移動機器人等領域具有重要應用前景。論文提出的"傳感器內計算"范式,可能重塑未來邊緣智能設備的架構設計。

相關新聞
生物通微信公眾號
微信
新浪微博
  • 急聘職位
  • 高薪職位

知名企業招聘

熱點排行

    今日動態 | 人才市場 | 新技術專欄 | 中國科學人 | 云展臺 | BioHot | 云講堂直播 | 會展中心 | 特價專欄 | 技術快訊 | 免費試用

    版權所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    聯系信箱:

    粵ICP備09063491號

    亚洲欧美自拍偷拍,亚洲人成77777,亚洲男女自偷自拍,亚洲成年在线