DARPA開始采用基于事件的智能紅外相機技術
美國國防高級研究計劃局(DARPA)近日宣布選擇由雷神(Raytheon)公司、BAE系統公司和諾斯羅普格魯曼(Northrop
Grumman)公司領導的三個研究小組,開發基于事件的(神經形態)紅外(IR)相機技術。

該項目隸屬DARPA“基于快速事件的神經形態相機和電子(Fast Event-based Neuromorphic Camera and Electronics, FENCE)”計劃。基于事件的相機是一種新興傳感技術,相對于傳統相機具有很多明顯優勢。這些先進的成像模組異步工作,只傳輸發生變化的像素信息。這意味著它們生成的數據量明顯減少,工作延遲和功耗也大幅降低。
領導FENCE項目的Whitney Mason博士解釋稱:“神經形態指的是模擬大腦運作的硅基集成電路,它們可以提供低延遲、高能效的稀疏輸出。在處理稀疏場景時,基于事件的相機也以一樣的原理運行,但是,目前基于事件的相機缺乏更高級的‘智能’,無法應對更困難更復雜的感知和控制任務。”
目前,最先進的相機可以很好的應對極少變化、成像相對簡單的場景。例如,一架飛機在湛藍的天空中飛行。最先進的相機可以很容易地跟蹤飛機的運動。然而,對于高度雜亂和動態的場景,它們就束手無策了,這限制了它們在許多軍事領域的應用。
FENCE項目旨在開發并驗證一種低延遲、低功耗、基于事件的紅外焦平面陣列(FPA)以及新的數字信號處理和學習算法來解決上述難題,以使這類智能傳感器能夠處理更復雜的動態場景。雷神公司、BAE系統公司和諾斯羅普格魯曼公司的團隊將致力于開發一種低延遲的異步讀出集成電路(ROIC),以及一種與ROIC集成以識別相關空間和時間信號的處理層。ROIC和處理層的結合,將使集成的FENCE傳感器以低于1.5瓦的功率工作。
Mason指出:“我們的目標是開發一種‘智能’傳感器,以智能化地降低由相機傳輸的數據量,只考量最相關的像素信息。”
FANCE技術最終可以應用于從自動駕駛、機器人到紅外搜索和跟蹤等許多軍事應用。為了確保廣泛的適用性,研究人員還將重點開發一款靈活且適應性強的解決方案,以便應對各種不同的任務。



