索尼(Sony)在ISSCC發表的事件導向低功耗CMOS圖像傳感器，就是一個為所擷取圖像添加情境信息的好例子，該公司的設計工程師團隊直接在圖像傳感器內部布置了運動偵測(motion detection)功能。

 

在一篇論文中，Sony詳細介紹了一款1/4吋、390萬像素(3.9Megapixel)的低功耗事件導向背照式堆棧(back-illuminated stacked) CMOS圖像傳感器，整合了像素讀取電路(pixel readout circuit)
，能偵測每一個像素的運動物體。根據Sony開發團隊的描述，開發這款事件導向圖像傳感器的幕後動機，是為了滿足那些低功耗
、永不關機設備也要配備高畫質成像技術的需求。

 

隨著諸如家用保全攝影機、虛擬個人助理等無線連網設備崛起
，物聯網(IoT)係統設計工程師也在尋找能延長電池壽命的小型解決方案，事件導向技術正適合保全係統應用
；這類圖像傳感器內建了智能功能
，能實時偵測運動物體。

 

Sony的事件導向傳感器具備像素數組、列驅動器(row drivers)、列譯碼器(row decoders)、單斜率產生器(single-slope generation)、動作/光偵測功能區塊、圖像信號處理器、訊框內存SRAM、MIPI鏈接端口，以及連結至傳感器控製區塊的CPU （來源：Sony）

 

如上圖所示，當Sony事件導向傳感器偵測到運動物體時
，CPU會產生一個外部中斷訊號

，利用芯片上的自動曝光
，以零延遲觸發對高畫質圖像的擷取。Sony表示，該圖像傳感器利用每個像素區塊共享之浮動擴散(floating diffusion)中的像素加總(pixel summation)，實現了每秒10訊框的運動物體偵測。

 

Sony位於美國矽穀的圖像傳感器設計中心資深嵌入式軟件工程師Abhinav Mathur表示，該圖像傳感器的運作功耗僅1.1mW，而相同的全分辨率、每秒60訊框速率CMOS圖像傳感器功耗為95mW；在事件紀錄的應用中
，此傳感器能在攝影機係統的低功耗感測模式下顯著降低功耗與數據帶寬。

 

Sony事件導向傳感器功能區塊 （來源：Sony）

 

 

3D深度攝影機正夯，相關技術的競爭焦點在於更高分辨率
、更低功耗以及更小體積；微軟(Microsoft)在ISSCC簡報了應用於Kinect 2動作感測設備的ToF傳感器進展，該傳感器采用的是經過改善的連續波(Continuous-Wave

，CW)式ToF技術，號稱將最新的ToF傳感器推向了百萬像素等級。

 

Microsoft的最新ToF傳感器 （來源：Microsoft）

 

Microsoft的團隊認為，在市麵上各種3D圖像擷取技術中，CW ToF成像係統能提供優異的機械強度、無要求底線
，以及高效能深度圖像分辨率、低運算成本
，還有IR環境光強度不變 (IR ambient light invariant intensity)同步擷取──即主動亮度(active brightness)──等特性
，因此該團隊致力於改善CW ToF攝影機的空間分辨率、精確度以及運作範圍
，同時降低其功耗。

 

此外Microsoft也藉由提升調變對比(modulation contrast)
、量子效率以及調變頻率來改善CW ToF圖像傳感器的不確定性與功耗
，消除了讀取噪聲與模擬數字轉換
，同時以較小像素降低了光學堆棧的高度。

 

Microsoft的ToF傳感器規格 （來源：Microsoft）

 

小型像素(3.5 x 3.5μm)對新一代ToF傳感器在智能手機應用的競爭上非常重要
，Microsoft號稱其方案具備商用全局快門RGB傳感器競爭力，以及適用手持式設備的小型光學堆棧；該公司在ISSCC論文中介紹的1024x1024像素ToF全局快門圖像傳感器，能在200MHz下達到87%的調變對比
，采用台積電(TSMC)的65奈米1P8M背照式CMOS技術。

 

 

鬆下(Panasonic)在ISSCC展示其有機光導薄膜(organic photoconductive film，OPF) CMOS圖像傳感器技術最新進展──將OPF CMOS圖像傳感器中的光電轉換功能與電路分離；jiyouzhezhongdutejiagou，gaigongsituanduijiangxinkaifadegaosuzaoshengxiaochujishuyijigaobaohedujishuzhenghezhidianlu
，tongshiliyongchuanganqidedutemingandukongzhigongnenglaigaibianshijiadaoOPF的電壓，因此實現全局快門功能。

 

OPF CMOS圖像傳感器與傳統全局快門傳感器的架構比較；Panasonic聲稱其最新傳感器是業界首款提供8K分辨率
、60fps訊框速率、450k電子飽和度，並具備全局快門功能 （來源：Panasonic）

 

在過去，廣播電視與保全應用的高分辨率、高保真度攝影機
，如8K超高分辨率電視係統與采用堆棧傳感器方案的8K攝影機的共同缺陷，是采用滾動快門(rolling-shutter)而非全局快門。在全局模式下，快門運作能同步擷取所有像素的圖像
；而滾動快門模式的有機CMOS圖像傳感器
，則是以逐行(row by row)方式曝光與運作。

 

Panasonic表示
，滾動快門會導致失真問題，特別是在高速成像以及多視角圖像合成應用時 （來源：Panasonic）

 

Panasonic新開發的傳感器號稱能實時擷取不失真的運動物體圖像，該公司認為這對多視角與高速、高分辨率攝影機特別有益，例如機器視覺與智能交通監控係統的應用；而因為光電轉換與電路能分開設計
，利用像素內增益開關(in-pixel gain-switching)技術能達到高飽和度特性
，電壓控製敏感度調變技術則是藉由改變施加至OPF的電壓來調整敏感度。

 

Panasonic新開發的CMOS圖像傳感器能擷取8K分辨率圖像，甚至在高對比度度的場景中，同時具備全局快門功能
，可用全像素擷取同步圖像 （來源：EE Times）

 

 

東芝(Toshiba)的工程師團隊在ISSCC發表的是長距離、高分辨率光達(LiDAR)係統最新技術
，利用來自目標物反射光子(reflected photon)的ToF信息
；而因為其目標是距離量測(distance measurement，DM)，該團隊將支持距離定在200公尺，也就是一輛行駛於高速公路上的汽車，感測正在接近的其他車輛或物體的最理想距離。

 

而Toshiba的團隊也指出，若要在城市區域實現安全可靠的自動駕駛車輛，光達係統必須要有寬廣視角與高分辨率，才能完整感知周遭情況；要實現此目標的一個棘手挑戰是，光達係統得時常與強烈的背景光線(例如陽光)對抗
，那也是光達係統最主要的噪聲來源。

 

 

車用光達係統的偵測距離要求以及Toshiba的解決方案規格 （來源：Toshiba）

 

Toshiba介紹了一種結合時間至數字值轉換器(Time-to-Digital Converter
，TDC)與模擬數字轉換器(ADC)的光達SoC
，配備了一種命名為智能累加技術(Smart Accumulation Technique
，SAT)的功能
，號稱能讓光達係統達到200公尺的視距以及自動駕駛車輛需要的高分辨率圖像。

 

根據Toshiba的說法，SAT能利用來自ADC的強度與背景光信息
，識別並累計僅從目標物反射的數據，因此與傳統的累加技術相較
，其分辨率能達到四倍。該TDC/ADC組合架構放寬了ADC采樣率需求，以支持短距離DM精確度；此外該概念驗證支持200公尺距離的光達係統

，DM距離是傳統設計的兩倍，可實現240x96像素分辨率與0.125%的DM精確度。

 

Toshiba光達方案與傳統設計的性能比較 （來源：Toshiba）

 

 

不隻Panasonic，Sony也注意到滾動快門圖像傳感器擷取運動物體圖像失真的問題，指出像素內模擬內存(in-pixel analog memory)與像素平行(pixel-parallel) ADC雖是潛在解決方案
，但這些技術都無法支持百萬像素分辨率，因為它們都沒有解決在一個像素中讀寫ADC數字訊號的時序限製(timing constraint)問題。

 

 

Sony在ISSCC論文中提出的方案，是利用具備每像素單一ADC的堆棧圖像傳感器，在CMOS傳感器實現全局快門 （來源：Sony）

 

Sony的堆棧式背照CMOS圖像傳感器，配備146萬像素14位ADC，采用像素級接合技術(pixel-level bonding technology)。該公司表示，具備正向回饋電路的次臨界值比較器(subthreshold comparator)有助於降低比較器運作電流與電路區域最小化，能降低功耗。

 

本文轉載自EDN電子技術設計。

 

 

 

 

 

 

 

 

推薦閱讀：