將eFPGA應用於嵌入式360度視域視覺係統中
發布時間:2018-04-26 來源:Alok Sanghavi 責任編輯:wenwei
【導讀】嵌入式FPGA(eFPGA)將在這類芯片中扮演重要角色。如為了滿足第六條中提到的車輛外部360度視頻監控數據的獲取和處理,采用eFPGA來設計相關功能芯片具有很明顯的優勢。
2018年4月11日,工業和信息化部、公安部和交通運輸部聯合發布“關於印發《智能網聯汽車道路測試管理規範(試行)》的通知”,為我國智能網聯汽車道路測試提供了相關法律依據。三部委在賦予智能網聯汽車上路資格的同時,也提出了若幹嚴格的條件。
其中,在第二章“測試主體、測試駕駛人及測試車輛”的第七條第(四)點中,三部委要求:具備車輛狀態記錄、存儲及在線監控功能,能實時回傳下列第1、2、3項信息,並自動記錄和存儲下列各項信息在車輛事故或失效狀況發生前至少90秒的數據,數據存儲時間不少於3年:
1.車輛控製模式;
2.車輛位置;
3.車輛速度、加速度等運動狀態;
4.環境感知與響應狀態;
5.車輛燈光、信號實時狀態;
6.車輛外部360度視頻監控情況;
7.反映測試駕駛人和人機交互狀態的車內視頻及語音監控情況;
8.車輛接收的遠程控製指令(如有);
9.車輛故障情況(如有)。
由此可以看出,上述條件除了對進行道路測試的智能網聯汽車有若幹功能性要求外,還在相關領域將推動若幹新一代通信、監控、控製和存儲等技術的發展,為智能網聯汽車專用SoC的開發提供新的市場機會。
嵌入式FPGA(eFPGA)將在這類芯片中扮演重要角色。如為了滿足第六條中提到的車輛外部360度視頻監控數據的獲取和處理,采用eFPGA來設計相關功能芯片具有很明顯的優勢。作為同時提供獨立FPGA芯片和eFPGA IP產品的公司,Achronix可以幫助智能汽車SoC設計人員先在FPGA芯片上開發和調試相關功能,而在市場進入批量化應用後無需顯著修改設計,立即將設計移植到搭載了eFPGA的SoC之上。
有關eFPGA如何支持嵌入式360度視域視覺係統設計,請閱讀Achronix Semiconductor資深產品營銷經理Alok Sanghavi的文章,標題為“將eFPGA應用於嵌入式360度視域視覺係統中”。

帶有多個高分辨率攝像頭的嵌入式360°視域視覺係統已經進入了各種應用中,如汽車傳感器融合、視頻監控、目標檢測、運動分析等。在此類係統中,多個實時攝像機的視頻流(最多6個) 被彙聚在一起逐幀處理,進行失真和其他圖像偽影校正,調整曝光和白平衡,然後動態拚接成一個360°全景視圖,以4K清晰度和60 fps幀頻輸出,最終投影到一個球形坐標空間上。
目前用於此類應用的高分辨率魚眼相機鏡頭通常具有一個廣角視域(FOV)。環視相機係統最大的瓶頸之一是: 實時到或從外部存儲器存儲/讀du取qu和he訪fang問wen多duo路lu攝she像xiang機ji輸shu入ru數shu據ju,然ran後hou將jiang其qi作zuo為wei一yi個ge單dan一yi幀zhen進jin行xing處chu理li。硬ying件jian需xu要yao在zai一yi幀zhen延yan遲chi內nei,在zai輸shu入ru攝she像xiang機ji傳chuan入ru的de原yuan始shi傳chuan感gan器qi數shu據ju和he拚pin接jie輸shu出chu視shi頻pin之zhi間jian完wan成cheng處chu理li運yun行xing。
高性能計算平台一直朝著與CPU一起協同使用FPGA的方向發展,以便為實時圖像處理任務提供專門的硬件加速。 這種配置使得CPU能專注於特別複雜的算法,其中它們可以快速切換線程和上下文,並將重複性任務分配給一個FPGA,以充當可配置的硬件加速器/協處理器/卸載引擎。 即使將FPGA和CPU作為分立器件使用,係統也可以提高整體效率,因為這些技術不會發生衝突,而是像將手套戴在手上一樣來配合在一起。
例li如ru,從cong魚yu眼yan鏡jing頭tou獲huo得de的de圖tu像xiang遭zao受shou嚴yan重zhong失shi真zhen之zhi苦ku,因yin而er基ji於yu多duo個ge相xiang機ji視shi頻pin生sheng成cheng的de拚pin接jie操cao作zuo是shi高gao度du計ji算suan密mi集ji型xing的de任ren務wu,其qi原yuan因yin為wei它ta是shi點dian像xiang素su操cao作zuo。這zhe種zhong拚pin接jie需xu要yao大da量liang的de實shi時shi圖tu像xiang處chu理li和he高gao度du並bing行xing化hua的de架jia構gou。但dan是shi,這zhe種zhong下xia一yi代dai的de應ying用yong超chao過guo了leFPGA可不斷接續實現的性能,主要是由於芯片吞吐數據的延遲。這反過來會影響整個係統的整體延遲、吞吐速度和性能。
在一個SoC中加入可與CPU一起嵌入的eFPGA半導體知識產權(IP)。與一個獨立的FPGA芯片加CPU解決方案相比,嵌入式FPGA陣列結構具有獨特的優勢,主要優勢在於性能更強。一個eFPGA可通過一個寬的並行接口直接連接到ASIC(無I / O緩衝器)shang,tigongxianzhutigaodetuntuliang,yijiyigeweishushizhongzhouqilaijishudeyanchi。diyanchishifuzadetuxiangshishichuliguochengdeguanjian,lirujiuzhengyuyanjingtoudeshizhenzheyangdechuli。
利用Speedcore eFPGA IP,客戶可以定義其邏輯、內存和DSP資源需求,然後Achronix可配置其IP以滿足他們的需求。查找表(LUTs)、RAM單元塊和DSP64單元塊可以像積木一樣進行組合,為任何給定的應用創建最佳的可編程結構。 除了標準邏輯、嵌入式存儲器和DSP單元模塊之外,客戶還可以在Speedcore eFPGAjiegoulimiandingyitamenzijidegongnengkuai。tongguobazhexiedingzhigongnengmokuaiyuchuantonggoujianmokuaiyiqijichengdaoluojizhenliejiegouzhong,ketianjiayouhuaguodegongnenglaijianshaomianjihetigaomubiaoyingyongdexingneng,keshieFPGA的性能得到極大的提高,特別是對嵌入式視覺和圖像處理算法非常有效。
用自定義單元塊來成功地解決高性能圖像處理就是一個很好的例子,在實現您隻看一次(YOLO)這一種使用了神經網絡的、最先進的、實時對象檢測算法時,可以優於早期的方法大大提高性能。該算法依賴於大量的矩陣乘法器,而在FPGA中實現時,這些矩陣乘法器需要使用DSP和RAM模塊來構建;YOLO所需要的DSP和RAM模塊之間的最佳配置,與一個典型的FPGA陣列結構中發現的不匹配之處就會出現問題。例如,FPGA陣列結構可能提供18×27乘法/累加單元塊和32×128 RAM的DSP單元塊,而此時的最佳解決方案可能是帶有48×1024 RAM的16×8 DSP單元塊。通過創建實現最佳DSP和RAM模塊配置的定製單元塊,所得到的Speedcore陣列結構所使用的芯片麵積就會減少40%,來實現相同的功能並且能獲得更高級別的係統性能。
在SoC中嵌入FPGA陣列結構提供了兩個額外的係統級好處:
更低的功耗 - 可編程I / O電路占獨立FPGA芯片總功耗的一半,而一個eFPGA可以與主控SoC中的其他模塊直接內部線路連接,完全不需要大型可編程I / O緩衝器。
更低的係統成本 - 由於eFPGA隻需實現特定功能,eFPGA的裸片尺寸遠小於等效的獨立FPGA芯片,這是因為eFPGA不再需要可編程的I / O緩衝器和不必要的接口邏輯。
借助超低延遲和實時處理功能,可以有效實現基於360°視域的視覺係統,具有定製單元塊的Speedcore eFPGA與同一主控SoC中的一個CPU配合使用,非常適合去實現專用功能,如目標檢測和圖像識別、變形和失真校正、以及最後將最終圖像拚接在一起。在SoC中嵌入FPGA陣列結構是超深亞微米時代係統集成的一個自然發展過程。
推薦閱讀:
特別推薦
- 噪聲中提取真值!瑞盟科技推出MSA2240電流檢測芯片賦能多元高端測量場景
- 10MHz高頻運行!氮矽科技發布集成驅動GaN芯片,助力電源能效再攀新高
- 失真度僅0.002%!力芯微推出超低內阻、超低失真4PST模擬開關
- 一“芯”雙電!聖邦微電子發布雙輸出電源芯片,簡化AFE與音頻設計
- 一機適配萬端:金升陽推出1200W可編程電源,賦能高端裝備製造
技術文章更多>>
- 從機械執行到智能互動:移遠Q-Robotbox助力具身智能加速落地
- 品英Pickering將亮相2026航空電子國際論壇,展示航電與電池測試前沿方案
- 模擬芯片設計師的噩夢:晶體管差1毫伏就廢了,溫度升1度特性全飄
- 3A大電流僅需3x1.6mm?意法半導體DCP3603重新定義電源設計
- 芯科科技Tech Talks與藍牙亞洲大會聯動,線上線下賦能物聯網創新
技術白皮書下載更多>>
- 車規與基於V2X的車輛協同主動避撞技術展望
- 數字隔離助力新能源汽車安全隔離的新挑戰
- 汽車模塊拋負載的解決方案
- 車用連接器的安全創新應用
- Melexis Actuators Business Unit
- Position / Current Sensors - Triaxis Hall
熱門搜索
按鈕開關
白色家電
保護器件
保險絲管
北鬥定位
北高智
貝能科技
背板連接器
背光器件
編碼器型號
便攜產品
便攜醫療
變容二極管
變壓器
檳城電子
並網
撥動開關
玻璃釉電容
剝線機
薄膜電容
薄膜電阻
薄膜開關
捕魚器
步進電機
測力傳感器
測試測量
測試設備
拆解
場效應管
超霸科技



