將eFPGA應用於嵌入式360度視域視覺係統中
發布時間:2018-04-26 來源:Alok Sanghavi 責任編輯:wenwei
【導讀】嵌入式FPGA(eFPGA)將在這類芯片中扮演重要角色。如為了滿足第六條中提到的車輛外部360度視頻監控數據的獲取和處理,采用eFPGA來設計相關功能芯片具有很明顯的優勢。
2018年4月11日,工業和信息化部、公安部和交通運輸部聯合發布“關於印發《智能網聯汽車道路測試管理規範(試行)》的通知”,為我國智能網聯汽車道路測試提供了相關法律依據。三部委在賦予智能網聯汽車上路資格的同時,也提出了若幹嚴格的條件。
其中,在第二章“測試主體、測試駕駛人及測試車輛”的第七條第(四)點中,三部委要求:具備車輛狀態記錄、存儲及在線監控功能,能實時回傳下列第1、2、3項信息,並自動記錄和存儲下列各項信息在車輛事故或失效狀況發生前至少90秒的數據,數據存儲時間不少於3年:
1.車輛控製模式;
2.車輛位置;
3.車輛速度、加速度等運動狀態;
4.環境感知與響應狀態;
5.車輛燈光、信號實時狀態;
6.車輛外部360度視頻監控情況;
7.反映測試駕駛人和人機交互狀態的車內視頻及語音監控情況;
8.車輛接收的遠程控製指令(如有);
9.車輛故障情況(如有)。
由此可以看出,上述條件除了對進行道路測試的智能網聯汽車有若幹功能性要求外,還在相關領域將推動若幹新一代通信、監控、控製和存儲等技術的發展,為智能網聯汽車專用SoC的開發提供新的市場機會。
嵌入式FPGA(eFPGA)將在這類芯片中扮演重要角色。如為了滿足第六條中提到的車輛外部360度視頻監控數據的獲取和處理,采用eFPGA來設計相關功能芯片具有很明顯的優勢。作為同時提供獨立FPGA芯片和eFPGA IP產品的公司,Achronix可以幫助智能汽車SoC設計人員先在FPGA芯片上開發和調試相關功能,而在市場進入批量化應用後無需顯著修改設計,立即將設計移植到搭載了eFPGA的SoC之上。
有關eFPGA如何支持嵌入式360度視域視覺係統設計,請閱讀Achronix Semiconductor資深產品營銷經理Alok Sanghavi的文章,標題為“將eFPGA應用於嵌入式360度視域視覺係統中”。

帶有多個高分辨率攝像頭的嵌入式360°視域視覺係統已經進入了各種應用中,如汽車傳感器融合、視頻監控、目標檢測、運動分析等。在此類係統中,多個實時攝像機的視頻流(最多6個) 被彙聚在一起逐幀處理,進行失真和其他圖像偽影校正,調整曝光和白平衡,然後動態拚接成一個360°全景視圖,以4K清晰度和60 fps幀頻輸出,最終投影到一個球形坐標空間上。
目前用於此類應用的高分辨率魚眼相機鏡頭通常具有一個廣角視域(FOV)。環視相機係統最大的瓶頸之一是: 實時到或從外部存儲器存儲/duquhefangwenduolushexiangjishurushuju,ranhoujiangqizuoweiyigedanyizhenjinxingchuli。yingjianxuyaozaiyizhenyanchinei,zaishurushexiangjichuanrudeyuanshichuanganqishujuhepinjieshuchushipinzhijianwanchengchuliyunxing。
高性能計算平台一直朝著與CPU一起協同使用FPGA的方向發展,以便為實時圖像處理任務提供專門的硬件加速。 這種配置使得CPU能專注於特別複雜的算法,其中它們可以快速切換線程和上下文,並將重複性任務分配給一個FPGA,以充當可配置的硬件加速器/協處理器/卸載引擎。 即使將FPGA和CPU作為分立器件使用,係統也可以提高整體效率,因為這些技術不會發生衝突,而是像將手套戴在手上一樣來配合在一起。
例(li)如(ru),從(cong)魚(yu)眼(yan)鏡(jing)頭(tou)獲(huo)得(de)的(de)圖(tu)像(xiang)遭(zao)受(shou)嚴(yan)重(zhong)失(shi)真(zhen)之(zhi)苦(ku),因(yin)而(er)基(ji)於(yu)多(duo)個(ge)相(xiang)機(ji)視(shi)頻(pin)生(sheng)成(cheng)的(de)拚(pin)接(jie)操(cao)作(zuo)是(shi)高(gao)度(du)計(ji)算(suan)密(mi)集(ji)型(xing)的(de)任(ren)務(wu),其(qi)原(yuan)因(yin)為(wei)它(ta)是(shi)點(dian)像(xiang)素(su)操(cao)作(zuo)。這(zhe)種(zhong)拚(pin)接(jie)需(xu)要(yao)大(da)量(liang)的(de)實(shi)時(shi)圖(tu)像(xiang)處(chu)理(li)和(he)高(gao)度(du)並(bing)行(xing)化(hua)的(de)架(jia)構(gou)。但(dan)是(shi),這(zhe)種(zhong)下(xia)一(yi)代(dai)的(de)應(ying)用(yong)超(chao)過(guo)了(le)FPGA可不斷接續實現的性能,主要是由於芯片吞吐數據的延遲。這反過來會影響整個係統的整體延遲、吞吐速度和性能。
在一個SoC中加入可與CPU一起嵌入的eFPGA半導體知識產權(IP)。與一個獨立的FPGA芯片加CPU解決方案相比,嵌入式FPGA陣列結構具有獨特的優勢,主要優勢在於性能更強。一個eFPGA可通過一個寬的並行接口直接連接到ASIC(無I / O緩衝器)上shang,提ti供gong顯xian著zhu提ti高gao的de吞tun吐tu量liang,以yi及ji以yi個ge位wei數shu時shi鍾zhong周zhou期qi來lai計ji數shu的de延yan遲chi。低di延yan遲chi是shi複fu雜za的de圖tu像xiang實shi時shi處chu理li過guo程cheng的de關guan鍵jian,例li如ru糾jiu正zheng魚yu眼yan鏡jing頭tou的de失shi真zhen這zhe樣yang的de處chu理li。
利用Speedcore eFPGA IP,客戶可以定義其邏輯、內存和DSP資源需求,然後Achronix可配置其IP以滿足他們的需求。查找表(LUTs)、RAM單元塊和DSP64單元塊可以像積木一樣進行組合,為任何給定的應用創建最佳的可編程結構。 除了標準邏輯、嵌入式存儲器和DSP單元模塊之外,客戶還可以在Speedcore eFPGA結(jie)構(gou)裏(li)麵(mian)定(ding)義(yi)他(ta)們(men)自(zi)己(ji)的(de)功(gong)能(neng)塊(kuai)。通(tong)過(guo)把(ba)這(zhe)些(xie)定(ding)製(zhi)功(gong)能(neng)模(mo)塊(kuai)與(yu)傳(chuan)統(tong)構(gou)建(jian)模(mo)塊(kuai)一(yi)起(qi)集(ji)成(cheng)到(dao)邏(luo)輯(ji)陣(zhen)列(lie)結(jie)構(gou)中(zhong),可(ke)添(tian)加(jia)優(you)化(hua)過(guo)的(de)功(gong)能(neng)來(lai)減(jian)少(shao)麵(mian)積(ji)和(he)提(ti)高(gao)目(mu)標(biao)應(ying)用(yong)的(de)性(xing)能(neng),可(ke)使(shi)eFPGA的性能得到極大的提高,特別是對嵌入式視覺和圖像處理算法非常有效。
用自定義單元塊來成功地解決高性能圖像處理就是一個很好的例子,在實現您隻看一次(YOLO)這一種使用了神經網絡的、最先進的、實時對象檢測算法時,可以優於早期的方法大大提高性能。該算法依賴於大量的矩陣乘法器,而在FPGA中實現時,這些矩陣乘法器需要使用DSP和RAM模塊來構建;YOLO所需要的DSP和RAM模塊之間的最佳配置,與一個典型的FPGA陣列結構中發現的不匹配之處就會出現問題。例如,FPGA陣列結構可能提供18×27乘法/累加單元塊和32×128 RAM的DSP單元塊,而此時的最佳解決方案可能是帶有48×1024 RAM的16×8 DSP單元塊。通過創建實現最佳DSP和RAM模塊配置的定製單元塊,所得到的Speedcore陣列結構所使用的芯片麵積就會減少40%,來實現相同的功能並且能獲得更高級別的係統性能。
在SoC中嵌入FPGA陣列結構提供了兩個額外的係統級好處:
更低的功耗 - 可編程I / O電路占獨立FPGA芯片總功耗的一半,而一個eFPGA可以與主控SoC中的其他模塊直接內部線路連接,完全不需要大型可編程I / O緩衝器。
更低的係統成本 - 由於eFPGA隻需實現特定功能,eFPGA的裸片尺寸遠小於等效的獨立FPGA芯片,這是因為eFPGA不再需要可編程的I / O緩衝器和不必要的接口邏輯。
借助超低延遲和實時處理功能,可以有效實現基於360°視域的視覺係統,具有定製單元塊的Speedcore eFPGA與同一主控SoC中的一個CPU配合使用,非常適合去實現專用功能,如目標檢測和圖像識別、變形和失真校正、以及最後將最終圖像拚接在一起。在SoC中嵌入FPGA陣列結構是超深亞微米時代係統集成的一個自然發展過程。
推薦閱讀:
特別推薦
- 噪聲中提取真值!瑞盟科技推出MSA2240電流檢測芯片賦能多元高端測量場景
- 10MHz高頻運行!氮矽科技發布集成驅動GaN芯片,助力電源能效再攀新高
- 失真度僅0.002%!力芯微推出超低內阻、超低失真4PST模擬開關
- 一“芯”雙電!聖邦微電子發布雙輸出電源芯片,簡化AFE與音頻設計
- 一機適配萬端:金升陽推出1200W可編程電源,賦能高端裝備製造
技術文章更多>>
- 從機械執行到智能互動:移遠Q-Robotbox助力具身智能加速落地
- 品英Pickering將亮相2026航空電子國際論壇,展示航電與電池測試前沿方案
- 模擬芯片設計師的噩夢:晶體管差1毫伏就廢了,溫度升1度特性全飄
- 3A大電流僅需3x1.6mm?意法半導體DCP3603重新定義電源設計
- 芯科科技Tech Talks與藍牙亞洲大會聯動,線上線下賦能物聯網創新
技術白皮書下載更多>>
- 車規與基於V2X的車輛協同主動避撞技術展望
- 數字隔離助力新能源汽車安全隔離的新挑戰
- 汽車模塊拋負載的解決方案
- 車用連接器的安全創新應用
- Melexis Actuators Business Unit
- Position / Current Sensors - Triaxis Hall
熱門搜索




