邊緣AI越來越多地應(yīng)用于諸如工業(yè)攝像頭和公共設(shè)施攝像頭等嵌入式設(shè)備中,并要求嵌入式產(chǎn)品小型化且具有低功耗。瑞薩電子RZ/V系列微處理器(MPU)內(nèi)置AI加速器,即動(dòng)態(tài)可重構(gòu)處理器(DRP)。該處理器以高能效而聞名,可滿足人工智能市場(chǎng)的需求。這種DRP技術(shù)不斷演進(jìn)到DRP-AI3,可提供比以往更高的AI推理性能。
利用高性能MPU延長(zhǎng)電池續(xù)航并打造緊湊型產(chǎn)品
新款RZ/V2N MPU與高端RZ/V2H MPU(高達(dá) 80TOPS)類似,配備高能效AI加速器DRP-AI3,通過剪枝技術(shù)可實(shí)現(xiàn)10TOPS/W的AI性能,提高AI計(jì)算效率。
下圖1比較了傳統(tǒng)RZ/V系列與RZ/V2N的人工智能推理性能。以具有代表性的分類CNN Resnet50為例,RZ/V2N在不進(jìn)行剪枝處理(密集模型)的情況下,性能是RZ/V2M的7倍,在進(jìn)行剪枝處理(剪枝率為 90%)的情況下,性能是RZ/V2M的23倍。這種極高能效的性能可延長(zhǎng)電池壽命,而且無需冷卻風(fēng)扇,因此可實(shí)現(xiàn)設(shè)備小型化。
圖1:比較RZ/V系列人工智能推理性能
雙攝像頭輸入可提高基于AI的圖像識(shí)別精度
RZ/V2N通過雙通道MIPI-CSI接口支持連接兩臺(tái)攝像頭(圖2)。與傳統(tǒng)的單攝像頭AI圖像識(shí)別相比,這不但可以改善空間識(shí)別性能,還能實(shí)現(xiàn)高精度應(yīng)用,如流動(dòng)分析和跌落檢測(cè)。例如,利用雙光束雙角度成像技術(shù),可通過單個(gè)芯片監(jiān)控停放的汽車數(shù)量并識(shí)別車牌。在駕駛員監(jiān)控系統(tǒng)(DMS)中,RZ/V2N可使用前向攝像頭和車內(nèi)攝像頭對(duì)車輛內(nèi)部和外部進(jìn)行監(jiān)控和記錄。此外,還可通過配置兩臺(tái)攝像頭的立體攝像機(jī)來估算到被成像物體的距離,從而提高AI攝像頭和移動(dòng)機(jī)器人基于人工智能的圖像識(shí)別精度。
圖2:通過雙通道MIPI-CSI接口連接雙攝像頭
與RZ/V2H架構(gòu)高度兼容,可重用設(shè)計(jì)資源
RZ/V2N與RZ/V2H類似,配備四核Arm??Cortex?-A55、單核Arm Cortex-M33和ISP(圖像信號(hào)處理器),可重用RZ/V2H的軟件開發(fā)資源。此外,由于外設(shè)功能的高度兼容性,用戶可根據(jù)其AI性能、系統(tǒng)配置和實(shí)時(shí)控制的必要性,從多種RZ/V系列MPU中選擇最合適產(chǎn)品。
為了讓不具備深厚AI專業(yè)知識(shí)的用戶也能快速評(píng)測(cè)和開發(fā)AI應(yīng)用,瑞薩電子發(fā)布了RZ/V2N AI軟件開發(fā)套件。該套件包括瑞薩電子評(píng)估板套件和軟件開發(fā)環(huán)境,以及用于不同使用案例的50多種不同的AI應(yīng)用。利用這一開發(fā)環(huán)境可縮短產(chǎn)品上市時(shí)間。此外,具備AI知識(shí)的用戶可選擇AI編譯器來開發(fā)自己的AI模型,并將其集成到RZ/V2N MPU中(圖3)。
圖3:兩個(gè)人工智能開發(fā)環(huán)境入口
此外,瑞薩電子生態(tài)系統(tǒng)合作伙伴還將陸續(xù)提供采用RZ/V2N的SOM(系統(tǒng)級(jí)模塊)板、SBC(單板計(jì)算機(jī))和攝像頭模塊等產(chǎn)品。這樣,用戶就能從硬件設(shè)計(jì)中解脫出來,專注于AI應(yīng)用開發(fā),從而實(shí)現(xiàn)快速的產(chǎn)品開發(fā)。
這款獨(dú)特的嵌入式人工智能處理器RZ/V2N是您下一次進(jìn)行邊緣AI開發(fā)的理想之選。該器件及其評(píng)測(cè)板(RZ/V2N-EVK)均可從瑞薩在線商店購(gòu)買。