“基于事件”的神經(jīng)擬態(tài)視覺(jué)技術(shù)受資本熱捧，普諾飛思完成C輪融資

近日，普諾飛思（Prophesee）宣布完成 C輪融資，由創(chuàng)新工場(chǎng)領(lǐng)投、小米及上海韋豪創(chuàng)芯跟投，數(shù)家老股東加碼。

先來(lái)介紹一下這幾家投資機(jī)構(gòu)，首先創(chuàng)新工場(chǎng)是李開復(fù)博士創(chuàng)立的，目前，創(chuàng)新工場(chǎng)管理著超過(guò)25億美元的基金總額，所投資的著名AI獨(dú)角獸企業(yè)包括Momenta、文遠(yuǎn)知行（WeRide）、創(chuàng)新奇智（AInnovation）、第四范式（4Paradigm）、地平線機(jī)器人（Horizon Robotics）等。據(jù)了解，普諾飛思是創(chuàng)新工場(chǎng)投資的第一家歐洲企業(yè)，此前的投資專注于中國(guó)市場(chǎng)。

另外跟投的兩家小米和韋豪創(chuàng)芯，眾所周知，小米是全球三大移動(dòng)設(shè)備供應(yīng)商之一，韋豪創(chuàng)芯是國(guó)內(nèi)知名的投資公司，由國(guó)內(nèi)半導(dǎo)體行業(yè)龍頭韋爾股份作為發(fā)起人參與投資，而韋爾股份旗下的豪威科技是全球前三的CMOS圖像傳感器供應(yīng)商。

這些投資機(jī)構(gòu)看好的普諾飛思到底是什么來(lái)頭？

據(jù)悉，普諾飛思總部位于法國(guó)巴黎，此前已獲英特爾資本、雷諾集團(tuán)、博世創(chuàng)投、歐洲投資銀行等北美、歐洲和日本的知名投資人支持，加上此輪中國(guó)的行業(yè)頂級(jí)投資人，組成了強(qiáng)大的國(guó)際資本陣容。

為什么這么多的投資機(jī)構(gòu)都看好這家企業(yè)呢？

普諾飛思是世界上最先進(jìn)的神經(jīng)擬態(tài)視覺(jué)系統(tǒng)的發(fā)明者，其原視覺(jué)（Metavision?）傳感器專利和AI算法引入了一種全新的基于人眼和大腦工作原理的計(jì)算機(jī)視覺(jué)范例。普諾飛思的技術(shù)可以被理解為“神經(jīng)擬態(tài)機(jī)器眼”。當(dāng)前，許多機(jī)器視覺(jué)技術(shù)都遵循傳統(tǒng)的成像原則——即機(jī)器每秒看到25幀的靜止圖像，通過(guò)對(duì)每幀圖像進(jìn)行智能解析，做進(jìn)一步的識(shí)別與分析。但這種“基于幀”的成像方式不僅讓機(jī)器的“眼”和“大腦”速度不匹配，系統(tǒng)響應(yīng)時(shí)間慢，機(jī)器每一幀都做記錄還會(huì)儲(chǔ)存大量的無(wú)用數(shù)據(jù)，產(chǎn)生大量冗余數(shù)據(jù)，耗費(fèi)系統(tǒng)處理資源。

受人眼視網(wǎng)膜和大腦工作原理的啟發(fā)，普諾飛思創(chuàng)建了神經(jīng)擬態(tài)傳感器和生物啟發(fā)算法，將基于圖像靜止幀的傳感器改為“基于事件”的視覺(jué)系統(tǒng)。在基于事件的視覺(jué)傳感器上，每個(gè)像素都是異步且獨(dú)立的，能獨(dú)立感知并記錄場(chǎng)景中物體的運(yùn)動(dòng)。像素會(huì)隨著場(chǎng)景變化的節(jié)奏而動(dòng)態(tài)變化，而非按照預(yù)先設(shè)定好的每秒25幀。通過(guò)普諾飛思神經(jīng)擬態(tài)視覺(jué)傳感器和軟件技術(shù)，生成的數(shù)據(jù)量比傳統(tǒng)的圖像傳感器減少十到千倍。普諾飛思傳感器可實(shí)現(xiàn)像素級(jí)別的曝光調(diào)節(jié)，即使在極暗或極亮的光照條件下，也可實(shí)現(xiàn) >120dB的動(dòng)態(tài)范圍。普諾飛思“基于事件”的神經(jīng)擬態(tài)視覺(jué)系統(tǒng)不僅能讓每個(gè)像素獨(dú)立展現(xiàn)場(chǎng)景的動(dòng)態(tài)及生命力，更可以讓機(jī)器看見隱藏的場(chǎng)景運(yùn)動(dòng)信息，進(jìn)一步模擬人類雙眼，“看到”行云流水般的世界。

“基于事件”的神經(jīng)擬態(tài)視覺(jué)技術(shù)的落地情況如何？

根據(jù)普諾飛思聯(lián)合創(chuàng)始人兼CEO盧卡·維雷（Luca Verre）先生的介紹，目前“基于事件”的神經(jīng)擬態(tài)視覺(jué)技術(shù)已經(jīng)落地于以下五大領(lǐng)域：

• 全球首個(gè)基于神經(jīng)擬態(tài)視覺(jué)系統(tǒng)的座艙監(jiān)控技術(shù)

利用普諾飛思原視覺(jué)（MetaVision）傳感技術(shù)提供的時(shí)間數(shù)據(jù)，一家致力于駕駛監(jiān)控等技術(shù)研發(fā)的美國(guó)企業(yè)Xperi開發(fā)出了全球首個(gè)基于神經(jīng)擬態(tài)視覺(jué)系統(tǒng)的駕駛員監(jiān)控解決方案（DMS）。

該方案可通過(guò)對(duì)駕駛員眼睛、表情的快速監(jiān)測(cè)，以及計(jì)數(shù)駕駛員的眨眼頻率，從而對(duì)他目光注視的情況進(jìn)行監(jiān)測(cè)。具體來(lái)講，當(dāng)駕駛員疲勞的時(shí)候，眨眼頻率和速度都會(huì)大大提高。傳統(tǒng)RGB攝像頭可以檢測(cè)到眨眼，但不能測(cè)算眨眼的速度。此外，駕駛員開車的時(shí)候，經(jīng)常需要面對(duì)陽(yáng)光，然后就會(huì)放一塊遮光板或是戴太陽(yáng)鏡來(lái)遮陽(yáng)，與此同時(shí)會(huì)形成眼部暗區(qū)，傳統(tǒng)視覺(jué)方案在這個(gè)情況下，要么看不到眼睛，要么把臉部其他部位過(guò)爆。針對(duì)以上這些問(wèn)題，DMS都能很好的解決。

• 基于事件的高級(jí)駕駛輔助系統(tǒng)

由高級(jí)駕駛輔助軟件開發(fā)商Terranet AB與梅賽德斯-奔馳共同開發(fā)的VoxelFlow傳感技術(shù)，采用了普諾飛思原視覺(jué)（MetaVision）傳感器，使自動(dòng)駕駛汽車和ADAS系統(tǒng)能夠快速、準(zhǔn)確地理解周圍的環(huán)境，增強(qiáng)現(xiàn)有雷達(dá)、激光雷達(dá)和攝像頭系統(tǒng)的性能，比如可掃描車輛半徑增加到40米，反應(yīng)時(shí)間卻只要3ms。

具體來(lái)講，與第一個(gè)應(yīng)用類似，在車上安裝三個(gè)基于事件的傳感器，還有一個(gè)激光柱，激光柱進(jìn)行掃描，在掃的時(shí)候經(jīng)常碰一個(gè)問(wèn)題，即點(diǎn)不夠多，而且循環(huán)比較慢，此時(shí)普諾飛思的傳感器會(huì)追蹤激光柱的燈光，然后對(duì)掃描到內(nèi)容進(jìn)行3D建模，從而來(lái)分析前端路況的情況。

• 通過(guò)細(xì)胞實(shí)時(shí)無(wú)菌檢測(cè)實(shí)現(xiàn)的下一代細(xì)胞療法

標(biāo)準(zhǔn)的無(wú)菌檢測(cè)依舊參照幾十年前的微生物學(xué)的方法，通常需要7-14天來(lái)完成，這大大延遲了有關(guān)細(xì)胞治療的發(fā)展。但使用Cambridge Consultants和普諾飛思共同開發(fā)的自動(dòng)化污染檢測(cè)系統(tǒng)，則可以在ms級(jí)時(shí)間內(nèi)進(jìn)行反饋，這個(gè)系統(tǒng)用到了普諾飛思的原視覺(jué)（MetaVision）傳感器和AI模型。

值得一提的是，這個(gè)細(xì)胞療法在血站里沒(méi)太多用處，因?yàn)檠緯?huì)用抗生素來(lái)除菌。自動(dòng)化污染檢測(cè)系統(tǒng)的作用是在利用細(xì)胞作為介質(zhì)生產(chǎn)的產(chǎn)品中尋找細(xì)菌和雜質(zhì)，比如胰島素的制作。

• 首位失明患者借助光遺傳療法恢復(fù)部分視力

根據(jù)《自然-醫(yī)學(xué)》（Nature Medicine）的報(bào)道，GenSight和普諾飛思共同開發(fā)的GS030光遺傳療法，讓失明患者恢復(fù)了部分視力。

具體來(lái)講，GenSight所生產(chǎn)的護(hù)目鏡當(dāng)中運(yùn)用了普諾飛思的技術(shù)，可以通過(guò)失明人士視網(wǎng)膜中所植入的投光器對(duì)視覺(jué)系統(tǒng)進(jìn)行光刺激，進(jìn)而讓其恢復(fù)一部分的視覺(jué)功能。其中，普諾飛思設(shè)計(jì)的“硅視網(wǎng)膜（silicon retinas）”，能夠?qū)⑿盘?hào)發(fā)送給大腦進(jìn)行處理，該技術(shù)可專門針對(duì)于一些晚期的視網(wǎng)膜色素變性的病例。

• 實(shí)時(shí)圖像去模糊，為傳統(tǒng)相機(jī)帶來(lái)巨大的提升

普諾飛思事件傳感器和傳統(tǒng)的傳感器結(jié)合起來(lái)，能夠改善手機(jī)拍照的質(zhì)量，也就是所謂的計(jì)算攝影。

具體來(lái)講，對(duì)于智能手機(jī)來(lái)說(shuō)，拍攝的質(zhì)量是非常重要的。如果是傳統(tǒng)的基于幀的技術(shù)，拍照的時(shí)候會(huì)產(chǎn)生運(yùn)動(dòng)模糊的現(xiàn)象。事實(shí)上，防抖這個(gè)功能大家都在做，一般會(huì)借助于IMU，或者物理光學(xué)防抖。這種解決方案主要用來(lái)做自身防抖，當(dāng)被拍物體由于移動(dòng)速度過(guò)而快造成的模糊卻是非常難以解決。例如在拍攝奔跑的寵物這樣的場(chǎng)景中，如果燈光條件不是特別好，曝光時(shí)間一般會(huì)比較長(zhǎng)，拍攝結(jié)果就會(huì)較為模糊。對(duì)于傳統(tǒng)RGB以圖像為基礎(chǔ)的技術(shù)來(lái)說(shuō)，這是一個(gè)根本性的問(wèn)題，因?yàn)檫@項(xiàng)技術(shù)主要是為了捕捉靜態(tài)的圖像而設(shè)計(jì)的，不是為了捕捉動(dòng)態(tài)信息。如果將傳統(tǒng)的靜態(tài)的以幀為基礎(chǔ)的技術(shù)和普諾飛思以事件為基礎(chǔ)的技術(shù)相結(jié)合，就可以解決這個(gè)模糊問(wèn)題，運(yùn)用算法，甚至可以捕捉到時(shí)間分辨率為1μs的運(yùn)動(dòng)。

本輪融資會(huì)對(duì)普諾飛思產(chǎn)生那些影響？

首先，本輪投資者都是中國(guó)的機(jī)構(gòu)，有助于普諾飛思擴(kuò)展全球布局，深耕中國(guó)市場(chǎng)，進(jìn)一步加強(qiáng)在中國(guó)的商業(yè)發(fā)展與資源積累，滿足市場(chǎng)與客戶不斷增長(zhǎng)的需求，并在半導(dǎo)體、工業(yè)、機(jī)器人、物聯(lián)網(wǎng)和移動(dòng)設(shè)備等關(guān)鍵生態(tài)領(lǐng)域建立更廣泛的合作關(guān)系。值得一提的是，小米和韋豪創(chuàng)芯的戰(zhàn)略參與，也為普諾飛思進(jìn)入關(guān)鍵的移動(dòng)設(shè)備和半導(dǎo)體領(lǐng)域提供了支持。

此外，基于本輪的融資合作，普諾飛思將加速下一代神經(jīng)擬態(tài)視覺(jué)傳感技術(shù)的硬件和軟件產(chǎn)品的開發(fā)與商業(yè)化；針對(duì)新興市場(chǎng)規(guī)劃產(chǎn)品路線；完善基礎(chǔ)設(shè)施，支持運(yùn)營(yíng)及規(guī)模擴(kuò)張。