Luca Verre是傳感器公司Prophesee的首席執(zhí)行官，也是這家法國(guó)巴黎誕生的初創(chuàng)公司的聯(lián)合創(chuàng)始人，在一眾半導(dǎo)體創(chuàng)業(yè)企業(yè)中，Prophesee所涉足的視覺(jué)傳感器，仍是一個(gè)外界了解較少的小眾賽道，但憑借自身開(kāi)創(chuàng)的獨(dú)特技術(shù)——“基于事件的傳感器”，有望創(chuàng)造新的應(yīng)用領(lǐng)域。

Prophesee聯(lián)合創(chuàng)始人兼首席執(zhí)行官Luca Verre

圖片來(lái)源：Prophesee

所謂基于事件的傳感器（EVS），其起源于視覺(jué)神經(jīng)的信號(hào)模擬，是一種模仿眼睛的感光機(jī)制而建立的仿生傳感器技術(shù)：人眼感受到光線后，視網(wǎng)膜上的受體細(xì)胞就會(huì)將光信號(hào)轉(zhuǎn)換成神經(jīng)信息，后段的神經(jīng)細(xì)胞再分別挑選出亮部和暗部，經(jīng)由神經(jīng)節(jié)細(xì)胞，將信息傳遞到大腦的視覺(jué)皮層。

EVS則如同人類視覺(jué)神經(jīng)，射入傳感器的光線會(huì)轉(zhuǎn)換成電氣信號(hào)。電氣信號(hào)通過(guò)放大器，由比較器根據(jù)亮度變化進(jìn)行分離，形成變亮信號(hào)和變暗信號(hào)，然后再通過(guò)后段的信號(hào)處理，以EVS圖像數(shù)據(jù)的形式輸出。因此，EVS是一種只對(duì)亮度變化敏感并輸出圖像的視覺(jué)傳感器。

Luca Verre介紹，事件視覺(jué)技術(shù)的優(yōu)勢(shì)在于捕獲動(dòng)態(tài)信息、時(shí)間信息，這些信息可以很好地和CMOS RGB 傳感器的信息實(shí)現(xiàn)互補(bǔ)，或是和ToF 或者激光雷達(dá)收集的3D 信息互補(bǔ)。這種傳感器模式的組合可以形成更具價(jià)值的解決方案。

在EVS的制造上，主要是在索尼幫助下完成的，生產(chǎn)出的EVS傳感器成品提供給客戶，目前在索尼半導(dǎo)體部門(mén)的官網(wǎng)上，已經(jīng)有兩款EVS傳感器對(duì)外提供。根據(jù)Prophesee介紹，借助索尼生產(chǎn)圖形傳感器的經(jīng)驗(yàn)，使得EVS傳感器得以大規(guī)模量產(chǎn)，實(shí)現(xiàn)優(yōu)秀的拍攝性能并降低成本。

實(shí)際上，EVS作為一類新型傳感器，更重要的是為其尋找落地場(chǎng)景，據(jù)索尼半導(dǎo)體部門(mén)的相關(guān)研發(fā)人員介紹，早期“最大的難題是向客戶介紹EVS后，一開(kāi)始大家都對(duì)這款獨(dú)特的傳感器產(chǎn)生了濃厚興趣，覺(jué)得很有趣，但是一旦討論到它的應(yīng)用，客戶往往不知道要如何使用，因此始終難以進(jìn)入下一個(gè)階段?！?

這也是Luca Verre時(shí)常需要思考的問(wèn)題。

傳感器細(xì)分賽道專業(yè)且龐雜，距大眾生活看似較遠(yuǎn)，但其所應(yīng)用的一些領(lǐng)域卻也和平常人的生活息息相關(guān)，如作為手機(jī)、汽車等設(shè)備“眼睛”攝像頭，內(nèi)藏的圖像傳感器是核心部件，過(guò)去主要以傳統(tǒng)CMOS傳感器（CIS）為主。根據(jù)市場(chǎng)調(diào)研公司Counterpoint數(shù)據(jù)，2022年CIS全球單位出貨市場(chǎng)規(guī)模為190億美元。其中，移動(dòng)手機(jī)占據(jù)的份額最高，為132億美元。

給手機(jī)裝上不一樣的“眼睛”，是Prophesee力圖在消費(fèi)市場(chǎng)達(dá)到的成績(jī)，并選擇了一個(gè)手機(jī)攝像的常用功能“去模糊（deblur）”作為切入點(diǎn)，其基本原理是EVS傳感器配合傳統(tǒng)傳感器的數(shù)據(jù)，系統(tǒng)能夠?qū)VS以微秒為單位記錄的事件填充到兩幀圖像的間隙，通過(guò)算法提取純動(dòng)態(tài)信息，從而修復(fù)運(yùn)動(dòng)模糊。從Prophesee向界面新聞提供的Demo來(lái)看，這一功能令人印象深刻。

與高通的合作也將為EVS進(jìn)入手機(jī)市場(chǎng)降低難度，“我們和高通以及其他一些手機(jī)OEM廠商合作，將我們的傳感器和常規(guī)RGB 傳感器結(jié)合，用于提升手機(jī)攝影的圖像質(zhì)量，用于圖像去模糊?！盠uca Verre稱。

EVS傳感器以及Prophesee的去模糊算法，與高通的驍龍手機(jī)平臺(tái)整合后，有利于進(jìn)一步打開(kāi)市場(chǎng)，“我們跟高通的合作非常具有戰(zhàn)略意義。高通是高端旗艦手機(jī)應(yīng)用處理器的市場(chǎng)領(lǐng)導(dǎo)者，我們和高通合作， 把Prophesee metavision傳感器和高通驍龍SoC結(jié)合，提高手機(jī)影像質(zhì)量，我們也一起向一些手機(jī)OEM廠商推廣我們的解決方案。”Luca Verre稱，強(qiáng)調(diào)與高通的合作時(shí)一次“長(zhǎng)期合作”，并暗示搭載EVS的手機(jī)將會(huì)很快推出。

除了手機(jī)，VR/AR頭顯也是Luca Verre一直密切關(guān)注的產(chǎn)品。北京時(shí)間6月6日凌晨，蘋(píng)果推出第一款XR（混合現(xiàn)實(shí)）頭戴顯示設(shè)備Apple Vision Pro和操作系統(tǒng)VisionOS，將在2024年早些時(shí)候登陸美國(guó)市場(chǎng)，隨后擴(kuò)展至其他國(guó)家。Vision Pro內(nèi)外部生態(tài)結(jié)合，通過(guò)虛擬鍵盤(pán)、眼球追蹤、手勢(shì)控制等新型交互方式落地辦公、娛樂(lè)等場(chǎng)景，無(wú)疑對(duì)于傳感器的要求也會(huì)有不少。

蘋(píng)果Vision Pro頭顯引發(fā)了對(duì)XR話題的廣泛關(guān)注，尤其是在眼球追蹤和手勢(shì)識(shí)別上取得了很好的效果，這被認(rèn)為是所謂“空間計(jì)算”的關(guān)鍵交互技術(shù)。