沖破三星、索尼的銅墻鐵壁，從事件相機說起

視覺傳感巨頭切入事件相機。

智能手機間的競爭已經(jīng)變成了拍攝能力的競爭。

主要體現(xiàn)在兩個方面，一是攝像頭數(shù)量疊加，手機廠商自研圖像處理芯片，甚至同傳統(tǒng)鏡頭廠商合作；二是CMOS 圖像傳感器（CIS）的市場增長，據(jù) Yole Développement 報告顯示，2020 年 CIS 應用領域手機占比高到 68%。

CMOS 圖像傳感器相當于機器的眼睛，將光信號轉(zhuǎn)變?yōu)?a class="article-link" target="_blank" href="/baike/1546930.html">數(shù)字信號，供機器“觀看”，是實現(xiàn)手機拍照功能的關鍵元器件，性能好壞直接影響攝影質(zhì)量，其成本占據(jù)整個攝像頭模組的 52%，同時也被廣泛應用在安防、工業(yè)、汽車等領域。

正因如此，在半導體領域，CIS 被視為細分領域的一塊大蛋糕。據(jù) Yole Développement 報告預測，到 2026 年，CIS 市場規(guī)模將達到 315 億美元（約 2040.22 億元人民幣）。

盡管市場很大，但長期以來傳統(tǒng)傳感器市場基本被三星、索尼和豪威三家分食，初創(chuàng)企業(yè)難有機會沖破桎梏進入市場。不過難有機會不等于沒有機會，視覺芯片技術仍在演進，機器視覺仍有難題未解。

近日，國內(nèi)新銳企業(yè)銳思智芯發(fā)布了一款仿生視覺傳感器芯片——ALPIX -Pilatus芯片(簡稱ALPIX-P)，這一款芯片不僅與三星、索尼站在同一起跑線上，憑借其核心技術優(yōu)勢，未來很有可能打破三星、索尼等大廠在視覺傳感領域的銅墻鐵壁，為行業(yè)帶來更多選擇。

銳思智芯 ALPIX -Pilatus?融合仿生視覺傳感器芯片

CIS 之后，巨頭入局事件相機

一個月前，索尼半導體發(fā)布了兩款全新的視覺傳感器芯片，與傳統(tǒng) CIS 不同，這兩款傳感器芯片被稱之為堆疊式事件監(jiān)測視覺傳感器（EVS, Event-based Vision Sensor）。后者仿照人眼視網(wǎng)膜的工作原理，每個像素都相當于一個視網(wǎng)膜細胞，獨立工作，且只對變化敏感，也被稱之為事件相機。

不僅僅是索尼，三星也開發(fā)了系列芯片，入局事件相機行業(yè)。

回顧圖像傳感器的發(fā)展，最初是以高像素、高制造難度的 CCD 器件為主流，日本公司扛大旗，直到 1995 年，幾位華人留學生在硅谷創(chuàng)辦了豪威，將傳統(tǒng)的 CMOS 工藝用在圖像傳感器中，取代 CCD，就此打破日企壟斷格局。

CMOS 最終得以取代 CCD 的原因眾多，一方面 CMOS 雖然成像質(zhì)量較 CCD 差，但功耗和成本降低，適合消費電子市場，另一方面，豪威切入蘋果供應鏈，加速了 CMOS 對 CCD 的替代。

據(jù)市場調(diào)研機構 Strategy Analytics報告顯示，豪威、索尼、三星在視覺傳感器的市場占有率達80%以上。CMOS 技術保持傳感器市場主旋律的同時,規(guī)模也在不斷增長。

既然 CMOS 火爆至今，那么視覺傳感器巨頭們?yōu)楹芜€要切入事件相機呢？

原因有二，一是 AI 與 CIS 集成是未來趨勢，二是傳統(tǒng) CMOS 只適用于拍攝人眼觀看靜態(tài)圖片，在機器視覺方面，則依然面臨眾多痛點。

銳思智芯創(chuàng)始人兼 CEO 鄧堅告訴雷鋒網(wǎng)，傳統(tǒng)機器視覺面臨四大痛點：運動捕捉差、數(shù)據(jù)冗余大、功耗高、環(huán)境適應力差。

這主要是因為 CIS 本身的工作原理造成的。CIS 主要是對光電流進行時間上的積分來實現(xiàn)曝光，而從曝光到數(shù)模轉(zhuǎn)化再到數(shù)據(jù)的傳輸耗時長，時間越長意味著能耗越高，同時圖像的幀率也會降低。幀與幀之間的間隔時間長造成信息缺失，從而增加了機器對圖像的判斷難度。

同時，CIS 輸出的是 8-12 bit 信息，數(shù)據(jù)傳輸量大、能耗高，讀取慢，存儲空間需求大且處理圖像耗能高。

“CIS 也嘗試解決這些痛點問題，但基于其通過快門控制所有像素在同一時間內(nèi)進行積分曝光的工作原理，其幀率、數(shù)據(jù)量和動態(tài)范圍三個參數(shù)難以平衡。”鄧堅解釋道。例如在高動態(tài)范圍的拍攝中，常常使用多重曝光算法，即融合多個不同曝光時間的幀圖像而成高動態(tài)范圍的圖像，必然導致幀率下降，更多的數(shù)據(jù)運算和更大的系統(tǒng)延時，在要求短響應時間和捕捉快速變化的場景中無法適用。

仿生視覺傳感器與傳統(tǒng)CIS傳感器參數(shù)對比

基于不同的工作原理，事件相機則能過打破 CIS 在機器視覺上的限制。鄧堅表示，事件相機模仿人眼的工作原理，每個像素都像神經(jīng)細胞一樣獨立工作，獨立連續(xù)地感知光的變化，并將光的變化轉(zhuǎn)換為數(shù)字脈沖信號，若光強無變化則不輸出。

“總結(jié)起來，事件相機具有速度快、數(shù)據(jù)量少、功耗低和動態(tài)范圍大的特點，與當下機器視覺面臨的痛點一一對應。”鄧堅說道。

國內(nèi)唯一事件相機獨立創(chuàng)企，核心技術領先索尼、三星

正是因為事件相機能夠解決傳統(tǒng) CIS 無法解決的難題，三星、索尼等視覺傳感器大廠紛紛入局仿人眼視網(wǎng)膜的機器視覺傳感器。

據(jù)鄧堅介紹，由于仿生視覺技術起源于瑞士，目前主要的技術團隊主要集中在國外，包括法國的 Prophesee、瑞士的 insightness 和 inivation，其中瑞士的兩家公司已經(jīng)分別被索尼和三星收購，國內(nèi)除了銳思智芯外，上海芯侖光電也涉足仿生視覺技術，不過目前芯侖光電已經(jīng)被韋爾股份收購。

“在事件相機領域，銳思智芯是目前國內(nèi)唯一一家獨立的創(chuàng)企?！编噲哉f道。

雖然是在國內(nèi)創(chuàng)業(yè)，但與其他幾個事件相機公司類似，銳思智芯核心團隊來自瑞士，核心成員曾從事過各類高端傳感器研發(fā)，如高端圖像傳感器、ToF、X ray、神經(jīng)元信號探測芯片等。銳思智芯成立至今不到3年時間，不過其核心團隊最早于 2014 年參加瑞士國家基金會項目，設計一款植入盲人眼球的仿視網(wǎng)膜芯片，就已經(jīng)進入仿生視覺領域。

融資方面，今年初，銳思智芯完成近億元 Per-A 輪融資，由?？低暫鸵举Y本聯(lián)合領投，訊飛創(chuàng)投、舜宇中央研究院、全志科技、追遠創(chuàng)投、同創(chuàng)偉業(yè)跟投，老股東聯(lián)想創(chuàng)投、中科創(chuàng)星繼續(xù)加注。

值得一提的是，銳思智芯擁有獨有的核心技術，從一開始就同索尼、三星等形成差異化格局。

“為何發(fā)展了 6 年多的事件相機，至今依然活躍在工業(yè)測振領域，而在消費電子領域不見其身影？”鄧堅說：“市面上現(xiàn)有的事件相機技術理念和方式還是基于二十年前的技術，導致最終設計制造的芯片功能受限，適用范圍并不廣泛?！?/p>

事實上，在真實拍攝場景中，機器視覺既需要事件信號做快速的預判，也需要圖像信號做精細的判斷或重建，因此既需要事件相機捕捉動態(tài)信息，也需要傳統(tǒng) CIS 呈現(xiàn)細節(jié)豐富的靜態(tài)信息。

“現(xiàn)有的事件相機，由于其底層設計還是沿用比較傳統(tǒng)的方式，存在一些問題，難以兼容輸出圖像信號，并且像素尺寸大，噪聲大?！编噲哉f。

正因如此，銳思智芯將仿生事件相機功能和 CIS 功能在像素層面融合，用一顆攝像頭代替兩顆攝像頭，同一個像素中放置兩套電路，一套用于生成事件信號，一套用于輸出圖像信號。這一技術，被銳思智芯命名為 Hybrid Vision 融合式仿生視覺技術。

Hybrid Vision 融合式仿生視覺技術原理

不過由于一個像素內(nèi)電路數(shù)量是傳統(tǒng) CIS 的十倍，設計難度也大大增加，同時也可能導致設計出的芯片像素面積大。

為解決這一問題，銳思智芯采用先進的 3D 堆疊工藝，將像素感光部分和圖像信號輸出電路放置上層晶圓，事件信號輸出電路放置下層晶圓，然后通過銅互連技術將上下層晶圓的電路在每個像素上對應連接，既能大幅度減小像素尺寸，又能隔離不同電路之間的信號串擾，降低噪聲。

進軍消費電子，預計明年年中出貨

基于獨有的核心技術，銳思智芯設計出 ALPIX 系列芯片產(chǎn)品，目前ALPIX-P正式發(fā)布。

據(jù)銳思智芯介紹，最新公布的 ALPIX-P，可以在傳統(tǒng)圖像傳感器模式和仿生事件相機模式間快速切換。在圖像模式下，ALPIX-P是一款最高幀率為120幀的全局曝光傳感器，與現(xiàn)有的傳統(tǒng)圖像傳感器完全一致，與現(xiàn)有成熟的視覺系統(tǒng)完全兼容。在仿生事件相機模式下，ALPIX-P具有超高幀率，高有效信息占比，大動態(tài)范圍的特點。預計到明年，將在VIoT領域落地。

不過低功耗的 IoT 領域并不是銳思智芯的全部市場目標，其計劃于今年年底發(fā)布的 ALPIX-Eiger，就適用于超高畫質(zhì)拍攝的小型相機設備，如手機、安防攝像頭等。銳思智芯稱，該款芯片將進一步縮小像素尺寸，提升分辨率。

“事實上，現(xiàn)階段我們想的不是如何去顛覆視覺傳感器行業(yè)，只是想盡量滿足市場需求空白，作為初創(chuàng)公司，我們會腳踏實地，早期先聚焦于 VIoT 領域，未來將擴展至汽車和消費電子領域?！编噲哉f道。

作者 | 吳優(yōu)

編輯 | 李帥飛