近期,業(yè)內傳聞字節(jié)跳動正在研發(fā)的AI智能眼鏡項目,正考慮采用恒玄2800搭配研極微的ISP芯片方案,盡管這一選擇尚未最終確定。AI智能眼鏡的核心在于SoC芯片的選擇,它直接決定了產(chǎn)品的體驗上限。例如,meta的Rayban眼鏡采用的是高通AR1芯片方案,但為了滿足拍攝功能,還需額外搭載ISP芯片。
ISP芯片,即圖像信號處理器,并非新鮮事物,但在AI智能眼鏡領域正逐漸受到重視。ISP的主要功能是處理圖像傳感器采集到的原始圖像信號,與CMOS圖像傳感器相輔相成。CMOS傳感器如同人類的視網(wǎng)膜,負責捕捉光線,而ISP則相當于大腦皮層中處理視覺信息的部分。
近年來,隨著手機廠商自研芯片的熱潮,ISP芯片成為了焦點之一。vivo自2021年推出自研ISP芯片V1以來,已迭代至第三代;小米也推出了自研ISP芯片澎湃C1。ISP芯片對圖像質量的提升至關重要,在同等CMOS條件下,優(yōu)秀的ISP芯片可使圖像質量改善10%~15%。
ISP芯片分為集成和獨立兩種類型。集成ISP是將ISP功能集成在SoC處理器中,如高通驍龍系列和英偉達Tegra系列。而獨立ISP芯片則獨立于SoC存在,雖然成本較高,但運算能力和成像質量更優(yōu),且可根據(jù)需求定制,與相機其他組件的契合度更高。
在AI眼鏡領域,高通AR1芯片雖然性能強大,但價格高昂。因此,恒玄等MCU搭配MTK或獨立ISP芯片的方案成為了性價比更高的選擇。外掛ISP芯片的方案不僅成本低廉,還具備低功耗長續(xù)航的特點。據(jù)XR Vision Pro報道,通過調校ISP芯片,可以達到接近高通AR1的拍攝效果,且整體BOM成本可控制在千元以內,零售價可做到1500元以下。
目前,國內多家企業(yè)都在涉足ISP芯片領域。海思從麒麟950開始,就在SoC中集成了自研的ISP模塊。而星宸科技作為聯(lián)發(fā)科間接持股的企業(yè),其ISP芯片廣泛應用于智能安防、智能車載等領域。富瀚微、恒玄科技等也在ISP芯片領域有所布局。
隨著AI技術的不斷發(fā)展,AI ISP芯片正逐漸成為新的焦點。AI ISP將人工智能算法與ISP技術深度融合,能夠實現(xiàn)對圖像內容的智能分析和處理。據(jù)市場研究機構預測,全球ISP芯片市場銷售額將持續(xù)增長,其中AI ISP的應用前景廣闊。
AI ISP在低光成像方面表現(xiàn)出色,能夠顯著提升信噪比。華為海思推出的“越影AI ISP”在低照場景下圖像信噪比提升了4倍。全志科技、國科微、愛芯元智等企業(yè)也在AI ISP領域取得了顯著進展,其技術已應用于智能電視、智能安防、智能車載等多個領域。
以全志科技為例,其AI ISP技術已應用于多款芯片產(chǎn)品中,實現(xiàn)了AI降噪功能的高效運行,并在客戶產(chǎn)品中實現(xiàn)了量產(chǎn)落地。國科微的4K AI視覺處理芯片也搭載了自研AI ISP,能夠在極低照度下對圖像進行全方位優(yōu)化和增強。
愛芯元智和飛凌微等企業(yè)也在AI ISP領域有所布局。愛芯元智的“愛芯智眸”采用了混合精度、存算一體的架構設計,能夠在有限功耗下達到高算力。飛凌微發(fā)布的AIoT應用系列高性能端側視覺AI SoC芯片A1也集成了自研的AI ISP部分。
隨著AR、VR、顯示技術以及自動駕駛等領域的不斷發(fā)展,對畫質的要求將不斷提升,這將推動AI ISP技術的進一步革新。同時,AI ISP所引領的技術難度降低和成本下降,也將為更廣泛的應用提供可能性。