自2012年Oculus Rift問世開始,國內(nèi)XR(AR、VR、MR等多種技術(shù)統(tǒng)稱,即擴展現(xiàn)實)行業(yè)經(jīng)歷了2016年的所謂VR元年,熬過2017年開始的冰河期,再到2021年年底開啟的元宇宙熱潮,在起起伏伏間逐步走向了成熟。
一位長期關(guān)注XR的投資人告訴界面新聞,之前XR無法被稱為一個產(chǎn)業(yè),一個重要原因在于沒有自己的產(chǎn)業(yè)鏈,而是與智能手機等產(chǎn)業(yè)共用產(chǎn)業(yè)鏈,但現(xiàn)在這種情況正在逐漸改變。高清晰度的顯示屏、精準的傳感器以及強大的集成電路計算能力,都為XR體驗提供了堅實的技術(shù)基礎(chǔ)。
與智能手機的發(fā)展歷程類似,作為XR設(shè)備的核心組成部分,XR芯片的性能直接與用戶體驗掛鉤,得到了多方主體的關(guān)注。頭部科技企業(yè)中如Apple、三星、Meta都曾在XR自研芯片上做出嘗試,在今年8月備受關(guān)注的Apple vision pro中就搭載了Apple R1專用芯片。
回望國內(nèi),XR芯片領(lǐng)域同樣不乏參與者,成立于2021年9月的萬有引力正是其中之一。作為一家XR空間計算芯片設(shè)計公司,萬有引力聚焦于XR設(shè)備專用芯片及相關(guān)組件研發(fā)的公司,以核心芯片為載體,硬件技術(shù)和算法作為支撐提供下一代XR空間計算的完整技術(shù)解決方案。
在衡量企業(yè)價值方面,頭部風(fēng)投機構(gòu)們向來敏銳。在成立至今的2年多的時間里,萬有引力已經(jīng)完成了包含天使輪、Pre-A輪、Pre-A+輪、A輪的四輪融資,天使輪后每輪融資額均在億元人民幣級別,資方陣容中更是不乏紅杉資本、IDG資本、眾源資本等頭部風(fēng)投機構(gòu)。
XR芯片為什么必不可少?
眾所周知,VR設(shè)備旨在為用戶提供一個交互式的虛擬三維空間,而See-Through功能(即利用設(shè)備的前置攝像頭查看頭顯外部實時環(huán)境情況的功能,也被稱為“透視功能”)則是為了打破虛擬空間,讓用戶對周圍的真實世界有所感知。
這項原本出自安全考慮的功能隨著行業(yè)的發(fā)展卻衍生出了更多可能性。Meta、微軟等企業(yè)都選擇借由See-Through功能在自身VR產(chǎn)品上增加更多AR向應(yīng)用以提升設(shè)備實用價值。
目前實現(xiàn)See-Through功能的技術(shù)路線主要包含VST(視頻透視Video See-Through)、OST(光學(xué)透視Optical See-Through)。Apple vision pro通過Eye Sight的功能鏈接虛擬與現(xiàn)實,其背后的思路正是VST路線。
基于VST路線的XR設(shè)備通常配備有多個傳感器,這就意味著其芯片需要滿足高度計算密集型的應(yīng)用需求,能夠處理大量的圖像和數(shù)據(jù),提供更加流暢和逼真的虛擬現(xiàn)實和增強現(xiàn)實體驗。
另一方面,當身體運動和視覺反饋之間出現(xiàn)延遲時,這種滯后可能會導(dǎo)致用戶眩暈,因此XR設(shè)備要有無延遲或低延遲處理的能力,以確保用戶可以更加自然、舒適地與虛擬環(huán)境進行交互。
在行業(yè)伊始,VR一體機中普遍采用高通推出的驍龍XR2芯片,但是這款芯片是在智能手機芯片的基礎(chǔ)上調(diào)整得來的,并不能完全滿足XR設(shè)備對于交互和顯示的特殊需求。
“高清、低延遲、無眩暈的視頻穿透(VST)體驗是讓空間計算從游戲主機進入辦公和更普遍的消費市場的關(guān)鍵,而讓這成為可能的是專用協(xié)處理器芯片。”礪思資本創(chuàng)始合伙人曹曦曾公開表示,“這顆芯片不僅需要完成傳感器的數(shù)據(jù)融合,同時也要對傳感器數(shù)據(jù)進行AI處理,配合主控芯片達到虛實結(jié)合和以假亂真的效果。”
Apple vision pro中所搭載的Apple R1芯片正是一款專用協(xié)處理器芯片,專門用于處理從Apple Vision Pro的各種傳感器獲得的數(shù)據(jù),與主處理器M2芯片協(xié)同工作。傳感器將其感測到的內(nèi)容轉(zhuǎn)換為數(shù)字數(shù)據(jù)輸入,Apple R1芯片接收輸入數(shù)據(jù)并進行實時處理,隨后輸出生成混合現(xiàn)實環(huán)境所需要的數(shù)據(jù)。
可以說更快速、更高質(zhì)量處理傳感器數(shù)據(jù)是XR設(shè)備向用戶呈現(xiàn)混合現(xiàn)實環(huán)境的基礎(chǔ),無論是對于交互還是顯示,專用協(xié)處理器芯片的重要性都不言而喻。
專業(yè)團隊下場
與科技巨頭相比,創(chuàng)業(yè)公司的優(yōu)勢就在于快速迭代、顛覆性開發(fā)的能力。找好細分領(lǐng)域切入、迅速發(fā)力至關(guān)重要。
隨著XR技術(shù)在社交娛樂、生產(chǎn)生活、工業(yè)制造、醫(yī)療保健、教育培訓(xùn)等領(lǐng)域的應(yīng)用越來越廣泛,對高性能XR芯片的需求將持續(xù)增長。在第三方XR專用芯片研發(fā)商相對稀缺的2021年,專業(yè)團隊選擇下場創(chuàng)業(yè)。
公開報道顯示,萬有引力CEO在斯坦福攻讀電子工程博士之后加入蘋果,期間在XR方向上積累了豐富研發(fā)經(jīng)驗;其余聯(lián)創(chuàng)則分別來自蘋果、華為、Meta、Amazon,各自的專業(yè)領(lǐng)域包含XR芯片、顯示、光學(xué)、感知、算法等等。
萬有引力所推出的第一款產(chǎn)品正是力求帶來極致體驗的一款XR專用芯片——GravityXR?? 仿生視覺芯片。據(jù)介紹,這款芯片在顯示、感知、圖像等多方面具備硬件加速處理的定制化設(shè)計,提供多傳感器接口以及與之對應(yīng)的感知、圖像算法應(yīng)用以及高分辨/高幀率的顯示接口、與之對應(yīng)的顯示效果增強技術(shù)。
能力方面,這款芯片更智能地達到8K/120Hz;實現(xiàn)比AR更強的MR應(yīng)用,達到舒適,無眩暈;增強VR/MR的畫質(zhì)效果:高質(zhì)量的顯示/光學(xué)增強和相機處理;為感知技術(shù)提供足夠的靈活性和計算能力。
從整個產(chǎn)業(yè)來看,XR設(shè)備正在向下一代交互工具穩(wěn)步迭代。IDC統(tǒng)計數(shù)據(jù)顯示,VR\AR全球消費支出在2022年為139億美元,并預(yù)計將在2026年增長至509億美元,未來四年的全球市場規(guī)模年復(fù)合增長率為32.3%。
長期來看,當XR設(shè)備從小眾游戲機、維修檢測等小場景產(chǎn)品迭代為手機一樣的大眾設(shè)備,XR芯片領(lǐng)域毫無疑問將出現(xiàn)新的偉大公司。但是在當前這一階段,初創(chuàng)芯片廠商還需要為長期投入儲備彈藥。
由于半導(dǎo)體行業(yè)本身具備研發(fā)成本高、投入周期長的特點,初創(chuàng)芯片廠商必然要面對現(xiàn)金流的壓力。從芯片設(shè)計到流片、再到面向市場產(chǎn)生訂單,能否把握合適的商業(yè)化節(jié)奏至關(guān)重要。
據(jù)了解在芯片流片之前,萬有引力與業(yè)界主要廠商合作開發(fā)了系統(tǒng)級測試平臺,這一合作使得他們能夠提前驗證芯片的算法及架構(gòu)、展示部分芯片功能的整合以及實時VST效果,這將會有利于提升流片的成功率。
此前在36氪的報道中,萬有引力創(chuàng)始團隊曾預(yù)計第一代芯片將于2024年內(nèi)完成量產(chǎn),并表示團隊已經(jīng)開始跟諸多產(chǎn)業(yè)頭部玩家接觸,并且與部分玩家達成戰(zhàn)略研發(fā)合作。
在披露Pre-A+輪融資時,萬有引力曾表示下一輪融資所得資金將部分用于流片生產(chǎn)和下一代芯片的研發(fā)。這意味著萬有引力正保持著長期投入的心態(tài)、穩(wěn)步走向產(chǎn)品迭代的節(jié)奏上。
“虛擬現(xiàn)實是一個值得長期去做的方向,”萬有引力CEO曾這樣說,“我們和投資人都有信心,在這個硬科技的領(lǐng)域扎根,進行長期投入。”
來源:界面新聞 作者:陳顯