界面新聞記者 | 崔鵬
9月28日凌晨,高通公司宣布正式推出第一代驍龍AR1平臺和第二代驍龍XR2平臺,前者專門為下一代智能眼鏡產(chǎn)品打造,而后者則用于支持下一代VR(虛擬現(xiàn)實)和MR(混合現(xiàn)實)設備。
高通此舉著眼于當下VR和MR行業(yè)的強勁發(fā)展勢頭。高通技術公司副總裁兼XR業(yè)務總經(jīng)理司宏國(Hugo Swart)認為,在該領域,游戲、健身、娛樂等C端應用不斷發(fā)展,培訓、教育和醫(yī)療等企業(yè)級場景也有不錯前景。
他向界面新聞等媒體強調(diào),第二代驍龍XR2平臺的目標是真正推動VR和MR的普及。
“我們與蘋果(Vision Pro搭載的R1芯片方案)的策略不同,他們的產(chǎn)品價格比較昂貴,需要采用多個芯片和外置電池支持。”司宏國表示,這種架構很難讓用戶負擔得起終端價格。而第二代驍龍XR2平臺是一個單芯片解決方案,不需要外置芯片組,更適合OEM廠商制造高性能和價格門檻低的硬件產(chǎn)品。
新平臺還支持3K x 3K顯示,司宏國稱這是目前VR和MR設備最理想的顯示方案,市場上存在的4K方案雖然顯示效果更好,但價格過于昂貴,不具備規(guī)?;瘮U展的供應能力。
高通還為此針對GPU進行了大幅升級,支持空間扭曲和視覺聚焦渲染等最新技術。與初代產(chǎn)品相比,新平臺的GPU性能提升了2.5倍,在同樣的視覺效果下功耗降低了一半。
在AI技術應用上,新平臺支持INT8,對不同AI模塊的連接進行了優(yōu)化,并升級了計算機視覺模塊。
針對VR和MR頭顯設備上始終開啟的六自由度(6DoF)頭部追蹤所需要的巨大算力消耗,初代XR2平臺采用軟件方案支持,而第二代平臺將該功能放到了芯片硬件視覺分析引擎(Engine for Visual Analytics)中,從而提升了性能,并降低了功耗和時延。
第二代驍龍XR2平臺還支持并發(fā)感知技術,能夠對用戶所處的環(huán)境(比如地板和墻壁位置、房間內(nèi)有哪些物品等)進行精確理解,同時能對用戶進行頭部追蹤、眼球追蹤、手勢以及全身動作追蹤等。
司宏國表示,這些新技術在運行過程中都需要消耗大量算力,所以新平臺的終端側AI算力較前代產(chǎn)品提升了8倍。高通進入XR領域已經(jīng)超過十年時間,期間推出過多個XR專用平臺,包括第一代驍龍AR2、驍龍XR2+、驍龍XR和驍龍XR1平臺,并且與Meta、聯(lián)想和PICO等頭部公司進行合作,發(fā)布了超過80款硬件設備。
VR/MR設備通常支持10-15瓦功率的散熱要求,所以相較手機有更強大的散熱能力,同時它們能與游戲PC相連接,依靠更好的散熱能力和專用顯卡來接入游戲。
所以XR設備與其它智能設備的互聯(lián)非常重要,也更需要Wi-Fi 7等新一代連接技術。第二代驍龍XR2平臺支持Wi-Fi 7和Wi-Fi 6E連接,功耗降低了25%,時延降低了80%。在混合現(xiàn)實MR體驗的視頻透視時延方面,新平臺將其降低至了12ms。
Meta(前Facebook)公司的Quest 3成為全球首個搭載第二代驍龍XR2平臺的硬件產(chǎn)品,在9月28日當天同期發(fā)布。
第一代驍龍AR1平臺則是高通為下一代智能眼鏡產(chǎn)品建立的首個專用平臺,重點強化了拍攝能力。
該平臺采用14-bit雙ISP,支持頂級即時拍攝,同時結合了智能手機上的部分前沿技術,比如自動曝光、自動人臉檢測、計算HDR和人像模式。
高通預測,未來智能眼鏡將可以全天佩戴,外形類似于傳統(tǒng)墨鏡,支持實時拍攝照片和視頻,用戶不再需要從口袋中掏出手機進行操作。
第一代驍龍AR1平臺搭載了運動健康傳感器和視覺搜索,用戶能夠使用語音指令跟智能眼鏡交互,從而徹底解放雙手。
司宏國表示,該平臺支持的功能相對簡單,所有的處理都能在眼鏡端完成,不需要借助于手機處理。智能眼鏡中的虛擬助手回應用戶指令后,可以在用戶眼前提供情景信息,比如在購物場所通過視覺搜索為用戶提供產(chǎn)品信息、實時翻譯、貨物挑選和導航等。
驍龍AR1還是一款可擴展平臺,支持多種不同配置,更適合OEM廠商進行定制,可生產(chǎn)僅采用攝像頭的款式,或者支持單目、雙目顯示的款式。
此外,平臺還支持實時視頻直播以及音樂串流。Ray-Ban(雷朋眼鏡) Meta系列將在該平臺首發(fā)。
對于具備更高沉浸感和大顯示屏幕的AR(增強現(xiàn)實)眼鏡,它們需要在手機側完成處理工作,研發(fā)起來更加復雜。司宏國表示高通會持續(xù)投入,在未來的平臺中解決這個問題。