時時頭條
  • 娛樂
  • 體育
  • 財經
  • 科技
  • 旅遊
  • 軍事
  • 育兒
  • 時尚
  • 遊戲
  • 歷史
  1. 首頁
  2. 科技

MR大牛:Vision Pro代表了行業的下個十年,中國廠商差距多少

2024-02-07 11:38:05

Vision Pro的一小步,是MR(混合現實)產業的一大步。

2月2日,隨著首批使用者陸續拿到Vision Pro,秀出的花式體驗以及網路上圍觀人群的好奇,未來虛擬世界和現實世界的交融多了一絲實感。

Vision Pro作為公司研發多年的產品,集中了顯示、晶片、互動領域大量的核心技術,打造出一個超能力的MR產品。這款產品在諸多技術上走在前列,蘋果也盡其所能為消費者帶來更好的體驗。

在Vision Pro上市之前,各方對它從硬體到軟體都有全方位的研究,隨著Vision Pro上市各路拆機,業界更是清晰看到了Vision Pro採用的新技術。如果說之前各類VR(虛擬實境)產品更多是側重於遊戲類的“玩具”,那麼Vision Pro有極大可能開啟MR作為通用計算工具的時代。

Vision Pro主要部件拆機圖 來源 iFixit

Vision Pro顯示輸出做到虛擬和現實的無縫銜接

Vision Pro在光學顯示上的技術突破這次備受關注,其帶來的高畫質晰度可以做到讓影片或圖片有真實現場感,從而讓眼睛信以為真,混淆虛擬和現實世界的邊界。

從拆機影片看,為了更好的顯示效果,Vision Pro用了兩塊4K清晰度的Micro OLED屏加上玉晶光電的3P Pancake方案,帶來了難以置信的銳度和清晰度。

4K是二維顯示的清晰度,如果放在三維顯示領域,虛擬螢幕清晰度也差不多接近於人眼的極限,這在顯示上突破了一個閾值。

在三維顯示裡,解析度的單位用PPD(Pixels Per Degree),意思是視野的每一度裡面有多少畫素。

XR天使投資人、貓眼電影創始人、真格基金投資合夥人徐梧表示,Meta Quest2的解析度是20PPD,就是指每一度裡面有20個畫素。20PPD,使用者會明確分辨出現實和虛擬世界的差異,再加上機器效能的限制,一體機透過卡通渲染帶給使用者視覺衝擊也相對有限,使用者會覺得挺有趣,但並不會很震撼。他對這個階段的顯示效果定義為立體感。

“人眼的極限是60PPD。而Vision Pro 是40PPD,一定程度已經接近人眼極限。同時,Vision Pro採用的是OLED螢幕,這意味著更豐富的色彩和亮度。此時將會發生一個巨大的質變,使用者可能無法區分現實和虛擬。”徐梧表示,在40PPD下,虛擬螢幕的顯示質量已經幾乎相當於4K顯示器的效果,這意味著虛擬螢幕頭一次可以和實體平面顯示器正面PK。

Vision Pro 4K清晰度的Micro OLED顯示屏,兩塊價格700美元

為了達到這個效果,蘋果也花費了巨資。據第三方評估,Micro OLED屏價格昂貴,兩塊屏價格在700美元,在 Vision Pro的零部件成本中佔比超40%,也是最大的成本。Micro OLED屏交給臺積電代工,索尼公司供應材料。

AR眼鏡創業公司奇點臨近在Vision Pro釋出後就對其進行了全面的技術評估。奇點臨近CTO萬美君(Paul Wan)接受澎湃新聞記者採訪時表示:“蘋果沉浸式顯示這塊是花了大力氣的,為了更好的效果,雙目4K的沉浸式顯示,是蘋果耗費巨資打造,沉浸感超出目前行業一大截。”

這次Micro OLED屏相當於蘋果定製的,且良率不高,因此在產能上還有諸多限制。曾有外媒報道稱,索尼在提供產能上有些吃力,蘋果曾經提出希望提供一百萬Micro OLED屏,但索尼表示做不到。

不過,蘋果Micro OLED屏走在前面,中國多家Micro OLED屏供應鏈緊跟在後面。京東方、視漄科技等螢幕供應商在技術上有突破。

PICO也是MR一線大廠,其技術路線與蘋果非常接近。PICO OS產品負責人馬傑思接受澎湃新聞記者採訪時表示,蘋果透過Micro OLED屏解決了MR螢幕輸出問題,過去VR產品作為遊戲工具是成功的,但作為更通用的工具其顯示質量是不過關的。

當一臺MR可以帶來如此高的清晰度,虛擬螢幕融入現實世界已經不那麼“違和”,變得“絲滑”,可以達到亦幻亦真的交融感。

空間建模以及強大晶片處理能力

作為一名CTO, 萬美君非常關注並且推崇這次Vision Pro空間建模這塊的突破。

“空間建模,3D建模這塊以及這個位置感知蘋果也是花了大力氣的,主要體現在兩個方面,空間3D建模及空間定位。”萬美君表示,空間位置和環境感知上這次蘋果做了非常多的工作。

為了捕捉這些資訊,Vision Pro用了整整12個攝像頭。

“你的攝像頭需要做到軟硬體同步,你的拿到資料是完全同一時刻的,那麼拿了這些資料需要做拼接,因為每個攝像頭的畫幅是有限的,而且需要一個高幀率的情況下去完成運算,至少要保證120幀甚至更高,這為了防止在佩戴時出現眩暈感,所以這個對它的硬體處理晶片提出了更高的要求,這次蘋果出了R1晶片專門去處理攝像頭相關的運算和定位。”萬美君說到。

這次Vision Pro用了兩塊蘋果自研的晶片M2和R1,M2晶片是蘋果用在膝上型電腦上的晶片,其效能強悍不用多介紹。M2處理器主要負責執行visionOS,執行先進的計算機視覺演算法等。蘋果R1協同處理器則主要負責處理來自12個攝像頭,5個其他型別感測器,6個麥克風的資料訊號,加速對於感測器資料的處理,降低延遲,以保證內容呈現實時性,並降低主CPU的負載,降低功耗。

PICO產品經理胡熙坤接受澎湃新聞記者採訪時也談到了晶片晶片處理能力對產品效能的重要性。

“這個晶片它保證了低延時和低頻寬的執行,這其實是非常重要的一個指標了,蘋果官方宣稱是12毫秒,那這個12毫秒你就能夠帶著那個東西全天使用,並且不妨礙你去做日常生活中其他事情,這個是非常重要的。”胡熙坤錶示,今天Vision Pro帶來諸多的體驗都是蘋果長期在消費電子領域的積累沉澱,有些技術當初並不是專門為Vision Pro儲備,而且用在其他產品線上,這次拿到了Vision Pro上來使用。

胡熙坤認為,在空間建模這塊其他廠商與蘋果還有一定距離,這次看了Vision Pro效果後,大家應該都會在這一領域加大力氣去做。

萬美君對其他廠商跟進空間建模上展現了自己的樂觀判斷,“中國廠商在演算法上其實並不比蘋果差多少,比如很多自動駕駛領域也用了大量類似的技術。”

扔掉手柄改用手勢識別和眼球追蹤

如果說這次Vision Pro是帶來了一場顯示輸出的重大革新,那麼輸入端的創新同樣值得稱讚。

以往VR產品的手柄被扔掉了,而是採用了眼球追蹤、手勢、語音等多種融合式互動方式。由LED和紅外攝像頭組成的眼動追蹤系統,可以將不可見光圖案投射到每隻眼睛上,能夠判斷使用者當前注視的位置。這使得使用者無需使用手柄控制,只需透過注視來瀏覽應用圖示,輕點選擇,輕掃滾動,或者發出語音指令即可操控。

胡熙坤錶示,PICO 4 Pro上也用了眼球追蹤和手勢識別技術,對技術方向的認定大家都沒有分歧。

“蘋果的技術都是長期積累的效果,蘋果2017年收購德國SensoMotoric Instruments(SMI),這次把領先的眼球追蹤技術儲備給了VR產品線。”胡熙坤錶示,PICO也堅定看好這一技術,會持續投入。

有些事情交給蘋果來說更為合適,強大的品牌號召力加上高淨值使用者,使得蘋果在推廣新技術應用時相對容易。

“手勢互動這件事情要做得很好,也是要有條件的,其他品牌可能不具備這樣的定價能力,手勢互動需要的硬體周邊都相對較貴。我們更加傾向於用一個親民的成本去完成一件事情,所以更多以攝像頭演算法的迭代,但對蘋果來說,不止是演算法,它的攝像頭陣列針對手勢都做了很多增強的,這導致它成本非常貴。”胡熙坤說,蘋果這樣做把業界未來三四年想要的東西提前呈現了出來。

扔掉手柄的好處是非常明顯,這拓展了MR產品的邊界,從以往主要在特定場景中使用,到現在走出特定場景,到更多日常生活中場景去佩戴和體驗。

這幾天,不少使用者分享了花式Vision Pro體驗,例如地鐵公交上使用,之所以能夠這樣公眾場所佩戴是因為產品還有另一功能,與虛擬實境暢遊時隨時可以回到現實世界與周邊的人交流。

Vision Pro外屏EyeSight外屏內部

一旦有其他人對你對視,你瞬間就可以看到對方,Vision Pro外屏EyeSight顯示屏也看到你的臉和眼睛。當然,看到的臉是虛擬的,空間建模虛擬出來的人臉。

Vision Pro會透過內部攝像頭和感測器生成你的人臉,然後VisionOS會將人臉“切片並插值”,接著渲染在EyeSight顯示屏上,影象透過一層透鏡再透過一層鏡片,最終實現3D人臉影象的視覺效果。

“這就很蘋果,其他廠商可能不會這樣做,但蘋果產品往往為了人性化的體驗,去做這些事情。”胡熙坤錶示。

胡熙坤錶示,對MR來說,透過攝像頭VST(影片透視)而非光學鏡片來捕捉外部現實世界資訊這個技術方向也是確定的,“我們也看到佩戴Vision Pro的使用者在把球拋向空中接球遊戲體驗跟現實世界玩這個遊戲效果差不多,這也意味著透過攝像頭影片傳出的時延是可以接受的。”

在馬傑思看來,蘋果Vision Pro完成了輸出、輸入以及互動的重大革新,這也意味著MR產品形態完成了一次蛻變,躋身通用算力工具的行列,與膝上型電腦、手機、平板電腦等相提並論,可以成為人們的生產力工具,當然這是一個長期的過程,並不是說馬上就能完成這一蛻變。

當然,所有的硬體實現都是為了消費者最終的體驗,而消費者體驗是依靠各類應用來作為媒介。所以,生態非常重要,甚至比技術還要重要得多。

馬傑思認為,Vision Pro推出後,諸多非遊戲類的開發者加入應用開發的行業,此外,其他的iOS應用開發者很容易把應用放在Vision OS上,移植成本非常低,這極大豐富了生態。以2013年算起,差不多十年時間,XR驗證了在娛樂領域能夠做到一個什麼樣的狀態,算是一個里程碑,“Meta實際上在娛樂領域出貨量與任天堂差不多了”。

“下一步是把XR變成一個通用計算平臺,也就是通用計算機。Vision Pro代表行業的下一個十年,未來十年大家探討怎麼樣把XR變成一個更好的計算機,從一個移動計算機,到空間計算機。”馬傑思表示。

熱門資訊
  • OPPO Pad 3即將登場 2.8K原彩仿書柔光屏,學生黨必備 | 2024-11-15 16:11:31
  • 七彩虹iGame釋出全新DDR5高規記憶體:8000MT/s,24G*2售1349元 | 2024-11-15 16:18:38
  • 斯坦福伯克利重磅發現DNA Scaling Law,Evo榮登Science封面!AI設計DNA/RNA/蛋白質再突破 | 2024-11-15 16:25:25
  • 曾突破10GHz!七彩虹釋出全新iGame影系列記憶體:最高48GB 9600MHz | 2024-11-15 16:37:53
  • 華碩推 Prime RTX 4070 Ti Super 顯示卡:符合 RTX SFF Ready 規範 | 2024-11-15 16:42:13
  • 剛收到大合同波音就把它搞砸:距地36000公里處,衛星竟然解體了 | 2024-11-15 16:45:46
  • 雷蛇釋出Razer USB 4 Dock拓展塢:14合1設計、傳輸速度高達40Gb/s | 2024-11-15 16:48:56
  • Fit的三重境界,索尼LinkBuds Fit如何演繹? | 2024-11-15 17:06:10
  • 京東闢謠"價值十幾億手機被燒燬" :無錫失火倉庫無手機無包裹 | 2024-11-15 17:17:20
  • 江波龍自研SLC NAND Flash累計出貨突破1億顆! | 2024-11-15 17:23:32
  • 新型隔熱罩可在重返大氣層時保護下一代可重複使用航天器 | 2024-11-15 17:23:37
  • 16英寸筆電TECRA A60-M:商務精英的全能夥伴 大屏釋放商務潛能 | 2024-11-15 17:29:06
  • 臺電推出 T60 Plus 平板,搭“Helio G88 + 6G + 128G”配置 | 2024-11-15 17:32:52
  • 光晶片迎來“視窗期”:AI拉動光模組發展,國產化率亟待提高 | 2024-11-15 17:43:53
  • 華碩 ROG 雷神 3 代白金電源上架:1000W 2699 元、1200W 3499 元 | 2024-11-15 17:54:10
  • 馬斯克實現“筷子夾火箭”意味著什麼?長征六號運載火箭前副總師這樣說 | 2024-11-15 18:06:58
  • 肖克利的幽靈重現矽谷 | 2024-11-15 18:13:07
  • 額外 50% 視訊記憶體,技嘉推出 Radeon PRO W7800 AI TOP 48G 專業顯示卡 | 2024-11-15 18:17:39
  • 優派推出新款27寸顯示器:4K 160Hz屏僅1499元 | 2024-11-15 18:17:41
  • AMD大秀銳龍AI 9 HX 370:遊戲效能平均領先酷睿Ultra 7 258V 75% | 2024-11-15 18:17:45
  • 中國航發:未來 20 年我國商用航空發動機預計交付 1.9 萬臺 | 2024-11-15 18:19:32
  • 臺積電停供大陸晶片!比斷供還可怕的是,美晶片專家很多是華人 | 2024-11-15 18:25:30
  • 十銓推出外接桌面固態硬碟 T-CREATE EXPERT P32,最大容量 16TB | 2024-11-15 18:39:55
  • 中山大學宋爾衛院士團隊再取突破 | 2024-11-15 18:49:59
  • 祝賀!武漢大學最新Science | 2024-11-15 18:53:41
  • Wi-Fi 8提升重點將從速度轉向穩定性,預計2028年接管Wi-Fi 7 | 2024-11-15 19:23:49
  • 千億珠海航展“賣場”,把這些航空科技賣成了現金 | 2024-11-15 19:37:17
  • 銳龍7 9800X3D首次燒燬:微星官方回應正在調查 | 2024-11-15 19:45:37
  • WiFi 7還沒用上,WiFi 8就要來了! | 2024-11-15 19:47:15
  • 這個男人,開啟了晶片全球化,拯救了美國半導體 | 2024-11-15 19:55:34
最近發布
突發!TVB知名女星毫無預警宣佈與未婚夫分手,結束長達八年情 面對被黑,蘭姐強勢迴歸。小菲狀態好轉,發宣告。更多內幕揭曉! 中國男籃決戰日本隊,首發五人曝光,廣東隊大贏家,徐傑第一後衛 孫穎莎奪女單冠軍!採訪謙遜立足拼,劉國樑給中國選手頒獎笑開花 分析 馬威交易取消後的影響:湖人還有什麼選擇?只能等休賽期? 火箭vs猛龍前瞻:範弗裡特有望復出戰舊主,火箭欲終結六連敗 梅西轟動宏都拉斯!當地媒體:這是世紀體育盛事! 登記開啟!金中、29中、13中等校動了! 開年暴擊!南京又一家機構跑路了? TechInsights:AI PC未能提振筆記本市場 2024年僅增長5% 睡覺時突然腿抽筋,就是缺鈣?錯!還有這4個原因,別輕易忽視了 泡泡瑪特又贏麻了!此前被調侃是“境內最大的博彩公司” 再也不用扎手指!5億糖尿病患者有福了 傳《尼爾:機械紀元》續作、新《古墓麗影》今年公佈 有工作經驗的畫素畫師如何寫簡歷? 離譜!Xun被搶3條龍,JDG仍然獲勝!Peyz力挽狂瀾,WBG痛失好局 將耗死在國際空間站?59歲美滯留女宇航員求救:喪失重要身體機能 華為FreeClip耳機玫瑰金開售 開放式聆聽設計 CBA俱樂部杯-山西淘汰北控晉級4強 原帥18分 小紅書上移民的中產:曾經北京七套房, 羨慕海外一張床, 如今卻...... 不可抗力停課2天以上退一半保教費,佛山幼兒園收費新規釋出 紅棉襯醉美,2020番順醉美青餅評測 華為FreeClip耳夾耳機玫瑰金配色開售:1299元 64歲寧波老闆,跨界無數次,給員工發8億,即將擁有第三家IPO? 卡友資訊股東持股情況變動 廣州“城市合夥人”:城市與人才的雙向奔赴 有人說孫穎莎粉絲是飯圈文化的時候 卻有些人用真金白銀愛孫穎莎! 男生剪“短髮”髮型乾淨利落,試試這3款,剪完帥氣提升顏值! 7個臀部訓練最佳動作,打造迷人的蜜桃臀! 偉大的4-2!林詩棟奪冠:新科世界第1誕生、超越王楚欽,狂攬3冠 新疆完美了!新小外強於皮特森+黑根斯,承認補強大外良性競爭! 林詩棟奪男單冠軍!採訪大談不容易太謙遜,單獨拍照露出笑容! 國乒最新戰報!林詩棟第2局11-8,衝3冠王,梁靖崑救2局點仍輸球 替補奇兵!快船大將5記3分助隊贏球 哈登好幫手 爆冷!北控男籃吊打奪冠大熱門球隊,外援決定比賽的走向 官宣離任,胡明軒宣佈重要決定,廣東宏遠遺憾,杜鋒祝福 又一個賈德松!崔康熙看人很準,魯媒:卡約又要錯過中國聯賽了 劉國樑憔悴!黑眼圈很重,擋住蒯曼被提醒,孫穎莎王楚欽被裁判整 林詩棟逆轉梁靖崑奪冠,成就三冠王,綜合實力更加突出 CBA最新外援註冊資訊,遼籃4人,新疆補充新援,廣東男籃放棄萊斯 大滿貫收官獎金排名:林詩棟三冠60萬第1,孫穎莎第2王曼昱10萬第9 臺灣律師分析大S遺產劃分,S媽要錢得看汪小菲臉色,打臉光頭安排 臺媒曝大S家人鬆手,讓出撫養權給汪小菲,希望馬筱梅善待孩子 二線白酒暴雷,狼真的來了! 搭上比亞迪,自動駕駛獨角獸,利潤大增170%! 炸裂!外資吹響“加倉中國”集結號背後:科技格局重塑與資產重估 這波夢幻西遊副本積分兌換真是血虧,四賜福的山賊值得買嗎? 《星戰亡命之徒》高階美工又回到CDPR 開發《巫師4》 《哪吒2》登陸北美,首映禮現好萊塢!有觀眾哭花眼妝:特效超預期,買票靠搶 曝張蘭被封年損失近4億,麻六記絕地自救太壯觀,員工曬張蘭近況

©2024 時時頭條 版權所有

隱私政策 | 服務條款 | 聯繫我們