股市投資 小副述文字一共二十個字小副述文字一共二十


基金ETF 小副述文字一共二十個字小副述文字一共二十


全球總經 小副述文字一共二十個字小副述文字一共二十


理財商業 小副述文字一共二十個字小副述文字一共二十


消費信用 小副述文字一共二十個字小副述文字一共二十


保險稅制 小副述文字一共二十個字小副述文字一共二十


房產生活 小副述文字一共二十個字小副述文字一共二十


 
Meta Orion 登場、黃仁勳親自開箱!Meta Connect 2024 有哪些焦點?
作者 36氪
收藏文章
很開心您喜歡 36氪 的文章, 追蹤此作者獲得第一手的好文吧!
36氪
字體放大


分享至 Line

分享至 Facebook

分享至 Twitter


Meta Orion 登場、黃仁勳親自開箱!Meta Connect 2024 有哪些焦點?

2024 年 9 月 26 日

 
展開

未來的眼鏡會長成什麼樣子?不知道有多少人設想過。和現在的體積差不多,導航時變成行動的 HDR,影片通話時對方的動態形象懸浮在空中,鏡片能顯示所有你需要的內容……反正就和達爾、鋼鐵人戴的那種差不多。

今天淩晨,Meta 發布的首款 AR 智能眼鏡 Orion,讓我們離這個理想中的產品更近了一點。雖說過去的幾年陸續有 AR 眼鏡發布,但共性也很明顯:要麽功能單一只是個行動投影儀,要麽體積笨重價格昂貴,完全不適合大眾市場。和先前的產品相比,Meta Orion 不厚重的外觀和集成的 AR 功能,讓大家再次看到了 AR 眼鏡落地的希望。

而且 Meta Connect 2024 作為發表會十周年的重要節點,祖克柏還帶來了其他新玩意兒:

Meta Orion 智能眼鏡驚艷登場,AR 體驗領先產業;

Meta Quest 3S 頭顯 MR 眼鏡發布,Quest 3 的「青春版」沒新意但更便宜;

Meta AI 繼續升級,助力頭顯硬體有更好的使用體驗;

Meta Ray-Ban 的 AI 新功能:即時翻譯、個性穿搭建議,還能幫你記車位

Meta 首個開源大模型 Llama 3.2 亮相,擁有多模態能力。

metaorion 內文圖1 發表會

AI +硬體是今年所有消費電子品繞不過去的話題,那 Meta 究竟是如何將自家的大模型與新品硬體相結合?萬眾矚目的 Meta Orion 智能眼鏡究竟長什麼樣子?我們一起來看看。

Meta 首款 AR 眼鏡驚艷登場!

在祖克柏的構思中,眼鏡應該是最佳的「未來派」設備。

在此之前,已經走入大眾市場並且取得了不錯戰績的聯名眼鏡 Ray-Ban Meta,成功驗證了市場對智能眼鏡的接受程度。

metaorion 內文圖2 聯名眼鏡

但這個產品,只能說完成了 Meta 目標的一半:Ray-Ban Meta 主要提供音樂、攝影和部分 AI 功能,簡單來說還是一個戴在眼睛上的傳統設備。

而被祖克柏稱為「無可挑剔」的完全體,也就是 Meta 首款 AR 智能眼鏡 Orion,秘密研發了十年,投入了幾十億美元,今天終於從保密箱中被取出,露出了廬山真面目。

對這款眼鏡的第一印象,自然是這個極其接近普通太陽眼鏡的外觀設計,馬上和市面上現有的「大老粗」競品拉開了不小差距。

因為眼鏡也必須要好看。

當然,這也是因為 Meta 並沒有選擇將所有的組件集成到一個眼鏡的形態上。Meta Orion 一共由三個部分組成:眼鏡本體,一個手勢追蹤腕帶,以及一個遙控器大小的「計算模組」,三者無線連接。

這種「分體式」的方案,加上機身採用了更輕的鎂材料,Orion 眼鏡本體實現了驚人的 98 克重量。作為對比,Snap(SNAP-US) 上週發布的全新 AR 眼鏡 Spectacles 重達 226 克。

上:Meta Orion;下:Snap Spectacle

眼鏡最核心的 AR 投射能力,Orion 在不少方面做到了「遙遙領先」。

Orion 的鏡片並非是玻璃顯示屏,而是碳化矽透鏡,鏡框上微型的投影儀會將光發射在波導中,而波導投射在透鏡上,從而顯示出具有不同縱深和大小的 AR 虛擬內容(祖克柏稱其為「全景圖」)。

據 The Verge 的測試,Meta Orion 的視場角高達 70 度,可能是產業內擁有最寬視野的 AR 眼鏡。

根據現有的演示影片,用戶可以戴著眼鏡打開多個 Meta Horizon App 窗戶進行多任務,或者用 Meta AI 對現實世界的事物進行識別、標注。

即使用戶的視角從這些窗戶上面移開,這些虛擬的投射會一直「存在」,靜候用戶的目光再次回歸。

至於投射的畫質和清晰度,用來看圖文不是問題,但你暫時不會想用這個眼鏡看電影。

Meta 擅長的社交能力也和 AR 眼鏡碰撞出了新的花樣,通話中的好友會以一個全息投影的形象出現在你的面前,不過目前還比較粗糙。

Orion 也有一個朝內的攝影機用於掃描佩戴者的臉部,產生一個即時的建模,用於和手機用戶的影片通話畫面。

交互方面,Meta Orion 支持眼動追蹤、手勢操控和 AI 語音操作,佩戴配套的腕帶能夠實現更精細的手勢操作。

這個腕帶可以識別一些手勢:拇指捏住食指可以選擇內容;捏中指和拇指可調用或隱藏應用程式啟動器;用拇指抵住合攏的手掌做出拋硬幣的手勢,即可向上或向下滾動,總體來說非常自然。

值得一提的是,腕帶還提供了觸覺回饋,讓你知道手勢有沒有被成功識別,解決了目前 MR 交互的一個痛點。

這個腕帶的原理是通過肌電圖,來讀取與手勢相關的神經訊號,The Verge 甚至評價它「有點像在讀心」。

圖源:The Verge

有了這個腕帶,用戶可以把目光當作 Orion 界面的指針,捏合當作點擊,整體體驗非常自然,更重要的是,如果要在大眾場合用 AR 眼鏡,不用再尷尬地對著空氣「發號施令」或者「指手畫腳」,雙手插兜也能完成交互。

在 Ray-Ban 眼鏡上已經初露鋒芒的 Meta AI,和 AR 也結合出了新玩法,現在能夠進一步和現實世界進行交互。

在實機體驗中,The Verge 用 Orion 快速識別、標注了桌上放著的食材,並讓 Meta AI 根據這些材料產生了一個奶昔的食譜。

雖然祖克柏表示,Meta Orion 是一款面向消費者打造的產品,但目前的 Orion 設備還是原型機,只面向部分開發者和體驗人員提供,其中包括老朋友黃仁勳。

Meta Quest 3S,平價版 Vision Pro?

祖克柏登場不到十秒,就公布了 Quest 3S 的價格,這在一眾電子產品的發表會中實屬罕見,不過還是得感嘆一句,開門見山、只講重點的感覺,真的很棒。

總體而言,Meta Quest 3S 其實是 Quest 3 的「青春版」, 128GB 起售價為 299.99 美元, 256GB 起售價是 399.99 美元。

從配置來看,Quest 3S 搭載了 Snapdragon XR2 Gen 2 處理器,也就是 Quest 3 的同款,而且也同樣支持手部追蹤。

看完發表會,我感覺比起 Quest 3S 這個命名,其實叫它 Quest 2 改良版會更合適。先前據消息指出,作為更加「CP值」的選擇,Quest 3S 還是使用了與 Quest 2 相同的透鏡,機身整體會比 Quest 3 更厚重一些。

雖然在硬體配置方面 Quest 3S 不及 Quest 3 ,但在軟體生態的體驗上,卻和老大哥基本持平,Quest 3S 同樣可以在 HorizonOS 中獲得豐富的娛樂以及辦公功能。

去年 Quest 3 發布後,評價一直褒貶不一,其中最被人詬病的是啟用影片透視後,延遲過高和畸變嚴重,祖克柏稱,經過了一年的優化改進,現在的體驗有了很大的升級,特別是在 VR 功能、手部追蹤和軟體適配這三個方面。

用戶現在可以在兩款產品上,把 2D 網頁直接轉變為沈浸式辦公,就像 Vision Pro 那樣,把在設備中打開的界面放在空間的任何位置。

另外,在 Quest 3S 上的劇院模式,可以把單獨的界面擴展成一個巨幕影院,螢幕範圍能擴充到整個空間里。沈浸式觀影在頭顯設備上已經不是什麼新鮮玩意兒了,能適配多少片源和平台,才是拉開各家產品體驗的核心。

Quest 3S 支持目前各大歐美主流的媒體平台,Netflix、YouTube 和 Amazon Prime 等都能使用劇院模式觀影。

電影和遊戲是 VR 頭顯的娛樂必備,在此基礎上的附加功能,往往也能體現出產品本身的性能,這次發表會還公布了 Quest 3S 的新功能——Hyperscale。

用戶通過手機掃描房間的輪廓細節,以及家具擺放的位置,接著就能在 Quest 3S 重新構建出一個接近 1 : 1 的覆原場景。

從發表會的演示來看,場景還原度真的不錯,毛邊和扭曲不是太多,以後線上沈浸式看房,或者足不出戶地遊玩博物館或者名勝古跡,又多了一個可以實現的平台。不過除此之外,場景覆原的實用性究竟還有哪些?要如何結合每個地區不同的情況將技術落地,是 Meta 和 Quest 今後需要回答的難題。

Meta 的全稱是 metaverse,即元宇宙。Facebook 當年改名 Meta 表明了祖克柏對新技術探索的決心,而 Meta 也成了最先一批向元宇宙進軍的科技巨頭。所以「元宇宙」也就成了每次 Meta 新品發布必提及的部分,儘管他們已經在這個領域碰了很多壁。

祖克柏在發表會上介紹,Meta Quest 3S 推出了沈浸式社交的增強功能,Quest 的用戶現在可以在設備中創建虛擬形象,和彼此一起通關遊戲,或者組隊進行健身,又或者去聽一場線上的演唱會。

隨著 Quest 3S 的發布,Quest 2 /Pro 也宣布徹底停產,另外 Quest 3 的價格也從 649 美元降至 499 美元,新產品將在 10 月 15 日後發貨。

Llama 3.2 發布

比起幾乎沒變化、甚至還減配的 Meta Quest 3S ,Meta AI 的新功能就被襯托得更有新意。

祖克柏在發表會上宣布,Meta AI 正式上線語音功能,用戶可以通過 Messenger、Facebook、WhatsApp 和 Instagram 向 Meta AI 提出問題或以其他方式聊天,並獲得模擬語音回覆。

不僅如此,AI 語音的音色還能自主選擇,你可以使用包括朱迪·丹奇、約翰·塞納、奧卡菲娜、克里斯汀·貝爾等名人在內的 AI 聲音。

祖克柏還在現場演示了語音功能,總體來說對話響應速度還挺快,回答的內容也比較準確,語音語調聽起來又向真人問答更近了一步,而且還能隨時打斷對話插入新的話題或問題。

雖說中間出現了幾次失誤,不過作為正在探索和發展中的技術這也正常,祖克柏本人多次也毫不避諱,就像他本人說的一樣:這是 demo 經常會出現的情況。

另外,通過 AI Studio 功能,用戶還能根據自身的需求、愛好等,自主創建相應的 AI 角色,它可以幫助我們產生表情包、提供旅行建議,當然也能進行日常的對話。

不過從效果來看,接下來的 AI 翻譯功能則更加實用。目前,搭載了 Meta AI 的終端,都能支持即時語音翻譯功能,發表會上的兩位發言人,通過佩戴 Meta Ray-Ban 完成了一次即時的跨語種(英語-西班牙語)對話。

Meta Ray-Ban 可以通過麥克風采集對方的語音,並迅速翻譯成機主的母語,雖說每種語言的翻譯響應速度都不算慢,但句子稍微長一點,中間等待的時間還是略顯尷尬,而且 Meta AI 有時候還會搶話。

另一個線上影片的語音翻譯效果會更上一層樓,比起上面的即時翻譯,我願稱之為「高階版翻譯功能」。Meta AI 可以把線上影片的語音翻譯成另一個語種的語音,更厲害的是,它能把原影片說話人的語氣、音色,甚至於不同國家讀英語時的口音都完美還原。

Meta AI 在發表會上一系列的更新功能,其實都有一個共同的驅動核心:Llama 3.2 。

今年七月份,Meta 才剛剛公布了 Llama 3.1 模型,簡單來說,超大杯 Llama 3.1 405B 是 Meta 迄今為止最強大的模型,也是全球目前最強大的開源大模型,更是全球最強的大模型。

沒想到短短兩個月 Llama 3.2 就來了。

Llama 3.2 是 Meta 的首個開源 AI 模型,包括兩個視覺模型( 11B 和 90B )和兩個輕量級的純文本模型( 1B 和 3B ),這意味著它具備了多模態的能力,也就是可以同時處理文本和圖像,其中輕量級的純文本模型可以直接在當地理解用戶輸入的內容。

依靠 Llama 3.2 全新的能力,許多搭載大模型的設備也有了更加廣泛的實用場景。除了上文提到的 AI 翻譯功能, 有了視覺能力的 Meta Ray-Ban 現在能更深入地協助人們的工作生活,日常起居。

你可以直接諮詢 Meta Ray-Ban 可以用酪梨做點什麼好喝的飲料,你甚至都不需要在句子里提到牛油果,直接用「這個」等代詞就行,因為它看得見。

不知道有多少人有過忘記車停在商場哪裡的情況,如果你也是忘記車位編號的常客,那現在 Meta Ray-Ban 就能幫你記下車位號碼,以便你忘記時隨時調取相應的資訊。

撥打海報上的號碼,掃描宣傳冊上的二維碼,幫你搭配日常穿搭……總之通過眼鏡上的攝影機,加上全新升級的視覺大模型等 AI 能力, Meta Ray-Ban 幾乎能出現在你生活的每個角落。

也正是因為這顆攝影機的存在,Be My Eyes 和 Meta 的這次聯姻才成為了可能。Be My Eyes 是一家通過即時影片和人工智慧,將盲人或視力低下的人,與視力正常的志願者和公司聯繫起來的公益平台,通過線上即時的影片通話,志願者/組織可以幫助智障人士解決眼前的困難。

技術的發展不僅在為絕大多數人的生活增值,也極大程度上彌補了特殊群體中,缺失的那一部分,從而讓所有人的生活都能更加方便,技術的意義也就在這裡展開。

下一代計算設備的曙光已至

雖然早已對 Meta Orion 眼鏡有所預期,但當祖克柏拿出真機的時候,還是給我們帶來了科技新品久違的「驚艷感」。

這種驚艷感不僅是因為 Meta 勾勒的未來藍圖足夠吸引,更是因為這個產品的實際效果非常接近願景,The Verge 在體驗過後的評價非常精辟:

它不是虛幻的海市蜃樓,也不是實際的產品。它介於兩者之間。

這也是 Orion 和許多 Meta 曾經探索過的奇思妙想不同之處:它不是一個難以走出實驗室的概念,而是 Meta 選擇「all in」的明日產品,是 AI 和 MR 的完美結合。

它是最佳的 AI 設備:可以看用戶所看,聽用戶所聽,能結合用戶的現實場景,因此能給出更有效的回答。

它也是終極的交互和聯繫方式:不需要局限於小螢幕,也不必借助厚重的頭顯,虛擬和現實世界彼此緊密交融,隨時可交互,處處是交互。

手機這種計算設備形態已經走到了生命週期的末尾,這已經是產業的共識;而下一代的計算設備,蘋果(Apple, AAPL-US)、Meta,甚至 OpenAI 都正在探索。

儘管還是原型機, Meta 給出的答卷 Orion 目前看來確實不賴,至於是否成為手機之後的下一個主流智能終端,還有很多未知數,但祖克柏對此倒是信心十足。

眼鏡和全息影像將會成為一種無處不在的產品。如果我們能讓世界上已經擁有眼鏡的人,都升級到擁有 AI 和 MR 的眼鏡,那麽這將成為世界歷史上最成功的產品之一,而且我認為它會走得更遠。

36氪》授權轉載

【延伸閱讀】

 
週餘
 
 
分享文章
分享至 Line
分享至 Facebook
分享至 Twitter
收藏 已收藏
很開心您喜歡 36氪 的文章, 追蹤此作者獲得第一手的好文吧!
36氪
分享至 Line
分享至 Facebook
分享至 Twitter
地圖推薦
 
推薦您和本文相關的多維知識內容
什麼是地圖推薦?
推薦您和本文相關的多維知識內容