Meta首款AR眼鏡Orion終於亮相!
一年一度的年度盛會Meta Connect 2024上在加州Menlo Park舉辦。一如既往,扎克伯格又從Meta員工戴手銬的保險箱中小心翼翼地取出了憋了許久的大招——首款AR眼鏡Orion。據Meta介紹,每副眼鏡的生產成本大約1萬美元(約7萬人民幣),這可能也是史上最貴AR眼鏡。
Orion為分體式設計,採用波導方案設計,擁有厚重黑色邊框,重98g。該AR眼鏡能與Meta自研的肌電手環相適配,擁有手部跟蹤、眼部跟蹤、頭部追蹤等多種交互方式。
從演示視頻上來看,用户戴上Orion可以刷網頁、看短劇,甚至玩一些簡單的3D遊戲。當然,你也可以在Orion上聽音樂、接視頻電話。
不過,現階段的Orion 眼鏡僅用作演示和內部開發套件,大約僅生產1000副,並不對外正式開售。
這次Meta官方几乎沒有提任何有關Orion的參數信息,芯片、光學、續航均未涉及。小扎只是拉來一眾好友體驗這款AR眼鏡,為其站台。英偉達CEO黃仁勳在體驗這款AR眼鏡時,直言:“顯示很棒,追蹤很棒,色彩也很不錯。”
不過,彆着急驚豔,圈內一眾科技博主早已拿到了Orion進行深度體驗。
我們也進一步梳理了Orion詳細信息:
1、AR眼鏡採用分體式設計:Orion眼鏡本身(98g)、獨立計算單元、肌電手環;
2、基本硬件配置:7個攝像頭、定製芯片、碳化硅光波導鏡片、Micro LED微型顯示器;
3、成本:每幅Orion成本高達1萬美金,僅1000副、不發售;
4、Orion二代:Meta首款消費級AR眼鏡、鏡片更薄、非碳化硅光波導鏡片、分辨率更高;
此外,Meta還推出了Quest 3平價版Quest 3S,主芯片採用的是高通驍龍XR2 Gen 2芯片,其他基本配置與Quest 2相差不大,128G版本售價299.99美元,9月25日開售,10月15日上架。
Meta還展示了生成式AI如何與自家的社交全家桶相結合,並且推出Meta AI高級語音功能、AI視頻以及AI翻譯功能。
在大模型方面,Meta推出第一個能夠同時處理圖像和文本的開源模型Llama 3.2。該模型可以創建AI應用程序,例如提供實時視頻理解的AR應用程序、基於內容對圖像進行視覺搜索引擎或長文本分析。
發佈會結束後Meta股價一路上漲,截止發稿前,最高點漲至575.77美元/股。
01 碳化硅+Micro LED波導方案,擁有超大70度視場角
Meta最秀肌肉展現實力的部分,是Orion的光學設計,可以看出Meta用材用料相當捨得。
Orion採用衍射光波導設計,波導片選擇了碳化硅鏡片,重量更輕、更耐用,折射率高。Meta首席技術官Andrew Bosworth在談到這些鏡片時表示:“你無法想象產量有多低。”
並且,Meta選擇了Micro LED微型LED顯示器,從發佈會展示的圖片中,我們推測大概率採用的是三色合一的光機方案。
從視頻顯示效果來看,Orion眼鏡中間採用相當大的稜形四邊形波導片,較大的波導片能夠帶來更廣範圍的顯示區域。測評顯示,Orion擁有70度超大FOV,遠超業內常規波導類AR眼鏡25度FOV(視場角)水平。
02 分體式設計,採用定製化芯片
Orion採用的是分體式設計,這意味着該AR眼鏡還擁有一個單獨的計算單元,承擔主要的計算能力。Meta稱之為“可以忽略不計的冰球”。
具體而言,有關Orion位置跟蹤、手部跟蹤、眼部跟蹤以及一些圖形算法將會在眼鏡端運行。一些渲染和常規計算處理在控制器上運行,並將數據結果無線傳輸到眼鏡。
Meta提到Orion的眼鏡端採用了定製芯片。聯合黃仁勳鮮少站台的行為,有不少網友推測,這款定製芯片有可能是英偉達打造。同時,眼鏡端的輕質鎂框架可以快速散熱。
03 與肌電手環適配,支持四大交互方式
在交互方面,Orion可能是目前業內支持最多交互形式的AR眼鏡,可以支持眼動、頭動、語音以及手勢四大交互方式。
Meta專門為Orion開發了肌電手環。該手環主要採用了肌電圖 (EMG) 技術,採用高性能紡織材料,可以通過感知手腕的肌肉活動來追蹤微小的手指運動。
目前,腕帶可以識別幾種基本操作:用拇指捏住食指可選擇內容;捏住中指和拇指可調用或隱藏應用啓動器;用拇指在閉合的手掌上做出拋硬幣手勢可向上或向下滾動。
結合眼動交互的肌電手環,Orion主要用眼睛充當指針,而捏合手指充當點擊。這一點也是和蘋果相似的交互邏輯。
Meta 表示,該肌電手環不受眼鏡攝像頭的視野限制,用户在任何位置都可以進行滑動、點擊、滾動等操作。在兩年前的Connect大會上,Meta展示了一系列肌電手環的酷炫操作,其中,最炫酷的則是,AR眼鏡實現鍵盤“投影”,用户用肌電手環進行文本輸入。
04 採用7顆攝像頭,支持SLAM空間定位
據The Verge的記者介紹,鏡框內嵌有七個攝像頭,可以將虛擬物體固定在現實空間中,協助眼球和手部跟蹤,並讓 Meta 的 AI 助手瞭解您正在看什麼。Meta的這一攝像頭圍繞鏡框佈置的設計,與蘋果Vision Pro的設計異曲同工。
用户可以讓虛擬窗口保持打開狀態,轉過頭走開,只要眼鏡還在,當您用户來時,窗口仍然在那裏。這意味着Orion擁有SLAM空間定位功能,可以稱上真正意義上的AR眼鏡。
05 遊戲幾乎無延遲,與小扎對打乒乓球
在內容上,Orion目前的主要功能是結合Meta AI進行一些基礎的交互,玩一些簡單的AR 遊戲、實現免提視頻通話和多個虛擬屏幕同屏共享等功能。
比如説,The Verge的記者就和小扎當面來了一場3D版本的虛擬乒乓對決。(gif)兩位Orion用户需要掃描二維碼配對眼鏡,然後使用手勢跟蹤來控制球拍。“遊戲幾乎沒有延遲。”The Verge的記者説。
記者還通過Orion中的Meta AI識別擺放在桌子上的配料,製作冰沙。幾秒鐘後,它就正確地將標籤放在各類配料上,並在配料上方的窗口中生成冰沙的配方指南。
06 Orion二代將於未來幾年推出,或是首款消費級AR眼鏡
Meta透露,Orion的二代版本將於未來幾年推出,這可能是Meta首款消費級AR眼鏡,其價格應該與當今的手機和筆記本電腦相當。
據瞭解首款消費級AR眼鏡的鏡片不會採用碳化硅製成,視野也不會那麼大,但分辨率會更高。如果一切按計劃進行,鏡框厚度將只有現在Orion眼鏡的一半左右。
Orion產品負責人Rahul Prasad透露:“獲得更大的視野是一個科學問題。下一階段是工程問題,即獲得更高的分辨率、更高的亮度和更低的成本。
扎克伯格提到AR眼鏡必須很好,用户才想要會將其佩戴在臉上。AR眼鏡需要在用户不使用AR時,也能夠提供一些基礎服務。他還談到AR眼鏡的發展並非一蹴而就,不同的智能眼鏡將會起到不同的功能,像是Ray-Ban智能眼鏡適合一些輕應用的場景。
07 AI視頻、AI翻譯、AI高級語音,Meta AI打造內容創作工具箱
Meta與OpenAI接連上線了AI高級語音功能,可以幫助AI模型配上許多知名演員的聲音,用户可以選擇Dame Judi Dench、John Cena、Keegan Michael Key和Kristen Bell的聲音,與之交互。
發佈會上,扎克伯格與AI版Stevenson進行了對話。史蒂文森的AI助手回答了有關其創作過程的問題。同時,Meta AI還可以將西班牙語的視頻直接轉換成英語視頻。“與文本相比,用語音與AI互動是一種更好的方式。”扎克伯格説。
同時,Meta AI還助力Ray-Ban智能眼鏡的功能升級。現在,Ray-Ban智能眼鏡與AI結合後,用户可以直接藉助智能眼鏡記錄自己做菜過程,或者一鍵記錄自己的停車位置。
如果你在街上拿到了一張海報,也可以直接藉助智能眼鏡拍攝相關二維碼,或者一鍵撥打電話。如今,Ray-Ban智能眼鏡還支持了AI翻譯功能。用户可以藉助AI直接翻譯用户的話語。可以説,該功能直接為用户打造了一個同聲傳譯助理。
不過,在現場的演示過程中,Meta AI的翻譯似乎翻車,無法翻譯扎克伯格與西語講述者之間長時間對話。
扎克伯格説,Meta Ray-Ban智能眼鏡的對話功能越來越強,它們將能更好地記憶你所看到的內容。它們還將配備多模態人工智能,能夠實時為用户提供幫助。
08 AR眼鏡加持,Meta借生成式AI重回寶座
2024年,Meta憑藉生成式AI的突破性進展,成功逆轉了其元宇宙領域發展的困境,股價一路飆升,重返美股市值前十的寶座。作為AVR領域的領軍人物,Meta在Connect大會展示出的產品和技術,往往會成為業內矚目的焦點。
過往幾年以Quest系列為代表的頭顯一直是Meta Connect大會的主旋律,我們也看到了Meta在高端頭顯Meta Quest Pro、消費級頭顯Quest 3、Quest 3上做出不同探索。但今年,Meta終於在AR方向亮相了憋了許久的大招——首款AR眼鏡Orion。
與業內常見波導類的AR眼鏡相比,Orion用材相當捨得。其中,最為驚豔的是超大視場角,這也是Meta堆料展現了AR眼鏡天花板。不過,從現有視頻顯示來看,似乎仍然出現掉幀、顯示不清晰等情況。
此外,Meta還擁有其他AR廠商所不具備的強大AI底層能力。Ray-Ban智能眼鏡和AI的結合玩法,究竟會在用户中反饋如何?這或許將影響不帶顯示功能的智能眼鏡市場變化。
“我曾以為元宇宙在AI出現之前就能實現。”扎克伯格説:“命運的轉折很有趣,AI在元宇宙真正能夠以可普及前就先爆發。”
本文來源:硅兔君,原文標題:《Meta深夜炸場:首款天價AR眼鏡問世!真機上手,黃仁勳親自站台》