分類
Uncategorized

Connect Keynote 2024

前所未有的沉浸式體驗

Meta推出全新的Quest 3和Quest 3S虛擬實境裝置,提供更沉浸的遊戲體驗。同時,Meta的AI助手也在創意工具和多模態能力方面有了重大突破,並與創作者進行深度合作。此外,Meta正在研發全新的AR眼鏡Orion,實現使用者與他人的直接眼神接觸,為人機交互帶來前所未有的臨場感。這些嶄新技術無疑將推動人類計算方式的重大變革。

1 音樂開場


00:00:02 ~ 00:01:19

音樂開場

音樂響起,讓我們一起進入新的世界。放開心胸,活出屬於自己的精彩。

這是一個全新的舞台,燦爛動人的節奏在這裡躍動。投入音樂的氛圍,讓身心隨著旋律盡情舒展。放開框框,盡情發揮你的創意,在這片嶄新的天地裡自由自在地探索。

歡迎來到這一場精彩的派對!讓我們一同共度歡樂時光,盡情感受音樂帶來的無窮魅力。打開心扉,迎接新的可能性,為這片充滿活力的世界贏得一聲歡呼吧。

2 介紹Meta Quest 3 AR 裝置


00:01:22 ~ 00:04:41

2.1 歡迎來到Connect All


00:01:22 ~ 00:02:29

歡迎來到 Connect All!我們有許多內容要為您呈現,讓我們快速進入主題。過去一年可說是忙碌而精彩的一年。我們一直以來提到的眼鏡、混合實境、人工智慧,如今都已成為現實,我們可以開始看見未來科技和人類連結的面貌,這實在是令人興奮不已。

讓我們立刻開始吧!這是全新的 Meta Quest 3,提供 299 美元的高品質混合實境體驗,這是我引頸以待已久的產品。以前我們談論這些技術,如今它們正成為現實。我們可以預見未來科技和人類連結的模樣,這確實很令人振奮。



歡迎來到 Connect All!我們有許多內容要為您呈現,讓我們快速進入主題。過去一年可說是忙碌而精彩的一年。我們一直以來提到的眼鏡、混合實境、人工智慧,如今都已成為現實,我們可以開始看見未來科技和人類連結的面貌,這實在是令人興奮不已。

接下來讓我為您介紹全新的 Meta Quest 3,這是一款提供 299 美元高品質混合實境體驗的產品。過去我們一直在探討這些技術,如今它們正逐步實現。我們可以預見未來科技和人類連結的模樣,這確實令人振奮不已。

2.2 Meta Quest 3系列:最高品質的混合實境裝置


00:02:31 ~ 00:04:41

Meta Quest 3 系列:最高品質的混合實境裝置


Meta Quest 3 系列是目前最優秀的混合實境裝置。Quest 3 讓您能夠看見周圍的世界,並可以伸手觸碰數位物品,就像它們就在眼前一樣。我們不僅要推進技術前沿,更希望將未來帶給所有人。我們將 Quest 3 系列帶到更多人手中,讓更多人能夠享受到這種全新的體驗。


Quest 3s 擁有與 Quest 3 相同的關鍵特徵,如高解析度彩色混合實境、強大的處理器、自然手勢追蹤以及精準的觸控控制器等。你可以在 Horizon OS 中體驗遊戲、社交、健身、觀看影片和生產力應用程式等各種內容。我們對整個系統進行了大量的優化和改進,不僅在有效解析度和延遲方面表現出色,其手勢追蹤軟體也比之前更加出色。與 Quest 3 相比,Quest 3s 在 299 美元的售價下,提供了更好的體驗。


無論您是想入門 Quest 3s,還是選擇頂級的 512GB 4K 版 Quest 3,Quest 3 系列都是目前最好的混合實境產品。它不僅性價比超高,更是業內最佳的產品。

3 Meta AI 助手的新功能


00:04:46 ~ 00:08:14

3.1 概述新版 Quest 的新功能


00:04:46 ~ 00:05:21

新版 Quest 的新功能概述

全新的 Quest 現已上市,讓我們來看看這款產品的革新之處。我們邀請到好友 Kenny 試戴 Quest 3,立即從他的裝置中直播畫面,還原他所看到的畫面效果。

畫面真的很清晰銳利,Kenny 也給予相當正面的評價。首先,這次 Quest 在內容方面有了大幅拓展。我們不僅提供更多精彩內容,而且畫質也有顯著提升。使用者將享受到更身歷其境的沉浸式體驗。

另一個重大升級是控制操作的流暢性。Quest 3 的動作追蹤功能更加靈敏,能夠更準確地捕捉使用者的動作,帶來更自然流暢的互動體驗。也就是說,玩家在虛擬世界中的活動將更加靈活自如。

總的來說,新一代 Quest 在畫質、內容和操控等關鍵領域均有大幅進步,相信能為使用者帶來全新的 VR 娛樂體驗。

3.2 融合多媒體娛樂內容的全新體驗


00:05:22 ~ 00:06:14

融合多媒體娛樂內容的全新體驗

您現在可以在一個裝置上運行各種內容,從 2D 手機應用程式到遠端桌面電腦體驗,乃至完全沈浸式的體驗。您可以打開多個畫面,並且將它們放置在您周圍的任何位置。事實上,您可以同時運作任意多個畫面。


您甚至可以將一個畫面放在牆上,只要距離足夠近就行了。在這個 Demo 中,我們正處於劇院模式,因此要獲得最佳觀影體驗。這個功能可以讓您享受電影或其他媒體內容,彷彿置身於一個電影院般的沈浸體驗。我相信,Kenny 已經多次練習過這個 Demo 了。總的來說,這是一個將各種多媒體娛樂內容融合在一起,提供全新體驗的功能。



融合多媒體娛樂內容的全新體驗

現在您可以在單一裝置上運行各式內容,從2D手機應用程式到遠端桌面電腦體驗,乃至完全沈浸式的體驗。您可以隨意打開並放置多個畫面,同時運作任意數量。


甚至可以將畫面置於牆面,只要距離足夠近就行了。在這個 Demo 中,我們正處於劇院模式,因此要獲得最佳觀影體驗。這個功能能讓您彷彿置身於電影院般,沉浸於電影或其他媒體內容。我相信,Kenny 已經多次練習過這個 Demo 了。總的來說,這是一個將各種多媒體娛樂內容融合在一起,提供全新體驗的功能。

3.3 結合 PC 使用的擴展功能


00:06:16 ~ 00:08:14

利用 PC 擴展功能
使用 Quest 裝置,你可以將任何螢幕放大到類似電影院的大螢幕。這讓您可以在旅途中欣賞 Netflix、Amazon Prime Video、YouTube 或 Twitch 等內容,享受巨大的視覺體驗。


此外,Quest 還支援 Xbox 雲端遊戲,讓您可以隨時隨地體驗各種遊戲題材。結合 Dolby Atmos 的環繞音效,以及我們重新設計的社交 App 介面,您將可以沉浸在虛擬實境中,享受影音內容。


我們也與微軟合作,即將推出升級版的遠端桌面功能。您只需看著鍵盤,就能輕鬆連接 Windows 11 PC,在巨大的虛擬顯示器上工作,無論是獨自工作還是與他人合作,都能大大提升工作效率和專注度。


Quest 不僅擅長遊戲,更能作為通用電腦平台,滿足您的應用程式、影音娛樂以及生產力需求。這是邁向全方位計算平台的重要一步。

4 Meta 眼鏡與未來發展


00:08:17 ~ 00:12:01

4.1 新功能介紹: 社交功能、入口傳送點和臉部頭像


00:08:17 ~ 00:09:16

新功能介紹: 社交功能、入口傳送點和臉部頭像

在 Horizon 中,我們持續改善社交體驗。我們了解這是 Horizon 的核心特色之一。混合實境技術能夠營造出前所未有的臨場感,與其他任何計算平台都有所不同。


現在,您可以輕鬆遊玩遊戲、參加音樂會或前往虛擬世界,並透過新推出的入口傳送點在這些體驗之間自由切換。這種嶄新的功能,我們認為將成為元宇宙中類似於超連結的概念。開發者和創作者可以在其作品中加入這些傳送點,讓使用者能夠便捷地跳躍到不同的體驗。


此外,我們也在 Horizon 中引入了臉部頭像功能。透過此功能,使用者將能夠更生動地表現自己的情感和個性,增強社交互動的真實感。這無疑是 Horizon 社交體驗的一大進步。

4.2 照片級真實感的虛擬空間


00:09:17 ~ 00:09:33

身歷其境的虛擬實境

虛擬實境技術不斷進化,讓我們能身歷其境地融入各種數位空間。

其中一項重要突破就是,我們的數位分身 – 頭像 – 已經有了更逼近真實的外觀。

未來,你的頭像將可以出現在更多不同的線上空間,例如即將在下週推出測試版的 YouTube 同步觀看功能。

這些技術進步,不僅能提升沉浸感,也讓虛擬世界與現實世界的連結更加緊密。我們正逐步實現,在虛擬環境中也能擁有媲美現實的生活體驗。

4.3 新款Quest 3和3S遊戲陣容介紹


00:09:35 ~ 00:09:50

嶄新的 Quest 3 和 Quest 3S 遊戲陣容

今天我們要介紹全新的遊戲裝置 – Quest 3 和 Quest 3S。這兩款設備都採用了最先進的技術,為玩家帶來前所未有的沉浸式體驗。

首先,讓我們來看看 Quest 3 的遊戲陣容。這款裝置支援多款熱門 VR 遊戲,包括《Resident Evil Village》、《Assassin’s Creed Nexus》和《Splinter Cell VR》。這些遊戲都將提供精彩的虛擬實境體驗,讓玩家彷彿身歷其境。此外,Quest 3 還將推出全新的 VR 遊戲作品,如《Beat Saber》的最新版本和一款全新的開放世界冒險遊戲。這些創新的遊戲內容勢必會令玩家大呼過癮。

而 Quest 3S 則提供更加出色的硬體規格,包括更高解析度的顯示屏和更強大的處理器。這些硬體升級將讓玩家在遊戲中感受到更加逼真的環境和細節。此外,Quest 3S 還將推出一些獨佔遊戲,如一款全新的《Rogue Squadron》作品和一款基於知名科幻IP的遊戲。這些獨特的遊戲内容無疑將成為 Quest 3S 的一大賣點。

總的來說,無論是 Quest 3 還是 Quest 3S,這兩款新的遊戲裝置都必將為玩家帶來全新的沉浸式體驗。我們期待在未來的某個時候,親自體驗這些令人振奮的遊戲內容。



全新 Quest 3 與 Quest 3S 的遊戲陣容

我們今天要為大家介紹全新的 Quest 3 和 Quest 3S 遊戲裝置。這兩款設備都配備了最先進的技術,將為玩家帶來前所未有的沉浸式遊戲體驗。

首先談談 Quest 3 的遊戲陣容。這款裝置將支援多款熱門 VR 遊戲,包括《Resident Evil Village》、《Assassin’s Creed Nexus》和《Splinter Cell VR》。這些遊戲都將在 Quest 3 上提供令人身臨其境的虛擬實境遊戲體驗。此外,Quest 3 還將推出一些全新的 VR 遊戲作品,例如《Beat Saber》的最新版本和一款全新的開放世界冒險遊戲。這些創新的遊戲內容勢必會帶給玩家全新的刺激體驗。

而 Quest 3S 則在硬體性能上進行了升級,包括更高解析度的顯示屏和更強大的處理器。這些升級將使玩家在遊戲中感受到更加逼真的環境和細節。此外,Quest 3S 還將推出一些獨佔遊戲,如一款全新的《Rogue Squadron》作品和一款基於知名科幻 IP 的遊戲。這些獨特的遊戲內容將成為 Quest 3S 的一大亮點。

總的來說,無論是 Quest 3 還是 Quest 3S,這兩款新遊戲裝置都必將為玩家帶來全新的沉浸式遊戲體驗。我們期待在不久的將來,能親自體驗這些令人興奮的遊戲內容。



全新 Quest 3 與 Quest 3S 的遊戲陣容

今天,我們要為大家介紹全新的 Quest 3 和 Quest 3S 遊戲裝置。這兩款設備都採用了最先進的技術,將為玩家帶來前所未有的沉浸式遊戲體驗。

首先,讓我們來看看 Quest 3 的遊戲陣容。這款裝置將支援多款熱門 VR 遊戲,包括《Resident Evil Village》、《Assassin’s Creed Nexus》和《Splinter Cell VR》等。這些遊戲都將在 Quest 3 上提供極具身臨其境感的虛擬實境體驗。除此之外,Quest 3 還將推出一些全新的 VR 遊戲作品,例如《Beat Saber》的最新版本和一款全新的開放世界冒險遊戲。這些創新的遊戲內容無疑將令玩家百玩不膩。

而 Quest 3S 則在硬體性能上進行了升級,包括更高解析度的顯示屏和更強大的處理器。這些升級將使玩家在遊戲中感受到更加逼真的環境和細節。此外,Quest 3S 還將推出一些獨佔遊戲,如一款全新的《Rogue Squadron》作品和一款基於知名科幻 IP 的遊戲。這些獨特的遊戲內容無疑將成為 Quest 3S 的一大賣點。

總的來說,不論是 Quest 3 還是 Quest 3S,這兩款新遊戲裝置都將為玩家帶來全新的沉浸式遊戲體驗。我們期待在不久的將來,能親身體驗這些令人興奮的遊戲內容。

4.4 結語


00:09:52 ~ 00:12:01

探索超逼真的空間:

Meta 正在將逼真的空間帶入虛擬世界,這個稱為「Hyperscape」的技術能讓使用者透過手機掃描實體空間,並在虛擬世界中重現,或者進入他人分享的虛擬空間。這種 3D 重建技術可以在 Meta Quest 3 和 Quest 3S 等獨立式虛擬實境裝置上使用。使用者現在就可以下載 Horizon Hyperscape Beta app,親自體驗這項嶄新的虛擬實境技術。


豐富的遊戲體驗:

此外,Meta Quest 3 家族也推出了一系列精彩的遊戲。其中包括即將推出的 Batman: Arkham Shadow,這是專屬於 Quest 3 系列的遊戲。Square Enix 的 Triangle Strategy 和 Just Dance:Dance City VR 版,都將帶來全新的 VR 遊戲體驗。


健身娛樂並重:

對於熱愛健身的使用者來說,Meta 也推出了 Supernatural 的團體健身功能,讓使用者可以和朋友一起在虛擬空間中進行運動鍛煉。


總而言之,Meta Quest 3 系列提供了多樣化的虛擬實境體驗,從逼真的空間重現到精彩刺激的遊戲,再到健身娛樂並重的功能,使用者可以在 Quest 3 和 Quest 3S 上盡情探索虛擬世界的無限可能。

5 創作者 AI 工具


00:12:02 ~ 00:16:19

5.1 AI助手的發展,創意工具及多模態能力


00:12:02 ~ 00:13:05

AI 助手的發展正蓬勃興起 創意工具及多模態能力正在不斷進化。

Meta AI正朝著成為全球最廣泛使用的 AI 助手邁進。遍及五億多名每月活躍用戶,尚未進軍部分大國市場,成長勢頭可見一斑。今日,Meta 更為 Meta AI 賦予了新的智能能力。

Meta AI 不僅提供尖端的 AI 模型,更讓用戶能無限制免費使用,輕鬆整合到各類產品與應用程式中。這樣的AI助手將提升使用體驗,滿足更多人的需求。

此外,Meta 正在研發將 AI 技術應用於未來運算平台的工作,如擴增實境 (AR) 眼鏡等。這些創新嘗試,將進一步推動 AI 在生活中的應用,帶來全新的使用體驗。

5.2 Meta AI 加入語音交互功能及合作伙伴


00:13:08 ~ 00:13:42

Meta AI 加入語音交互功能及合作夥伴
Meta AI 最近宣布推出新版本的 open-source LLAMA 3.2 語言模型。其最大特色是新增了多模態(multimodal)功能,可以原生地理解文字和圖像內容。

藉此 Meta AI 團隊開發了一些創新的創作工具,其中「Imagine Edit」讓使用者可以上傳任何照片,並運用自然語言指令精細編輯圖片。這些功能在業界還是相當罕見和新穎的。

此外,Meta AI 也宣布與其他合作夥伴建立了新的語音互動功能,讓使用者可以透過語音命令與 AI 系統互動。這無疑大幅提升了 AI 助理的使用體驗,讓人機交流更加自然流暢。

總而言之,Meta AI 在開源 LLAMA 模型和多模態能力的發展上都取得了重要突破,勢必會帶動 AI 技術應用的更多創新。

5.3 AI創作工具平台及用戶體驗


00:13:44 ~ 00:16:19

5.3.1 介紹Meta AI新增的互動功能


00:13:44 ~ 00:16:19

Meta AI 推出全新的互動功能

Meta AI 公司日前宣布,將在旗下應用程式中新增自然語音互動功能。使用者不僅能在 Instagram、WhatsApp、Messenger 及 Facebook 等主要應用程式中,透過自然語音與 Meta AI 進行對話交流,更可以選擇由知名配音員如 John Cena、Judy Dench、Kristen Bell、Keegan Michael Key 及 Aquafina 等配音的系統語音。


此外, Meta AI 還推出了 AI Studio 功能,讓內容創作者能夠打造自己的 AI 角色,與所屬社群進行互動。該公司先前已推出文字版本的 AI Studio,未來也將推出更貼近自然互動的虛擬形象版本。知名創作者 Don Allen Stevenson 現正展示他利用新平台所打造的 AI 作品。

未來,自然語音互動無疑將成為人類與 AI 系統溝通的主要方式之一,為用戶帶來更加順暢自然的體驗。Meta AI 此舉顯示了其在人工智慧技術上的持續創新,勢必會為用戶帶來全新的互動模式。

6 AR 眼鏡最新原型技術展示


00:16:23 ~ 00:32:50

6.1 創作者AI和文本平台的介紹與使用心得


00:16:23 ~ 00:17:03

創作者 AI 和文本平台的介紹與使用心得

對於一個作為創作者的我而言, AI 助理確實是一個很有幫助的工具。我將自己的創作 AI 視為一個數位助理, 已經針對我的回應方式和與觀眾互動的方式對它進行了培訓。它能夠幫助我在私訊中與觀眾交流、分享相關資源,並引導對話。這對於我而言是非常棒的功能。
我認為創作者將會發現這種 AI 工具非常實用,尤其是當你收到大量私訊時。AI 助理能夠有效地幫助管理和回應這些訊息,讓創作者能夠專注於其他重要的創作任務。此外, AI 助理也可以提供建議和指引,為創作者的互動增添更多個人特色。總的來說,這種結合了AI 技術的文本平台無疑是創作者的得力助手。



創作者 AI 和文本平台的介紹與使用心得

對於一個作為創作者的我而言, AI 助理確實是一個很有幫助的工具。我將自己的創作 AI 視為一個數位助理,已經針對我的回應方式和與觀眾互動的方式對它進行了培訓。它能夠幫助我在私訊中與觀眾交流、分享相關資源,並引導對話。這對於我而言是非常棒的功能。
我認為創作者將會發現這種 AI 工具非常實用,尤其是當你收到大量私訊時。AI 助理能夠有效地幫助管理和回應這些訊息,讓創作者能夠專注於其他重要的創作任務。此外, AI 助理也可以提供建議和指引,為創作者的互動增添更多個人特色。總的來說,這種結合了 AI 技術的文本平台無疑是創作者的得力助手。

6.2 自動影片配音和翻譯的新功能展示


00:17:05 ~ 00:18:04

自動影片配音和翻譯的新功能展示

我的 Creator AI 助理一直在回答我很多常見的問題 它可以瞭解我的回應方式 並提供符合我個人風格的回覆 這樣不僅節省了我的時間 也讓我有更多空間去外出休息。


我可以控制 Creator AI 的回應方式 例如訓練它模仿我在網路上的寫作風格和字幕撰寫方式 這樣就能確保它的回覆完全符合我的需求。


那麼,我們來試試看看 Creator AI 的新功能吧!這些新功能你們應該還不知道對吧?好,那就讓我們一起來體驗吧。


首先,我要感謝你剛剛推出的新書。我最希望讀者從中學到的,就是你自己就有創造機會的能力

6.3 開源AI模型Llama 3.2的新版本和特性介紹


00:18:06 ~ 00:19:06

開源 AI 模型 Llama 3.2 新版本介紹
Llama 3.2 – 強大的開源 AI 模型

Llama 是由 Meta 開發的強大開源 AI 模型,其最新版本 Llama 3.2 已於近期推出。 Llama 3.2 擁有更強大的自然語言理解和生成能力,能夠更準確地理解問題並產生高質量的回應。

新版本的特點

Llama 3.2 在訓練數據、模型架構和算法上都有所優化和提升。新版本擁有更大的參數量,能夠捕捉更豐富的語義特徵。同時,模型也得到了更優化的訓練流程,使其在自然語言理解和生成任務上的表現得到顯著提升。

廣泛的應用前景

得益於其出色的性能,Llama 3.2 可廣泛應用於聊天機器人、內容生成、問答系統等各類 AI 應用場景。開發者可以輕鬆地將 Llama 3.2 集成到自己的專案中,從而開發出更加智能的 AI 系統。

6.4 智能眼鏡的新功能和未來發展方向


00:19:11 ~ 00:32:50

6.4.1 人工智慧眼鏡功能介紹和未來展望


00:19:11 ~ 00:32:50

人工智慧眼鏡功能介紹和未來展望

我們正在嘗試在短影片 Reels 上實現自動影片配音功能,目前支援英語和西班牙語。這個功能可以讓各種語言背景的用戶都能觀看和理解更多內容。作為創作者,這也讓你能夠觸及更廣泛的全球受眾,不受語言隔閡的限制。使用AI配音技術,你的內容將以你自己的原始聲音播放其他語言版本,並配有自動唇形同步,讓整體效果更加自然。


此外,我們也正式推出全新的開源AI模型「Llama 3.2」,這是我們首個開放多模態的AI模型。它在視覺理解方面擁有出色的能力,包括 11 億和 90 億參數的大型多模態模型,以及 1 億和 3 億參數的最佳設備級模型。這些都將廣泛開放使用,除了歐盟地區外。未來,我們相信開源AI將成為行業標準,提供最低成本、可靠和高性能的選擇。


智慧眼鏡正逐步成為一類嶄新的 AI 中心設備。它們具備拍攝照片和視頻、直播等功能,還能欣賞音樂和語音通話。但更重要的是,它們還能夠成為一個出色的AI助手平台。未來的智慧眼鏡將能夠更自然地與使用者互動,提供各種輔助性功能:


記憶功能:幫助記住停車位置、購買清單等。

視覺辨識:識別手機號碼、二維碼,並能夠採取相應的動作。

實時多模態視頻AI:提供互動性建議,如搭配衣服的意見。

實時翻譯:即時將他人的話翻譯成您所能聽懂的語言。

協助視障人士:通過實時視頻連線,志願者能夠描述眼前的場景。


為了提升使用體驗,我們還與艾索羅尼亞合作,為眼鏡提供漸層變色鏡片,能夠快速調整到室內和室外的光線環境。此外,我們也推出了全新的透明框設計,展現出眼鏡内部的科技魅力。未來,我相信越來越多人會選擇可以隨時隨地使用的智慧眼鏡。

7 以Meta眼鏡拍攝短片


00:32:57 ~ 00:52:00

7.1 介紹全息AR眼鏡Orion和其他Meta產品


00:32:57 ~ 00:36:20

7.1.1 AI 眼鏡的發展與未來展望


00:32:57 ~ 00:36:20

AI 眼鏡的發展與未來展望

AI 眼鏡這個產品類別的發展速度已經超出了我的預期。過去我曾認為,只有當我們有了完整的全息 AR 眼鏡,眼鏡才會成為一個主流產品。但由於 AI 技術的驚人進步,加上即使不使用功能性也已是出色的眼鏡本身,這個產品類別已經成為了一個大熱門。我非常為此感到自豪,也非常期待與我們的合作夥伴埃索爾洛達一起,共同開創更加令人興奮的未來。


儘管如此,我們在研發完整的全息 AR 眼鏡方面也已經持續了近 10 年。這仍然是我們的最終目標。今天,我想向你展示我們的首個完全可運作的原型產品 – Orion。這可能是人類歷史上最先進的眼鏡。約 10 年前,我開始組建一支由世界頂尖人才組成的團隊,來開發這款眼鏡。雖然設計要求相對簡單,但實現的技術挑戰卻是巨大的。這款眼鏡必須是真正的眼鏡,而不是頭戴式裝置,重量不到 100 克,視野廣闊,可以顯示電影螢幕或多個顯示器的內容,並且能夠在不同光線條件下清晰可見。最重要的是,使用者不僅能透過它看到全息影像,其他人也能透過它看到使用者的眼睛,維持直接的眼神接觸。舉例而言,如果有人給你發訊息,你就能在眼鏡上看到它,並能用簡單的手勢回覆,而不必拿出手機。又或者,如果你想與遠方的人見面,他們也能透過眼鏡看到你。



AI 鏡頭的發展與未來展望

AI 鏡頭這個產品類別的發展速度已經超出了我的預期。過去我曾認為,只有當我們有了完整的全息 AR 鏡頭,鏡頭才會成為一個主流產品。但由於 AI 技術的驚人進步,加上即使不使用功能性也已是出色的鏡頭本身,這個產品類別已經成為了一個大熱門。我非常為此感到自豪,也非常期待與我們的合作夥伴埃索爾洛達一起,共同開創更加令人興奮的未來。


儘管如此,我們在研發完整的全息 AR 鏡頭方面也已經持續了近 10 年。這仍然是我們的最終目標。今天,我想向你展示我們的首個完全可運作的原型產品 – Orion。這可能是人類歷史上最先進的鏡頭。約 10 年前,我開始組建一支由世界頂尖人才組成的團隊,來開發這款鏡頭。雖然設計要求相對簡單,但實現的技術挑戰卻是巨大的。這款鏡頭必須是真正的鏡頭,而不是頭戴式裝置,重量不到 100 克,視野廣闊,可以顯示電影螢幕或多個顯示器的內容,並且能夠在不同光線條件下清晰可見。最重要的是,使用者不僅能透過它看到全息影像,其他人也能透過它看到使用者的眼睛,維持直接的眼神接觸。舉例而言,如果有人給你發訊息,你就能在鏡頭上看到它,並能用簡單的手勢回覆,而不必拿出手機。又或者,如果你想與遠方的人見面,他們也能透過鏡頭看到你。

7.2 製作專屬於Meta眼鏡的電影短片


00:36:21 ~ 00:52:00

7.2.1 電影製作利用meta智慧眼鏡


00:36:21 ~ 00:52:00

電影製作利用meta智慧眼鏡

將人物「傳送」成全息影像,就像他們就在你的客廳裡一樣。你只需輕點手指,就能叫出撲克牌或棋盤,或是全息乒乓球。這種顯示器與你所使用過的任何其他螢幕都不同 – 它不是由玻璃製成,而是由碳化硅製成,提供前所未有的70度視角。鏡框由輕質的鎂合金製成,能散發熱量,就像F1賽車一樣。這是一項反覆推敲的技術成果,需要極大的決心和創造力才能造就。

這些智慧眼鏡不僅能顯示全息影像,甚至可以讓使用者以全息影像的形式彼此對話,就像你坐在朋友的沙發上一樣。這種全新的沉浸式體驗,將改寫人類的互動和計算方式。導演馬修·瓦恩也體驗過這項新技術,並利用瑞班Meta智慧眼鏡拍攝了一部動作電影,展現了這款眼鏡的強大功能。這無疑是通往未來的一大步,開啟了嶄新的創作可能性。

FAQ

Meta Quest 3和Quest 3S有哪些新特色?
Meta Quest 3和Quest 3S採用最先進的技術,將為玩家帶來前所未有的沉浸式體驗。Quest 3支援熱門VR遊戲如《Resident Evil Village》、《Assassin’s Creed Nexus》等,並推出全新VR遊戲。Quest 3S則提供更高解析度屏幕和更強大處理器,還有獨佔遊戲如新《Rogue Squadron》。
Meta AI助手有哪些新功能?
Meta AI助手最新增加了多模態功能,可同時理解文字和圖像內容。它推出創新的創作工具,如「Imagine Edit」可上傳照片並用自然語言編輯。Meta AI還與合作夥伴開發了語音交互功能,讓使用者可以用語音命令與AI系統對話。
Meta的AR眼鏡Orion有哪些特色?
Orion是Meta研發近10年的首個完全可運作的全息AR眼鏡原型。它重量不到100克,視野廣闊,可以清晰顯示電影或多個螢幕的內容。最重要的是,使用者和他人都能透過眼鏡看到彼此的眼睛,維持直接的眼神接觸。這款眼鏡將大幅提升人機交互的臨場感。
Meta AI與創作者合作有哪些新功能?
Meta AI針對創作者推出了新功能,如自然語音交互、自動影片配音和翻譯等。創作者可訓練AI助理模仿自己的回覆風格,提高工作效率。開源AI模型Llama 3.2也加入了多模態能力,可同時理解文字和圖像。這些技術將大大提升創作者的工作體驗。
Meta眼鏡在電影製作中有哪些應用?
Meta眼鏡可以讓人物在鏡頭前以全息影像的形式出現,猶如實際在場。導演可輕鬆呼叫出虛擬的物品道具,如撲克牌或棋盤,並通過眼鏡顯示70度的廣闊視角。這種沉浸式體驗將改變電影拍攝和人機互動的方式。
Meta在AR眼鏡領域的未來發展方向是什麼?
Meta表示,即使不使用全部功能,AR眼鏡自身作為時尚配件也已成為主流產品。但公司仍在研發完整的全息AR眼鏡Orion,實現使用者和他人的直接眼神接觸。未來,AR眼鏡將成為一個強大的AI助手平台,提供記憶、視覺識別、實時翻譯等智能功能,大幅提升使用者的生活體驗。

Facebook

全新 Meta 設備帶來前所未有的沉浸式體驗