面對 Apple Vision Pro 大軍壓境,Meta 除了早前開始測試系統軟件版本 v67 引入像 Vision Pro 的空間視窗功能之外,昨日又再丟出震撼蛋針對 Vision Pro 的弱項,將在 Meta Quest 上推出 Meta AI MR 智能助理,不單能語音交談,還能「看得見」用家所見的景物來作答,揭示了未來 MR+AI 的廣泛應用潛力。
Meta 在去年 Meta Connect 上發表基於 Llama 大型語言模型的 Meta AI 人工智能助理,並首先應用在與 Ray-Ban 合作的第二代智能眼鏡上。到今年 4 月更升級為具備多模態功能的 Meta AI with Vision,為 AI 注入視力,可以根據眼前見到的景物來回答,例如翻譯眼前的文字,或者提供衣著建議等。
而昨日,Meta 就公布會在今年夏天將這人工智能功能注入 Meta Horizon OS。用戶不用動手,只要進入穿透模式,用語音就能向 Meta AI 查詢各種問題。Meta AI with Vision 更能透過 Bing 取得最新資訊。現時測試版 Meta AI with Vision 能在穿透模式下辨識現實世界的景物,但暫時就未能看到虛擬世界的景物。而用戶就可以用英語向 Meta AI 查詢。
Meta 發放了兩段影片,可以看到用戶邊準備旅行邊查詢 Meta AI 要帶備甚麼,又看著短褲向 Meta AI 詢問配搭甚麼衣服適合那條褲,甚至可以詢問 Meta AI 眼前見到甚麼景物、查詢天氣和推介當地的餐廳。
Meta 將會於下個月透過實驗模式,向美國和加拿大用戶發布 Meta AI with Vision 功能,現時未知到時能否透過 VPN 在香港安裝得到。另外,Meta Quest 2 亦不支援這個功能。
針對 Apple 弱項.揭示 MR 未來
Meta 表示大型語言模型使強大的虛擬助理變成可能,當這些虛擬助理嵌入智能眼鏡或 MR 頭顯等可穿戴裝置中時,將變得更加有用。而這科技將持續進化,並會透過定期軟件更新來提升體驗。本來 Meta Quest 就具備直觀的手勢控制功能,加上 Meta AI with Vision 後,相信將會愈來愈像鐵甲奇俠 Iron Man 裡的 Jarvis、Friday。
相比之下,Apple 在 AI 方面現在仍是起步階段,雖然今年內會加入 AI 功能,但仍然處於語音轉文字的輸入。現在 Meta 將多模態智能助理擴展至 Meta Quest,Vision Pro 要追上將面對更高難度。
靜雞雞預告廢棄語音指令
在發表 Meta AI 登陸 Meta Quest 的同時,Meta 又靜雞雞在新聞稿最後一句透露現有語音指令功能即將被廢棄,但詳情稍後才會公布。到底是否意味 Meta 將會用 AI 助理取代語音指令?