Meta Ray-Bans智慧眼鏡結合大型語言模型,金牌特務的萬能眼鏡已經快要成真

2023-12-25 31 12/25
Meta Ray-Bans智慧眼鏡結合大型語言模型,金牌特務的萬能眼鏡已經快要成真

全力押注元宇宙而未成的Meta,找到了新的試驗場——AI可穿戴裝置。12月12日,Meta和Ray-Bans合作的新產品——Meta Ray-Bans智慧眼鏡,開始推出多項AI功能:拍照、計算食物卡路里、辨識植物、翻譯等。

間諜電影裡常常出現的萬能眼鏡,正逐漸變成現實。Google眼鏡已死,蘋果眼鏡尚未開賣,但可穿戴裝置市場要比以往更加火熱——多虧AI的存在。

Meta Ray-Bans智慧眼鏡結合大型語言模型,金牌特務的萬能眼鏡已經快要成真

Meta眼鏡新功能:語音喚起,操作繁瑣但新奇

從媒體和祖克柏的試用來看,Meta Ray-Bans智慧眼鏡AI功能的表現似乎還不錯。

類似蘋果的語音助手Siri,眼鏡裡的AI需要依賴語音指令「Hey Meta」喚起。Meta CEO 祖克柏在IG上展示了一段使用影片。

畫面中,他先是從衣櫃裡挑選了一件襯衫,然後喊出「Hey Meta」,要求AI助手告訴他能搭配這件襯衫的褲子風格。AI助手透過語音進行回應,先是正確地描述這件襯衫為「深色條紋衫」,然後建議祖克柏穿深色水洗牛仔褲或其他純色褲子。

祖克柏還展示了AI助手的翻譯功能,並透過圖片展示了一些使用示例。

Meta Ray-Bans智慧眼鏡結合大型語言模型,金牌特務的萬能眼鏡已經快要成真

此外,在其他媒體的測試中,Meta Ray-Bans智慧眼鏡還展示了其他有趣的功能。

例如,在四包咖啡因含量被塗黑的茶包裡,眼鏡可以透過閱讀標籤,告訴佩戴者哪一包可能不含咖啡因。眼鏡還能夠辨識視線裡的植物、水果,媒體試用時精準率似乎不低。還可以擺出一些食材和佐料,然後讓眼鏡生成一份食譜。所有的對話,以及AI看過的照片,都儲存在與眼鏡配套的Meta View手機應用裡。

有記者表示,雖然需要頻繁喊出「Hey Meta」這句指令,但眼鏡的整體響應速度很快,而且很少出錯,可以把眼鏡當成一個隨時可以啟用的頭戴式Google搜尋引擎。

多模態AI 為可穿戴裝置賦能

早在今年9月接受媒體採訪時,祖克柏就透露過,Meta會在智慧眼鏡上推出多模態人工智慧功能。所謂的多模態,即支援文字、圖像、語音等多種形式的媒介輸入的人工智慧。雖然這些功能在桌機版的AI軟體已經很常見,但搬到眼鏡上,還是讓人感到相當新鮮。

據報導,Meta未來還計畫讓眼鏡能夠檢測人體的感官資料,進一步強化多模態能力。眼鏡上搭載的高通AI晶片目前似乎表現良好,Meta未來還計畫進一步對使用流程進行最佳化。Meta CTO Andrew Bosworth九月份曾表示,由於續航限制,智慧眼鏡現在必須要用語音來啟動,但未來迭代後可能會配備足夠低功耗的感測器,能夠智慧檢測需要用到AI的場景,自行啟動。

目前,Meta眼鏡已經上架銷售,售價為300美元,AI功能處於早期測試階段,僅向部分使用者開放。但值得指出的是,Meta也表示,會使用匿名資料來幫助改進眼鏡的AI服務,可能會讓許多關心隱私的使用者感到不適。

 

  • 延伸閱讀:史丹佛研究表明世界上最大的幾個人工智慧模型,包括Meta、OpenAI的資料來源都不是很透明
  • 延伸閱讀:MetaAI語音翻譯大模型Seamless登場,支援近100種語言同步口譯,還能保留說話人的韻律和語音風格
  • 延伸閱讀:Meta推出獨立AI圖像生成器「Imagine with Meta」,根據自然語言文字提示建立高解析度圖像