Facebook為了讓未來成為現實。 Facebook 的首席研究科學家克里斯汀·格勞曼 (Kristen Grauman) 說:“在這個世界里,我們將擁有可穿戴設備,通過在適當的時間提供信息或幫助我們獲取記憶,這些設備可以使你我在日常生活中受益。” 她說,這項技術最終可以用來分析我們的活動,幫助我們找到放錯地方的物品,比如我們的鑰匙。科技會改變世界改變未來的。
Facebook 表示,它與 13 所大學和實驗室合作,招募了 750 人,在兩年內拍攝了超過 2,200 小時的第一人稱視頻。居住在英國、意大利、印度、日本、沙特阿拉伯、新加坡、美國、盧旺達和哥倫比亞的參與者拍攝了自己從事日常活動的視頻,例如運動、購物等等。他們使用了各種可穿戴設備,包括 GoPro 相機、Vuzix Blade 智能眼鏡和 ZShades 視頻錄制太陽鏡。
Facebook 研究人員將能夠請求訪問這些數據寶庫,該社交網絡稱這是世界上最大的第一人稱無腳本視頻集合。這個名為 Ego4D 的新項目讓我們一窺科技公司如何改進 AR、虛擬現實和機器人等技術,使其在我們的日常生活中發揮更大的作用。
Facebook 表示,作為新項目的一部分,它為研究人員創造了五個基準挑戰。基準測試包括情景記憶,因此您知道何時發生了什么;預測,讓計算機知道你接下來可能會做什么;以及手和物體操作,以了解一個人在視頻中正在做什么。最后兩個基準是了解誰在視頻中說了什么,什么時候說的,以及互動中的合作伙伴是誰。
幫助 AI 理解第一人稱視頻可能具有挑戰性,因為計算機通常從觀眾第三人稱視角拍攝的圖像中學習。當您錄制自己踢足球或乘坐過山車時,諸如運動模糊和來自不同角度的鏡頭等挑戰就會發揮作用。
Facebook 表示正在考慮將該項目擴展到其他國家。該公司表示,視頻片段的多樣化很重要,因為如果 AR 眼鏡正在幫助一個人做飯或洗衣服,那么 AI 助手需要了解這些活動在世界不同地區看起來可能有所不同。
Facebook 表示,視頻數據集包括在 9 個國家/地區的 73 個地點拍攝的各種活動。參與者包括不同年齡、性別和職業的人。
與 Facebook 合作的一些大學包括英國的布里斯托爾大學、美國的佐治亞理工學院、日本的東京大學和哥倫比亞的安第斯大學。
期待未來,科技改變生活。科技讓生活更美好。
fqj
-
Ar
+關注
關注
24文章
5095瀏覽量
169473 -
人工智能
+關注
關注
1791文章
47200瀏覽量
238269
發布評論請先 登錄
相關推薦
評論