Facebook發(fā)布Ego4D項(xiàng)目成果:提供超3000小時(shí)的日常生活活動視頻

來源: cnBeta.COM
作者:vivian
時(shí)間:2021-10-16
16441
Facebook人工智能部門發(fā)布了關(guān)于其“Ego4D”項(xiàng)目的一些成果。這項(xiàng)研究與“9個(gè)國家的13所大學(xué)和實(shí)驗(yàn)室組成的聯(lián)盟”合作,共同收集了“2200個(gè)小時(shí)的戶外第一人稱視角視頻,其中有700多名參與者正在進(jìn)行他們的日常生活”。

據(jù)外媒報(bào)道,F(xiàn)acebook人工智能部門發(fā)布了關(guān)于其“Ego4D”項(xiàng)目的一些成果。這項(xiàng)研究與“9個(gè)國家的13所大學(xué)和實(shí)驗(yàn)室組成的聯(lián)盟”合作,共同收集了“2200個(gè)小時(shí)的戶外第一人稱視角視頻,其中有700多名參與者正在進(jìn)行他們的日常生活”。

ff0f22b747789e3.jpg在這項(xiàng)研究中,與Facebook AI合作的研究人員的目的是開發(fā)“從這個(gè)角度理解世界”*的人工智能,以便他們能夠“開啟一個(gè)沉浸式體驗(yàn)的新時(shí)代”。他們正在具體研究增強(qiáng)現(xiàn)實(shí)(AR)眼鏡和虛擬現(xiàn)實(shí)(VR)頭顯將如何“在日常生活中變得像智能手機(jī)一樣有用”。

*研究人員在這里指的是第一人稱視角。他們用第一人稱視角拍攝的視頻來工作,而不是通過視頻和照片來訓(xùn)練人工智能的正常視角:第三人稱視角。

研究人員為這個(gè)項(xiàng)目列出了五個(gè)"基準(zhǔn)挑戰(zhàn)",有效地展示了他們正在追蹤的內(nèi)容。要清楚的是:Facebook并沒有通過真實(shí)的現(xiàn)場設(shè)備來追蹤這個(gè)項(xiàng)目的數(shù)據(jù)--現(xiàn)在還沒有。這些都是通過Facebook AI為這個(gè)項(xiàng)目獲得的第一人稱視角視頻進(jìn)行追蹤。

-事件記憶:什么時(shí)候發(fā)生了什么?

-預(yù)測:我接下來可能會做什么?

-手和物體的操作:我在做什么?

-視聽日記:誰在什么時(shí)候說了什么?

-社會互動:誰在與誰互動?

根據(jù)Facebook AI的說法,他們對這一主題的研究與一個(gè)數(shù)據(jù)集合作,該數(shù)據(jù)集"就錄像的小時(shí)數(shù)而言"比其他任何數(shù)據(jù)集都要大20倍。正是通過Facebook AI的Ego4D項(xiàng)目公告,這一信息才得以公開。

有關(guān)這個(gè)項(xiàng)目的研究論文《Ego4D:Around the World in 3,000 Hours of Egocentric Video》已在arXiv發(fā)表。

立即登錄,閱讀全文
版權(quán)說明:
本文內(nèi)容來自于cnBeta.COM,本站不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。文章內(nèi)容系作者個(gè)人觀點(diǎn),不代表快出海對觀點(diǎn)贊同或支持。如有侵權(quán),請聯(lián)系管理員(zzx@kchuhai.com)刪除!
掃碼登錄
打開掃一掃, 關(guān)注公眾號后即可登錄/注冊
加載中
二維碼已失效 請重試
刷新
賬號登錄/注冊
個(gè)人VIP
小程序
快出海小程序
公眾號
快出海公眾號
商務(wù)合作
商務(wù)合作
投稿采訪
投稿采訪
出海管家
出海管家