臉書(shū)首席科學(xué)家Yann LeCun:實(shí)現(xiàn)AI缺的是這些!

挑戰(zhàn)


我們可以對(duì)機(jī)器進(jìn)行端到端的訓(xùn)練,來(lái)完成特定的任務(wù),feeding 原始的 inputs,就會(huì)自動(dòng)給出 outputs。機(jī)器學(xué)習(xí)這個(gè)任務(wù)的過(guò)程是端到端的學(xué)習(xí)過(guò)程。通過(guò)這種方式機(jī)器,計(jì)算機(jī)能更好地了解這個(gè)世界。

經(jīng)網(wǎng)絡(luò)是非常大的,只有在非常強(qiáng)大的計(jì)算機(jī)上才可以運(yùn)用,需要有 GPU 加以輔助。

在深度學(xué)習(xí)變得比較普遍之前,我們首先要確保這樣的一些系統(tǒng)可以用于這些情況,比如一個(gè)例子是我們?cè)?2009 年、2010 年在紐約大學(xué)合作的一個(gè)實(shí)驗(yàn),可以看到它可以識(shí)別馬路上的建筑、天空以及路上的車(chē)和人等等,這個(gè)在當(dāng)時(shí)并沒(méi)有被稱(chēng)為最好的系統(tǒng)。再過(guò)幾年之后,越來(lái)越多人相信深度學(xué)習(xí)是可以奏效的,可以發(fā)揮作用的。



在這里大家可以看到這個(gè)系統(tǒng)可以識(shí)別電腦、酒杯、人、桌子,也可以數(shù)出來(lái)到底有多少,而且也可以識(shí)別出道路、汽車(chē)。如果五年之前問(wèn)系統(tǒng)這些問(wèn)題的話,我們當(dāng)時(shí)可能認(rèn)為需要 10-20 年時(shí)間才能達(dá)到今天呈現(xiàn)的效果。

這也是 Facebook 所做的一些研究,叫做 Detectron。大家可以下載上面的代碼,它可以探測(cè) 200 多種不同的類(lèi)別,這也是 Facebook 在 AI 方面的一些研究,我們不僅僅發(fā)布了一些論文,同時(shí)連代碼也都發(fā)布出來(lái)了,這樣的話世界各地都可以更好的熟知這種技術(shù)。


當(dāng)然利用的這樣的技術(shù)不僅僅可以進(jìn)行識(shí)別圖像,面部識(shí)別,也可以識(shí)別人的行動(dòng),也可以用來(lái)翻譯,這是 Facebook 在加州所做的研究(FairSeq)。我們可以用這個(gè)系統(tǒng)進(jìn)來(lái)行翻譯的工作。


我剛才講到每天都會(huì)有一些新的應(yīng)用發(fā)布,而深度學(xué)習(xí)的廣泛應(yīng)用也進(jìn)一步推動(dòng)科學(xué)方面的研究。在接下來(lái)幾年里深度學(xué)習(xí)會(huì)發(fā)生更大的革命。

接下來(lái)為大家舉一個(gè)例子,這段視頻表現(xiàn)出來(lái)的是一種加速過(guò)程,它可以訓(xùn)練車(chē)去進(jìn)行駕駛,而且可以調(diào)整車(chē)輪的方向。這樣可以讓車(chē)自己去進(jìn)行駕駛,而不需要有人去進(jìn)行校正。


我們通過(guò)研究可以實(shí)現(xiàn)這樣的一種編程,可以利用這樣的系統(tǒng)或者培訓(xùn)系統(tǒng),來(lái)完成某一個(gè)具體的任務(wù)。

這是幾年前所開(kāi)展的工作,是由 Facebook 和紐約大學(xué)一起合作做的項(xiàng)目。這個(gè)項(xiàng)目是訓(xùn)練模型,讓它能夠回答相關(guān)的問(wèn)題。在自然語(yǔ)言處理過(guò)程中,也可以看到人工神經(jīng)網(wǎng)絡(luò)是動(dòng)態(tài)的,在不斷變化的。

這是另外一個(gè)例子,如果你要建立一個(gè)能夠回答復(fù)雜問(wèn)題的系統(tǒng),比如說(shuō)關(guān)于圖像的復(fù)雜問(wèn)題等。為了回答這個(gè)圖片是不是有更多的立體形狀,之后我們就會(huì)讓系統(tǒng)來(lái)進(jìn)行計(jì)算。比如說(shuō)這里有多少是方形體,或者有多少顏色,最后告訴你具體的答案是什么。通過(guò)這么做我們可以建立起一個(gè)端到端的解答的途徑,而且也允許你提出更多新的問(wèn)題。根據(jù)你輸入的數(shù)據(jù)不同,它會(huì)有所變化。
大家看到這里是我們最近開(kāi)發(fā)所得到的一些深度學(xué)習(xí)最新的成就,之后我們來(lái)看一下關(guān)于 AI 有沒(méi)有我們觸及到的。

機(jī)器學(xué)習(xí)需要常識(shí)

有時(shí)候讓機(jī)器學(xué)習(xí)很長(zhǎng)時(shí)間才能玩游戲。所以在核心功能方面,現(xiàn)在確實(shí)還沒(méi)有觸及到。但這些機(jī)器是能做到的,只是我們還沒(méi)有挖掘出來(lái)。我們也可以對(duì)機(jī)器本身進(jìn)行更深入的訓(xùn)練,比如我們要讓系統(tǒng)進(jìn)行成千上萬(wàn)次的訓(xùn)練之后,它們才能夠進(jìn)行學(xué)習(xí)。

有些學(xué)習(xí)它是與力學(xué)相關(guān)的,但是在實(shí)際的生活當(dāng)中不可能實(shí)時(shí)進(jìn)行,所以我們只能夠進(jìn)行模擬,但它也需要我們進(jìn)行很多的嘗試才能夠讓機(jī)器學(xué)到。

嬰兒們是怎么學(xué)習(xí)的呢?比如就像右下角這幅圖向他們所展示的,六個(gè)月以下的嬰兒可能不太了解物理運(yùn)動(dòng),可當(dāng)他們滿(mǎn)了八個(gè)月之后,他們已經(jīng)知道自由落體這個(gè)動(dòng)作了。

所以像右下角的這個(gè)小女孩非常了不起,我的一位朋友她給我們展示了嬰兒怎么學(xué)會(huì)一些概念,而且他們也能夠了解一些最基本的物理原理,這是他們?cè)谏钪凶畛鯇W(xué)到的一些概念,這是憑借人們常識(shí)獲得的,嬰兒們所學(xué)會(huì)的是就是一些常識(shí)。

另外我們向動(dòng)物展示這樣的情景,比如大家看一下這個(gè)大猩猩,它們?cè)谟啄甑臅r(shí)候由培訓(xùn)員給它們進(jìn)行展示一些東西,所以大猩猩面對(duì)這樣的魔術(shù)會(huì)笑出來(lái),而人們會(huì)把這當(dāng)做世界最初的原型。

但我們希望機(jī)器能夠建立一些樣本,使得系統(tǒng)運(yùn)行,最終機(jī)器就能進(jìn)行一些預(yù)測(cè),像人一樣有效運(yùn)行。我們有這樣的監(jiān)督或者學(xué)習(xí)就能夠使得機(jī)器得到訓(xùn)練和規(guī)劃,這是我們所需要建立的一個(gè)系統(tǒng)。

不管下次的變革出現(xiàn)在哪里,我覺(jué)得它們應(yīng)該是自我監(jiān)督或者無(wú)監(jiān)督學(xué)習(xí),而且在這樣的變革當(dāng)中也會(huì)出現(xiàn)一些常識(shí)性的學(xué)習(xí)。





關(guān)于技術(shù)監(jiān)督的趨勢(shì)很顯然是不斷的弱化,甚至監(jiān)督會(huì)消失,這就會(huì)導(dǎo)致出現(xiàn)一些新理論的產(chǎn)生,比如新語(yǔ)言,或者是一些新的并行文本,我相信之后應(yīng)該有多維度的可能性??赡軙?huì)出現(xiàn)一些新框架,包括了一些動(dòng)態(tài)影像。我們會(huì)和微軟,和亞馬遜會(huì)進(jìn)行更多合作,我們也會(huì)不斷進(jìn)行開(kāi)源。
相關(guān)推薦
7月20日,亞太廣播發(fā)展機(jī)構(gòu)(AIBD)第35次年會(huì)暨第8次全體會(huì)議在斐濟(jì)楠邊開(kāi)幕。中央電視臺(tái)選送的紀(jì)錄片《水問(wèn)》獲得AIBD2009年電視大獎(jiǎng)---水源問(wèn)題最佳電視紀(jì)錄片獎(jiǎng)。中央電臺(tái)選送的《農(nóng)村婦女健康教育服務(wù)》節(jié)目獲得AIBD2009年廣播大獎(jiǎng)---最佳健康關(guān)懷教育類(lèi)廣播節(jié)目獎(jiǎng)。斐濟(jì)總理姆拜尼馬拉馬出席大會(huì)開(kāi)幕式并在頒獎(jiǎng)儀式上為獲獎(jiǎng)?wù)哳C獎(jiǎng)。
北京時(shí)間5月9日消息,Napster聯(lián)合創(chuàng)始人、Facebook首任總裁西恩帕克(SeanParker)的最新產(chǎn)品社交視頻聊天服務(wù)Airtime將于6月5日正式啟動(dòng)。帕克與其在Napster的合作伙伴肖恩范寧(ShawnFanning)已經(jīng)為該項(xiàng)目募得830萬(wàn)美元的支持。至于Airtime的具體功能目前尚不得知。據(jù)了解,該產(chǎn)品是受到隨機(jī)視頻聊天網(wǎng)站Chatroulette的啟發(fā),Airtime在其網(wǎng)站上就明確表示“Airtime是一家實(shí)時(shí)社交視頻公司”。另有報(bào)道稱(chēng),Airtime將專(zhuān)注于移動(dòng)終端領(lǐng)域,由此引發(fā)外界猜想,Airtime將可能發(fā)展為視頻版的Instagram。