尚待解決的DL問題

　　一個(gè)經(jīng)常提到的問題是如何將訓(xùn)練后的深度學(xué)習(xí)系統(tǒng)整合進(jìn)應(yīng)用于現(xiàn)實(shí)世界的機(jī)器人產(chǎn)品，不論是家用機(jī)器人還是自動(dòng)駕駛汽車。絕大部分講者認(rèn)為，將測試中的每一個(gè)可能情形列舉出來是不可能的，因此必須設(shè)定一些標(biāo)準(zhǔn)的故障容差數(shù)據(jù)集。Scheirer將容差與工廠里依靠統(tǒng)計(jì)模型進(jìn)行測試作類比。NicholasRoy則認(rèn)為基于模型的方法更好。

　　WalterScheirer從數(shù)據(jù)的角度討論了CNN魯棒性低的問題。CNN顯然適用于單個(gè)圖像分類任務(wù)，但魯棒性低有時(shí)候確實(shí)是個(gè)問題。Scheirer借用心理物理學(xué)(Psychophysics)評(píng)價(jià)神經(jīng)網(wǎng)絡(luò)的方式，測試識(shí)別模糊圖像和遮擋問題。結(jié)果得到了很多性能一流的網(wǎng)絡(luò)，結(jié)果分辨率用人眼看也沒有什么顯著降低。因此，Scheirer指出，CNN在圖像識(shí)別方面性能“超人”，但應(yīng)用起來表現(xiàn)不好，實(shí)際上是參數(shù)沒有設(shè)置好，導(dǎo)致算法魯棒性評(píng)估出了問題。

　　在討論中還出現(xiàn)了很多有趣的問答。有人問我們用人類使用的數(shù)據(jù)訓(xùn)練機(jī)器，這樣的機(jī)器是否能夠擁有超過人的能力，OliverBrock回答說“AlphaGo”。另一個(gè)則是研究中在線訓(xùn)練時(shí)間的問題，有人問網(wǎng)絡(luò)線下訓(xùn)練的權(quán)重是否重要時(shí)，Raia回答說“是”。不過她之后具體闡述了這個(gè)問題，也是谷歌DeepMind在強(qiáng)化學(xué)習(xí)研究中的核心問題。

　　總結(jié)

　　最后，Pieter說相比以前，人腦也沒有得到很明顯的進(jìn)化，但除了吃喝，我們還從中“得出”了很多充滿智慧的發(fā)展。