從對(duì)錯(cuò)誤的容忍度來說，人工智能系統(tǒng)可以分成兩大類：犯了錯(cuò)誤可以重來；在統(tǒng)計(jì)意義上不能夠犯錯(cuò)誤。無人駕駛屬于后者。從這一現(xiàn)實(shí)來看，認(rèn)為，當(dāng)前的無人駕駛技術(shù)主要面臨對(duì)環(huán)境的可靠感知、預(yù)行為理解、應(yīng)對(duì)意外等難題。

“對(duì)環(huán)境的可靠感知，即無論在任何路況和天氣狀況下，無人駕駛汽車都能準(zhǔn)確而周密地感知周圍環(huán)境?！编嵞蠈幷f，“預(yù)行為理解即對(duì)對(duì)方可能產(chǎn)生的行為進(jìn)行準(zhǔn)確的預(yù)估和判斷。對(duì)意外遭遇的處理，包括如何對(duì)交警的手勢(shì)作出反應(yīng)，如何應(yīng)對(duì)突然從路邊闖進(jìn)一個(gè)小孩等意外情況?！边@樣的突發(fā)異常情況是無人駕駛必須解決的，但目前還無法事先為這類場(chǎng)景編碼，也無法用簡(jiǎn)單的基于規(guī)則的模型來應(yīng)對(duì)。

鄭南寧表示，針對(duì)這些難題所開展的嘗試，需要把深度學(xué)習(xí)網(wǎng)絡(luò)、長(zhǎng)短期記憶、選擇性注意機(jī)制以及提取知覺物體等技術(shù)，整合在基于認(rèn)知計(jì)算引擎的自主駕駛系統(tǒng)中，這是無人駕駛研究領(lǐng)域值得研究的方向。

鄭南寧認(rèn)為，對(duì)無人駕駛我們?nèi)匀粦?yīng)該保持冷靜，無人駕駛并沒有那么快就進(jìn)入生活?！罢鎸?shí)的交通環(huán)境復(fù)雜多變，實(shí)現(xiàn)完全自主的無人駕駛是一個(gè)令人興奮卻又望而生畏的艱難挑戰(zhàn)。”