其中，環(huán)境感知系統(tǒng)模擬人對局部車輛行駛環(huán)境的實時辨識的功能，包含遍布車身的雷達(dá)、機(jī)器視覺等傳感器，以實現(xiàn)對行駛環(huán)境中車輛-車輛，車輛-道路以及車輛-行人相對運動關(guān)系的準(zhǔn)確辨識，如車道線、交通燈信號、交叉路口信息、運動-靜止障礙物、行人甚至動物等；
無線通信系統(tǒng)則是模擬人對大范圍內(nèi)車輛行駛環(huán)境的認(rèn)識，其主要通過如3G/4G、WiFi、GPS、車-車/車-路通信等遠(yuǎn)程/短程的通信方式，實現(xiàn)諸如交通信息、天氣狀況、道路緊急事故、前方路口信息、行車盲點、車輛定位及導(dǎo)航等信息的辨識；
而智能控制系統(tǒng)主要模擬人分析和處理復(fù)雜環(huán)境信息，制定最優(yōu)決策的過程，該過程既涉及復(fù)雜的人工智能優(yōu)化算法，選擇最安全、最高效的行駛路徑，也需要對車輛各部件如發(fā)動機(jī)、電機(jī)、變速器等系統(tǒng)進(jìn)行實時的車輛控制，以實現(xiàn)對車輛期望運動軌跡的快速跟蹤。
如何綜合應(yīng)用環(huán)境感知、無線通信等手段，通過多類信息的綜合處理，獲取準(zhǔn)確全面的行車環(huán)境信息，這是無人駕駛汽車技術(shù)發(fā)展所面臨的首要技術(shù)難題。其次，復(fù)雜的行駛環(huán)境下，如何制定最優(yōu)的決策，使得無人駕駛汽車在行駛過程中能夠?qū)崿F(xiàn)真正的安全、高效，也符合駕駛員的行為習(xí)慣，這將是無人駕駛汽車面臨的另一技術(shù)難題。
谷歌無人駕駛汽車
谷歌無人駕駛汽車項目由谷歌工程師，斯坦福大學(xué)人工智能實驗室主任塞巴斯蒂安-特龍主持。
谷歌無人駕駛汽車實現(xiàn)無人駕駛的第一步是導(dǎo)航，其導(dǎo)航系統(tǒng)的精度相比通常使用的車輛導(dǎo)航系統(tǒng)具有更高精度要求。由于目前交通道路信息更新速度很快，汽車所存儲的信息有可能不準(zhǔn)確，因此，谷歌無人駕駛汽車在行駛之前，需要人工設(shè)定行駛路線，以保證汽車行駛路線的準(zhǔn)確無誤。一旦汽車行駛路徑設(shè)定完畢，系統(tǒng)將依靠車上所搭載的GPS傳感器、安裝于車頂?shù)募す鉁y距儀、安裝于前后保險杠的四個雷達(dá)、安裝于前擋風(fēng)玻璃的攝像頭等傳感器，實時控制車輛自動駕駛。
由于實際道路環(huán)境復(fù)雜，谷歌無人駕駛汽車的車頂上所安裝的激光測距儀是其中最重要的一個傳感器。激光測距儀通過實時的旋轉(zhuǎn)式激光探測，能夠?qū)崟r識別到車輛50英尺范圍內(nèi)的三維空間圖像，將該圖像和高分辨率的地圖相結(jié)合，可以獲取更加精確的行駛環(huán)境信息，相比單純依靠GPS，其定位精度可達(dá)幾個厘米，且能夠重建汽車周圍運動的各類物體模型。車載雷達(dá)則可以實時檢測較遠(yuǎn)距離范圍內(nèi)運動的物體。前視攝像頭可以對整個交通環(huán)境、周圍建筑物、紅綠燈等信息進(jìn)行實時采集。無人車處理器將綜合上述多類信息，重新構(gòu)建集成交通環(huán)境的、更加準(zhǔn)確的3D環(huán)境模型。
谷歌無人駕駛汽車還擁有多個同時運行的控制軟件，例如車輛要進(jìn)行換道操作，汽車控制器將會根據(jù)當(dāng)前的車輛行駛環(huán)境，兼顧行駛路徑平滑、車輛行駛速度、安全距離等因素，制定最優(yōu)的換道軌跡；當(dāng)經(jīng)過十字路口，汽車將自動遵守交通規(guī)則。同時，安全是谷歌無人駕駛汽車最重要的要求，車內(nèi)駕駛員可以隨時接管自動駕駛系統(tǒng)。目前，在內(nèi)華達(dá)州交通管理法規(guī)中，明確要求無人駕駛汽車內(nèi)必須同時有兩個人，一位實時監(jiān)測車輛以及周圍的環(huán)境，一位隨時準(zhǔn)備應(yīng)對突發(fā)狀況，絕對保證汽車的安全性。
2012年4月1日，谷歌決定聯(lián)合全美運動汽車競賽協(xié)會，將自己的無人駕駛汽車跟真正的賽車同場競技，證明機(jī)器人比人類駕車技術(shù)要高。當(dāng)然，谷歌無人駕駛汽車技術(shù)能否真正超越人類駕車技術(shù)，還有待時間的檢驗。