自動駕駛與運動控制平臺(1)

背景

通過前期在家庭拖地機(jī)器人方面的工程實踐,我們發(fā)現(xiàn)處理這種類似場景(封閉場所乏德,環(huán)境相對靜態(tài),低速行動吠昭,需要機(jī)器人主體在2D平面上自主導(dǎo)航)的應(yīng)用喊括,有太多相似的地方,可以模塊化矢棚,提供硬件平臺+軟件平臺的打包方式郑什,幫助工程應(yīng)用迅速完成導(dǎo)航,感知蒲肋,決策蘑拯,運動控制方面比較專業(yè)和困難的任務(wù),快速應(yīng)用和市場化肉津。我們把這個可復(fù)用强胰,通過簡單配置的即插即用的硬件+軟件平臺,統(tǒng)稱為運動控制平臺妹沙。 目前除了家庭掃地,拖地機(jī)器人應(yīng)用外熟吏,我們還在 下一代智能AGV小車(自動導(dǎo)引車)距糖,進(jìn)行工程導(dǎo)引,解決傳統(tǒng)的AGV小車需要為某個特定路線預(yù)設(shè)磁條牵寺,修改路線非常困難的痛點悍引。

目前人工智能領(lǐng)域普遍被認(rèn)為是移動互聯(lián)之后,下一個風(fēng)口帽氓,但是看到能夠落地的工程應(yīng)用不多趣斤,其中自動駕駛是其中最炙手可熱的可落地領(lǐng)域±栊荩互聯(lián)網(wǎng)巨擎(谷歌浓领,uber,百度為首)玉凯,傳統(tǒng)汽車大廠, tier1供應(yīng)商联贩,學(xué)術(shù)明星和領(lǐng)域知名專家的初創(chuàng)公司漫仆,紛紛進(jìn)入該領(lǐng)域,投入到這場轟轟烈烈的全新的交通運輸生態(tài)的創(chuàng)建中泪幌。截止2017年6月18日以來盲厌,共有34家公司獲得美國加州路測資格,其中中國背景的公司就有9家祸泪,見下圖(來自公開互聯(lián)網(wǎng)):

通過對自動駕駛技術(shù)的了解吗浩,發(fā)現(xiàn)自動駕駛與我們的運動控制平臺無論從技術(shù)框架構(gòu)成,還是到硬件平臺應(yīng)用理解没隘,軟件核心算法上都基本契合拓萌。本文通過比較自動駕駛和運動控制平臺的技術(shù)棧,具體實現(xiàn)算法升略,普及自動駕駛技術(shù)微王,分析自動駕駛技術(shù)發(fā)展給我們留下的切入點和機(jī)會,及運動控制平臺未來的擴(kuò)展點品嚣。

下文的比較炕倘,自動駕駛主要拿百度的Apollo技術(shù)作為描述比較主體,因為目前自動駕駛技術(shù)翰撑,百度公開的最為徹底罩旋,它所用的思想,代表了目前做自動駕駛的主流路線眶诈。

技術(shù)框架(運動控制平臺vs自動駕駛)

下圖是我們運動控制平臺的技術(shù)棧分層:

上圖中涨醋,橙色部分是我們運動控制平臺的主體,其中運算單板是運動控制平臺提供的硬件模塊部分逝撬,由ARM CPU浴骂,NEON, Mali GPU, FPGA 組成的嵌入式異構(gòu)并行計算平臺宪潮。其中感知溯警,定位,避障狡相,地圖梯轻,路徑規(guī)劃,導(dǎo)航尽棕,跟蹤是封裝的軟件算法模塊喳挑,工程應(yīng)用通過配置就可即插即用。藍(lán)色模塊,是配套伊诵,硬件部分根據(jù)工程實踐的需要進(jìn)行選取单绑,軟件操作系統(tǒng)層和仿真層是目前開源的軟件棧。

運動底座是工程方進(jìn)行設(shè)計提供日戈,在我們的家庭拖地車實踐中询张,我們自己設(shè)計了結(jié)合拖地要求的底座。在AGV小車的工程實踐中浙炼,傳統(tǒng)的AGV小車輪式結(jié)構(gòu)可以直接拿來用份氧。 一般來說,對于低速移動的場景應(yīng)用弯屈,差分輪式運動底座是應(yīng)用比較普遍的選擇蜗帜。 有兩個主動輪,可以分別控制轉(zhuǎn)速和轉(zhuǎn)的方向资厉, 前面有一個被動萬向輪厅缺。運動底座向上提供的基本接口包括:線形速度,角速度或者曲率控制宴偿, 查詢當(dāng)前里程計信息(運動底座通過輪半徑湘捎,轉(zhuǎn)動數(shù)目進(jìn)行統(tǒng)計),完成上層對于運動底座的底層控制和信息查詢窄刘,通過低速的串行接口通訊就基本滿足要求窥妇。做對機(jī)器人做算法學(xué)術(shù)研究,或者前期對運動控制算法做驗證階段娩践,會選擇商用的運動底盤提供商的產(chǎn)品活翩,如比較有名的kobuki運動平臺,從圖中可以看到翻伺,它的提供了豐富的接口材泄,非常方便對于傳感器和計算單元的擴(kuò)展。

在與運算單板同層的其他模塊吨岭,都是感知單元拉宗。按照工程實踐的實際要求,進(jìn)行選取未妹。這些感知單元涵蓋了目前主流的環(huán)境感知技術(shù)簿废,傳感單元中 沒有包含gps。 這跟我們目前運動控制平臺主要的應(yīng)用場景和要求有關(guān)络它。 我們的工程應(yīng)用目前在室內(nèi)的比較多, gps 在室內(nèi)環(huán)境是沒有信號的歪赢,對于定位沒有幫助化戳。 傳感單元中提供了碰撞傳感的選項,在室內(nèi)掃地拖地場景中,低速機(jī)器人是要求盡量全覆蓋点楼,尤其是墻角邊緣扫尖,這樣是需要碰撞傳感結(jié)合滿足要求的。 在其他場景如AGV小車掠廓,則不能碰撞换怖,不需要與障礙物無限靠近。激光雷達(dá)的選擇蟀瞧,結(jié)合成本和當(dāng)前應(yīng)用場景的要求沉颂,單線雷達(dá)就滿足要求。 傳感器的作用相當(dāng)于悦污,機(jī)器人的眼睛铸屉,跟上層軟件功能棧配合,完成定位算法切端,物體識別彻坛,物體跟蹤,建圖踏枣,避障昌屉,動作規(guī)劃功能。

操作系統(tǒng)層面茵瀑,我們的軟件建立在目前主流的機(jī)器人操作系統(tǒng)ROS(Robot operation system)间驮。ROS是Willow Garage公司在2010年發(fā)布的開源機(jī)器人操作系統(tǒng),由于其具有點對點設(shè)計瘾婿,不依賴于編程語言蜻牢,分布式架構(gòu),強大的硬件抽象偏陪,廣泛的社區(qū)參與貢獻(xiàn)抢呆,豐富的可復(fù)用,知名的開源庫資源笛谦,已經(jīng)成為機(jī)器人設(shè)計的不二選擇抱虐。對于低速運動場景,原生的ROS環(huán)境完全滿足設(shè)計要求饥脑。

Gazebo 仿真平臺是機(jī)器人設(shè)計人員的主流選擇恳邀。在算法驗證階段,我們不可能缺省認(rèn)為運動底座灶轰,傳感器谣沸,單板,驅(qū)動都準(zhǔn)備就緒的機(jī)器人笋颤,立在那里等我們上板調(diào)試乳附。也不可能有戶型各異,障礙物擺放各異的室內(nèi)環(huán)境讓我們?nèi)L試。仿真平臺對于機(jī)器人設(shè)計至關(guān)重要赋除。 Gazebo 仿真平臺是一個開源的仿真工具阱缓,通過Gazebo,我們可以在pc上設(shè)計我們的機(jī)器人外觀举农,各種傳感方式荆针,機(jī)器人各部分相對移動方式(如機(jī)械手臂6個自由度的移動)。我們可以設(shè)計任何三維環(huán)境颁糟,根據(jù)設(shè)計師三維建模水平而定航背,可以設(shè)計無限逼真的三維仿真環(huán)境。當(dāng)然滚停,簡單的環(huán)境仿真沃粗,直接通過所見即所得的方式,拖拽一些缺省模塊键畴,可以快速建立一個室內(nèi)仿真環(huán)境最盅。 我們曾經(jīng)為商場掃地車工程實踐, 設(shè)計過一比一的掃地車起惕,和商場模型涡贱,玻璃窗和地面的光反射,激光透射玻璃都相當(dāng)逼真惹想。我們可以在pc 的Gazebo平臺上问词,使用我們預(yù)先建立的機(jī)器人模型和環(huán)境模型,驗證算法嘀粱。Gazebo 仿真平臺目前是商用自主移動機(jī)器人激挪,無人機(jī)設(shè)計的主流選擇。

下圖是自動駕駛Apollo技術(shù)框架(來自于互聯(lián)網(wǎng)):

百度的自動駕駛分為四層技術(shù)棧:

1. 參考汽車平臺: 一輛汽車锋叨, 必須可以實現(xiàn)電子化的控制垄分,也就是線控。百度目前的參考設(shè)計使用的是Lincoln MKZ, enhanced by Autonomous Stuff, 為用戶提供了一個無障礙的自動車輛平臺娃磺。該平臺為用戶提供了一整套硬件和軟件解決方案薄湿。用戶可以直接獲得車輛某些模塊控制權(quán)限,如檔位偷卧,速度和指示燈豺瘤。見下圖:

2.? 參考硬件平臺: 為了實現(xiàn)高性能穩(wěn)定的計算,百度采用的是工業(yè)級PC Neousys宸曜科技 Nuvo-5095GC作為運算單元听诸, 配置6th-Gen Intel? Core? i7/i5 LGA1151 CPU 和NVIDIA? GeForce? GTX 1050* GPU坐求,可以工作在-25度到60度的工作范圍。


GPS/IMU采用的是NovAtel SPAN-IGM-A1晌梨,理論上 rtk-gps加IMU的融合方案出來的精度能達(dá)到厘米級別瞻赶。在apollo 1.0 沒有公開攝像頭赛糟,Lidar(雷達(dá))派任,Radar(毫米波雷達(dá))信息砸逊,不過根據(jù)百度以前無人駕駛車的信息,有一個Velodyn 64線HDL64E雷達(dá)掌逛,配套一個長距毫米波雷達(dá)和中距毫米波雷達(dá)师逸,一個魚眼攝像頭和一個攝像機(jī)鏡頭。

3. 操作系統(tǒng): Apollo 采用 ubuntu 14.04+ ROS indigo豆混。 其中ROS是做了定制化修改的篓像,使得更適合自動駕駛的要求,后面章節(jié)會詳細(xì)介紹皿伺。

4. 上層算法:算法模塊的構(gòu)成與運動模塊基本類似员辩。多了端對端和HMI。HMI是百度自動駕駛提供的人機(jī)交互界面鸵鸥,方便操作者統(tǒng)計奠滑,調(diào)試。 端對端算法是一種所見即行動的一種思想妒穴,通過深度學(xué)習(xí)宋税,將感知直接轉(zhuǎn)化為控制,這是一種實驗性質(zhì)的算法讼油,目前的狀況不應(yīng)該是主流應(yīng)用杰赛。

5. 云: 主要有三個作用, ?訓(xùn)練模型, 自動駕駛仿真矮台, 高精地圖提供乏屯。


從上面關(guān)于運動導(dǎo)航模塊和自動駕駛技術(shù)棧的描述,我們可以看到兩者之間有頗多相似的地方瘦赫。

1. ?運動底盤 vs 參考汽車平臺:都是運動的控制主體辰晕,為上層算法提供控制接口進(jìn)行驅(qū)動,提供查詢接口進(jìn)行反饋耸彪。 運動底盤和汽車控制的時候都是要滿足非完整約束仙蛉,就是不在作出向前移動的情況下壹士,無法單獨完成橫向位移。 相比于運動底盤,汽車平臺的動力學(xué)模型會更加復(fù)雜瞧省,除了速度不是一個量級的 ,慣性因素會使得控制更加復(fù)雜械媒。 汽車的橫向位移(轉(zhuǎn)彎)靠前輪的朝向與前輪后輪形成直線的夾角的變化蛀骇,屬于自行車模型。 運動控制模塊多采用差分輪運動底盤荧呐,橫向位移靠兩個輪子相互反方向旋轉(zhuǎn)汉形,靠不同的旋轉(zhuǎn)速度比纸镊,來滿足不同曲率的要求。在控制算法的選取中概疆,會有不同逗威。

2. 硬件平臺: 運算單元和感知單元部分。 運算單元岔冀, 運動控制平臺采用的是嵌入式異構(gòu)計算單板凯旭, 滿足低速簡單運動場景的感知算法,決策使套,控制算法的計算要求罐呼。 汽車應(yīng)對的高速,絕對可靠安全的場景侦高,運算量不是一個量級嫉柴,目前多采用工業(yè)級PC的方案,里面多采用英偉達(dá)的GPU奉呛,來滿足感知對于運算量的要求计螺。芯片廠商, 英偉達(dá)侧馅,德州儀器危尿,賽靈克斯,intel馁痴, 也紛紛推出自己的芯片方案谊娇,中國的寒武紀(jì),中星微也有自己的芯片方案罗晕,后續(xù)運算單元平臺將是百花爭妍的局面济欢。感知單元, 運動控制平臺和自動駕駛采用的傳感器大多重疊小渊。有幾個不同地方法褥。 深度攝像頭可以在運動控制平臺應(yīng)用場景中的室內(nèi)場景中使用,深度主要靠結(jié)構(gòu)光技術(shù)酬屉,抗干擾能力差半等,目前的技術(shù)上,在室外場景不可靠呐萨。 自動駕駛多采用雙目攝像頭來完成深度識別杀饵。 運動控制平臺采用超聲和紅外完成被動障礙感知, 自動駕駛采用汽車電子方面非常成熟的毫米波雷達(dá)方案谬擦。

3. ?操作系統(tǒng)切距, 兩者都使用 ubuntu 14.04+ ROS indigo。汽車對于實時性惨远, 帶寬谜悟, 分布式要求會更加嚴(yán)苛话肖。 原生的ROS 對于這三方面都無法達(dá)到自動駕駛的要求,雖然 ROS 2.0 會在這三個方面有很大的提升葡幸,但是仍然處于實驗階段最筒。 大部分自動駕駛廠商,包括百度礼患,都是在ROS基礎(chǔ)上作深度定制是钥。?

4. 上層算法:模塊分類基本類似,所采用的算法實現(xiàn)有很多借鑒的地方缅叠, 在后面的章節(jié)詳細(xì)描述。

5. ?仿真: 運動控制平臺的場景相對簡單虏冻,采用開源的gazebo 仿真技術(shù)肤粱,在一些相對高配置的pc上基本滿足要求。 自動駕駛一般要自動駕駛廠商自己搭建仿真平臺厨相, 汽車要仿真的環(huán)境非常復(fù)雜领曼,計算量消耗很大,一般要采用云技術(shù)分布式平臺蛮穿。?

6. 地圖: 運動控制平臺的地圖創(chuàng)建所描繪的場景比較簡單庶骄, 一般2d 場景地圖大概滿足要求,在運算單元上可以完成創(chuàng)建和使用践磅。 自動駕駛需要高精地圖单刁, 3維點云,精確到厘米級別府适,全國地圖羔飞。 特點是需要提前采集,需要花費巨大成本用采集車去采集檐春,生成的高精地圖要隨時去更新逻淌,消耗大量的存儲,一般要放在云端疟暖,自動駕駛車通過高速無線網(wǎng)絡(luò)下載當(dāng)時位置的高精地圖滿足實時決策要求卡儒。?

7. 訓(xùn)練: 運動控制平臺會對地墊,椅子俐巴,人有簡單識別要求骨望,實際情況根據(jù)工程需要。模型提前可以在服務(wù)器端訓(xùn)練窜骄,訓(xùn)練數(shù)據(jù)相對不多锦募。 汽車有海量的數(shù)據(jù)要進(jìn)行訓(xùn)練,滿足高可靠性的物體識別任務(wù)邻遏,要在云端進(jìn)行訓(xùn)練糠亩。

8. 運動控制平臺的多機(jī)協(xié)作要求 vs 車聯(lián)網(wǎng)方案: 目前運動控制平臺的設(shè)計沒有過多考慮多機(jī)協(xié)作的要求虐骑,不過會在以后擴(kuò)展,應(yīng)用場景如 多個AGV小車互聯(lián)互通共同完成調(diào)度任務(wù)赎线,是車車通信的一種方式廷没。 車聯(lián)網(wǎng)方案是自動駕駛的一條路徑,在百度Apollo框架中并沒有提及垂寥。 包含V2V(車車通信)颠黎,V2I( 車路通信), V2P(車人通信)滞项,完成信息共享后的汽車決策狭归,控制算法。目前通信標(biāo)準(zhǔn)主要是歐美主推的DSRC(專用短程通信)和中國主推的5G標(biāo)準(zhǔn)LTE-V文判。

后面的章節(jié)过椎,會對具體的一些算法和模塊進(jìn)行一些詳細(xì)比較和描述。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末戏仓,一起剝皮案震驚了整個濱河市疚宇,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌赏殃,老刑警劉巖敷待,帶你破解...
    沈念sama閱讀 217,509評論 6 504
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異仁热,居然都是意外死亡榜揖,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,806評論 3 394
  • 文/潘曉璐 我一進(jìn)店門股耽,熙熙樓的掌柜王于貴愁眉苦臉地迎上來根盒,“玉大人,你說我怎么就攤上這事物蝙⊙字停” “怎么了?”我有些...
    開封第一講書人閱讀 163,875評論 0 354
  • 文/不壞的土叔 我叫張陵诬乞,是天一觀的道長册赛。 經(jīng)常有香客問我,道長震嫉,這世上最難降的妖魔是什么森瘪? 我笑而不...
    開封第一講書人閱讀 58,441評論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮票堵,結(jié)果婚禮上扼睬,老公的妹妹穿的比我還像新娘。我一直安慰自己悴势,他們只是感情好窗宇,可當(dāng)我...
    茶點故事閱讀 67,488評論 6 392
  • 文/花漫 我一把揭開白布措伐。 她就那樣靜靜地躺著,像睡著了一般军俊。 火紅的嫁衣襯著肌膚如雪侥加。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,365評論 1 302
  • 那天粪躬,我揣著相機(jī)與錄音担败,去河邊找鬼。 笑死镰官,一個胖子當(dāng)著我的面吹牛提前,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播朋魔,決...
    沈念sama閱讀 40,190評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼岖研,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了警检?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,062評論 0 276
  • 序言:老撾萬榮一對情侶失蹤害淤,失蹤者是張志新(化名)和其女友劉穎扇雕,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體窥摄,經(jīng)...
    沈念sama閱讀 45,500評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡镶奉,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,706評論 3 335
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了崭放。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片哨苛。...
    茶點故事閱讀 39,834評論 1 347
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖币砂,靈堂內(nèi)的尸體忽然破棺而出建峭,到底是詐尸還是另有隱情,我是刑警寧澤决摧,帶...
    沈念sama閱讀 35,559評論 5 345
  • 正文 年R本政府宣布亿蒸,位于F島的核電站,受9級特大地震影響掌桩,放射性物質(zhì)發(fā)生泄漏边锁。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,167評論 3 328
  • 文/蒙蒙 一波岛、第九天 我趴在偏房一處隱蔽的房頂上張望茅坛。 院中可真熱鬧,春花似錦则拷、人聲如沸贡蓖。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,779評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽摩梧。三九已至物延,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間仅父,已是汗流浹背叛薯。 一陣腳步聲響...
    開封第一講書人閱讀 32,912評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留笙纤,地道東北人耗溜。 一個月前我還...
    沈念sama閱讀 47,958評論 2 370
  • 正文 我出身青樓,卻偏偏與公主長得像省容,于是被迫代替她去往敵國和親抖拴。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,779評論 2 354

推薦閱讀更多精彩內(nèi)容

  • 操作系統(tǒng) 無論自動駕駛還是我們的運動控制平臺的技術(shù)棧腥椒,都有很關(guān)鍵的一層阿宅,操作系統(tǒng)層。這一層下面接口硬件平臺笼蛛,上一層...
    飛帥閱讀 2,501評論 0 2
  • 2017年無人駕駛還處于積極研發(fā)和普及期洒放,民用的測試和技術(shù)探索也主要在小型汽車方面,各大巨頭都將2020年作為一個...
    方弟閱讀 7,080評論 1 16
  • 作者:溫利武 班級:1402019 學(xué)號:14020199041 【嵌牛導(dǎo)讀】:本文梳理總結(jié)了前面11篇涉及...
    wlw_1fdf閱讀 1,090評論 2 6
  • 定位問題的引入 我們所熟知的機(jī)器人滨砍,可以大致分為以下四類: 1. 操作機(jī)器人: 模仿人的手和手臂的動作往湿,特點...
    飛帥閱讀 1,697評論 0 2
  • 作者:劉少山,李文超惋戏,唐潔責(zé)編:何永燦领追,歡迎人工智能領(lǐng)域技術(shù)投稿、約稿响逢、給文章糾錯绒窑,請發(fā)送郵件至heyc@csdn...
    十人言末閱讀 1,276評論 0 4