環(huán)境感知是自動(dòng)駕駛的核心技術(shù)之一,其核心作用是感知車輛周圍的行人、車輛、障礙物、車道線以及紅綠燈等交通標(biāo)志。多傳感器融合是各種精確環(huán)境感知機(jī)器人應(yīng)用的基礎(chǔ),通過不同傳感器間的互補(bǔ),能夠使融合系統(tǒng)的整體感知能力顯著提高。
在L3及以上的自動(dòng)駕駛系統(tǒng)中,基于攝像頭、激光雷達(dá)等多傳感器的融合感知方案已逐漸量產(chǎn)落地。
但是多傳感器融合感知技術(shù)涉及知識(shí)廣,要求該領(lǐng)域的伙伴們不僅需要掌握多傳感器的時(shí)空標(biāo)定方法,更需要掌握2D、3D的感知方法以及融合策略。
空間對(duì)準(zhǔn)如何建立從各個(gè)傳感器不同坐標(biāo)系到一個(gè)統(tǒng)一的基準(zhǔn)坐標(biāo)系的變換關(guān)系?
Object level 的后融合:一個(gè)Object的一生,伙伴們刻苦研究的必備內(nèi)容:
前融合算法是自動(dòng)駕駛中的多模態(tài)融合,但多模態(tài)融合有諸多難點(diǎn):單模態(tài)特征表達(dá)、多模態(tài)時(shí)空對(duì)齊、多模態(tài)特征融合等內(nèi)容。
必一運(yùn)動(dòng)
如何設(shè)計(jì)一個(gè)完整的針對(duì)性融合系統(tǒng)及優(yōu)缺點(diǎn)分析,這也是很多伙伴很難挑戰(zhàn)成功的問題。
因此,深藍(lán)學(xué)院重磅推出『多傳感器融合感知』課程,幫助大家系統(tǒng)梳理常用的相機(jī)、激光雷達(dá)的時(shí)間空間標(biāo)定方法,細(xì)致講解當(dāng)下主流的融合感知策略(前融合與后融合),并通過融合感知的Project,讓大家具備親自動(dòng)手實(shí)現(xiàn)一個(gè)完整的融合感知系統(tǒng)的能力。
歷任百度自動(dòng)駕駛高級(jí)研發(fā)工程師,紐勱科技L4部門研發(fā)負(fù)責(zé)人,商湯自動(dòng)駕駛研發(fā)副總監(jiān)。浙江大學(xué)控制系碩士,畢業(yè)至今擁有6年+的L4自動(dòng)駕駛研發(fā)經(jīng)驗(yàn),擅長3D感知、定位建圖和多傳感器標(biāo)定等技術(shù)。