BEV感(gan)知已(yi)成为引领高(gao)阶自动驾驶量产的(de)新范(fan)式(shi)。但是要实现BEV感(gan)知在车(che)端的(de)规模(mo)化(hua)部署和落地，并非易事。
首先，BEV感知大模型的(de)(de)(de)训练需要超大规模的(de)(de)(de)算(suan)力和海量的(de)(de)(de)高(gao)质量标注数据支持(chi)，成本高(gao)且耗时(shi)长(zhang)。其(qi)(qi)次，由于车端(duan)资源和能耗的(de)(de)(de)限制(zhi)，训练好的(de)(de)(de)BEV感知大模型并(bing)不能直接部(bu)署到车端(duan)，需要通过(guo)量化(hua)、压(ya)缩等(deng)方式(shi)对(dui)模型进行优(you)化(hua)，这(zhei)就要求(qiu)开(kai)发人(ren)员具备(bei)极强的(de)(de)(de)专(zhuan)业(ye)能力和丰富的(de)(de)(de)开(kai)发经验(yan)。由此(ci)可见，BEV感知在(zai)车端(duan)规模化(hua)部(bu)署是一项(xiang)极其(qi)(qi)复杂(za)的(de)(de)(de)系统性工程。
为了帮助(zhu)开(kai)发者高效实现BEV感知(zhi)在车(che)端(duan)的部署与落地，地平线早在2021年发布新一(yi)代(dai)征程(cheng)5车(che)载智(zhi)能(neng)芯片(pian)之时，就推出(chu)了基(ji)于征程(cheng)5的纯视觉BEV感知(zhi)原型(xing)方(fang)案(an)。
征程(cheng)5基(ji)于贝(bei)叶(ye)斯深度学习加速引(yin)擎打造(zao)，原生支(zhi)持BEV感知所大(da)量使用(yong)的(de)(de)Transformer模(mo)型。同时，征程(cheng)5配备(bei)了(le)双(shuang)ISP、CV引(yin)擎、双(shuang)视(shi)觉(jue)DSP等(deng)丰富(fu)的(de)(de)异构计(ji)算资源(yuan)，能够对车端多(duo)路摄(she)像头数据进行(xing)畸变(bian)校正(zheng)、拼接、3D场景重构等(deng)视(shi)觉(jue)预(yu)处(chu)理工(gong)作，打破了(le)BEV感知各(ge)个环节(jie)的(de)(de)计(ji)算瓶颈(jing)。此外，地平线还提(ti)供芯片开(kai)发套(tao)件(jian)、域(yu)控参考设计(ji)、芯片工(gong)具链(lian)及软件(jian)开(kai)发平台等(deng)，以帮助开(kai)发者充(chong)分利用(yong)征程(cheng)5的(de)(de)计(ji)算资源(yuan)，加速BEV感知算法在(zai)车端的(de)(de)部署。
经过(guo)两年(nian)的打磨，地平线基于征程5芯片的BEV感知方案有哪(na)些(xie)(xie)最新进展？又将给业界带来哪(na)些(xie)(xie)惊(jing)喜呢(ni)？
8月24日19点，地平线联合智东西公开课策划推出的新一期地平线「你好，开发者」自动驾驶技术专场将开讲，主题为《基于征程5芯片的BEV感知方案与部署实践》，由地平线感知算法工程师朱红梅主讲。
朱(zhu)红梅博士(shi)首先会对(dui)(dui)(dui)BEV感知框架进行全面介绍，之后将讲(jiang)解(jie)时空(kong)融(rong)合模块与芯片(pian)部署。接(jie)下来，她(ta)将分(fen)别(bie)对(dui)(dui)(dui)静态与Occupancy感知要(yao)素、动态感知预(yu)测(ce)端(duan)到端(duan)与芯片(pian)部署进行深入解(jie)析。最后，朱(zhu)红梅博士(shi)还(hai)会对(dui)(dui)(dui)BEV感知方案的实(shi)车(che)部署与闭环验证进行解(jie)读。
专场信息
主 题
《基于征程5芯片的BEV感(gan)知方(fang)案与部署实(shi)践》
提 纲
1. BEV感知框架总体介绍
2. 时空融合模块与芯片部署
3. 静态与Occupancy感知要素解析
4. 动态感知预测端到端与芯片部署
5. 实车部署与闭环(huan)验(yan)证
主 讲 人
朱红梅，地平(ping)线(xian)感(gan)知算(suan)(suan)法(fa)工程(cheng)师。博士毕业于(yu)北京航空航天(tian)大学，研究(jiu)方向(xiang)(xiang)为(wei)双(shuang)目立(li)体视觉。2019年加入地平(ping)线(xian)，先后主导扫地机场景、车载多视角深度估计(ji)算(suan)(suan)法(fa)研发(fa)、面(mian)向(xiang)(xiang)征(zheng)(zheng)程(cheng)5芯片的BEV感(gan)知算(suan)(suan)法(fa)研发(fa)。目前负责推进基(ji)于(yu)征(zheng)(zheng)程(cheng)5的BEV感(gan)知方案量产落地。
直 播 时 间
8月24日19:00-20:30
