越来越多的车企在宣传自家自驾功能的时候,会提到 occupancy network 占用网络这个词,而且经常是跟 bv 加 transformer 一起出现的,那么他们到底是什么意思呢?今天就来聊聊这个话题。 什么是占用网络?要想搞清楚什么是占用网络,你需要先了解一下 b v 和 transformer。 b v first i view 从字面就能看得出来它是鸟看图的意思,从上往下的视角,这种俯瞰视角让道路场景变得更加直观和简单。 他让车辆获得比较完整的平面进场感知信息,让他对所处环境有一个全貌的了解,就像你在飞机上看到的景象,哪里是山,哪里是楼,哪里是路,一目了然。在自动驾驶 和机器人领域,将激光雷达或高清摄像头等传感器数据转换为鸟看图形式,是一种比较常见的做法,让他走起来就有了持续信息,就可以进一步的实现建图、检测物体形状和规划路径,就像你家的扫地机器人一样,全是封门又是什么呢? 他是一种深度学习架构,被普遍应用在计算机的视觉识别领域当中。他的核心原理啊,就是 捕捉大量数据中的长距离依赖关系。简单来讲就是在大量的历史图像中迅速找到存在某种特定关联的信息,然后认出当前这是一个什么东西。 b b 和 transformer 这两个放在一起呢?指的是结合两种技术,把鸟看图作为输入数据,然后利用 transformer 架构进行深度学习。那这种组合可以 充分利用 bv 的鸟亢仕途,而全是 fm, 强大的分辨能力,在自动驾驶过程中实现高效的路况分析。好了,现在可以说说什么是 okpish network 占用网络了。点赞加关注,今天给您聊明白了, 它可以算是 vv 技术的延伸,等于感知能力从二 d 变为了三 d, 从一张鸟看图变成了一个立体的乐高世界,怎么实现的呢?这里就涉及到人工智能领域里面的一项技术,叫做羽翼分割, 他让计算机把一张图片里面的每个部分进行分割,然后对每个部分进行识别,之后赋予其一个语音标签,然后让他具备语言探讨的意义,帮助人类和计算机进行准确的理解。而占用网络就是利用这个原理,把摄像头拍摄到的画面进行三 d 重, 再简化成一个立体的网格世界,里面的每一个小方块呢,叫做体数,跟图片里面的像素一个道理,然后系统只要识别到这个体数被占用了,就会把它显示出来。现在知道为什么叫做占用网络了吧, 然后再通过卷肌神经网络的深度学习能力预测它的形状和走向,以此来判断它是否为障碍物。
粉丝5669获赞11.9万


那这个网络在自动驾驶中发挥什么作用呢?在自动驾驶技术当中啊,准确的三维感知和环境建模是决策的基础, 要先知道哪里有路,才能知道要怎么开。想象一下,你的车子身处一个超大的乐高世界,每当有一个新的物体出现在这个乐高城市里面,比如说一个人,一个桩筒,一辆车,或者是一座立交,那么这些体数就会被占据。 系统会注意到,咦,这里有一个新的东西,看起来挡路了。就像你在路上看到某个奇怪的东西,就算你不知道他是什么,你也知道要绕开他。占用网络主要就是帮助车辆发现障碍物,至于是否能分辨出这是一个什么东西并不重要。系统不需要纠结这是什 什么东西,只需要知道这东西挡路就可以了。利用这种方法,自动驾驶就能识别任意的障碍物,解决了对白名单之外的异形障碍物不认识,不知道挡不挡路,要直接开过去还是绕过去的问题。这就完了吗?还不够 车开在路上,系统不光要能发现静态物体,还需要预测物体的运动状态啊。前面提到了,战略网络是基于 bv 加 transform 而来的,具有深度学习的能力。因此他可以对那些被部分遮挡的物体进行理解, 从而发现他的完整结构,然后预测他的运动轨迹,这对于自动驾驶车辆的路径规划至关重要。


全球目前有哪些车企在用呢?特斯拉是比较早把 b v 加全是风门、占用网络等这些技术应用到自动驾驶系统当中的厂商。因为坚持不用激光雷达,老马在视觉算法上是玩出了花。 由于纯视觉感知是平面的,缺乏激光雷达提供的三 d 点云信息,等于少了一个三 d 眼镜,所以特斯拉在算法架构上疯狂的卷,最后通过战略网络技术让自己实现了裸眼三 d。 现在国内能买到的最新的特斯拉 model s 和 x 的 pad 版本就是完全没有任何雷达的,连泊车用的超声波雷达都没有,对于障碍物的识别就是依靠占用网络来实现的。 而国内的厂商目前只有华为算是用上了占用网络。在今年四月份发布的 god 网络,全称叫做通用战务检测网络,他实际上是融合了激光雷达点云数据的,名字上插了个边, 并非真正意义上的纯视觉算法占用网络,未来呢,也是类似的做法,不过它叫做占用隔山吉越零一是国内首个宣称实现纯视觉占用网络技术落地的品牌,也是国内首个没有激光雷达用纯视觉感知跑城区自驾的方案。 不过目前这套系统啊,还没有真正量产,预计要明年。小鹏在前不久的一零二四科技日上也发布了包含视觉障碍网络技术的 x net 二点零感知架构, 不过实际落地装车就要等到 x 九量场上市,估计也得二零二四年了。自己也是预计将在二零二四年进入基于账目网络的自驾技术方案。