中信建投于芳博：大模型的应用或将加速自动驾驶研发

文/周菊

6月13日，在经济观察报主办的“梦想照进现实——自动驾驶发展创新论坛”上，中信建投人工智能首席于芳博对行业的发展现状、面临的问题等发表了自己的观点。其表示，大模型的应用或将加速自动驾驶研发。

【资料图】

中信建投人工智能首席于芳博

于芳博表示，根据特斯拉CEO马斯克的推特，在自动驾驶算法方面，特斯拉已引入现在最火的大模型作为特征提取机制，且该最新版本算法已经在5月给员工进行内测，公版测试后会让所有北美用户免费试用一个月。

“意味着两点。首先，从特斯拉的角度而言，某种程度上其自动驾驶技术已经成熟了，如果这一个月内不出现大的安全事故，意味着自动驾驶的安全性是能得到保障的。第二点，如果特斯拉一个月之后的续费率有所提升，证明其自动驾驶的商业模式跑赢了。”于芳博指出。

于芳博表示，大模型在深刻地改变自动驾驶领域，有可能让自动驾驶研发更快，从特斯拉的角度来看效果是明显的。只是跟ChatGPT的关系不那么大，因为ChatGPT走的是自然语言理解，自动驾驶这里走的是视觉。

“ChatGPT能不能帮助人类进行自动驾驶？显然GPT3级别不具备规划和决策的能力，只是具备了一定的知识压缩，或者说基础的知识问答，包括具备一定的推理能力。但是GPT4略有不同，推理能力有大幅度的提升。”于芳博表示。

对于接下来自动驾驶行业的发展，于芳博总体持乐观态度。首先，在芯片层面，其表示，国内地平线、芯驰等汽车芯片头部公司近两年在座舱及自动驾驶领域有了多个定点，从硬件的算力层面来看已经准备好了。

同时其指出，基于特斯拉、小鹏、蔚来、滴滴、华为等多个企业在自动驾驶方面的进展，加上6月左右L3级的标准陆续会出来，行业发展预计会比较快速。于芳博预测，未来国内基石芯片越来越多，价格越来越低，算力越来越高，算法以特斯拉为代表将有新突破。

以下为发言节选：

提问：自动驾驶行业发展状态如何？

于芳博：从2021年芯片算力提高之后高通的芯片在紧锣密鼓的推出，包括8775和8795舱驾一体的芯片，包括自动驾驶芯片，高通给了行业中更低成本的一些解决方案。现在国内很多领先汽车芯片头部公司，包括地平线和芯驰等，这两年看到了非常多的定点，不论是座舱还是自动驾驶。从硬件的算力层面已经准备好了。

算法方面，特斯拉的自动驾驶分四个阶段，第三和第四阶段是变化最大的，第三阶段引入了现在最火的大模型作为特征提取的机制，骨干网的网络从原来的手动设计变成了自动设计，包括数据的标注从原来的手动变为自动标注数据。特斯拉的自动驾驶向前了很大一步。

马斯克在5月份有两个推特，很让自动驾驶人兴奋。第一个是11.4版本算是历史级别的更新，这个版本可以叫12.0，可以实现端到端的自动驾驶，5月初特斯拉把这个算法开始给员工进行内测了。第二个推特讲的是占用网络11.4版本进行公版测试之后让所有的北美用户免费试用一个月。意味着两点：第一点，从特斯拉的角度而言，某种程度上认为自动驾驶技术已经成熟了，如果这一个月内不出现大的安全事故，意味着自动驾驶的安全性是能得到保障的。第二点，如果特斯拉这一个月之后的续费率有所提升，证明自动驾驶的商业模式跑赢了。特斯拉牵引着新的思路和发展，国内的理想，小鹏，华为，结合激光雷达等数据在占用网络算法应用有很多，今年整体看下来算法有行业的新突破。

今年看到特斯拉、小鹏和华为等厂商的展示，他们在拥堵且没有车道线的情况下基本可以实现比较好的无人自动驾驶。理想和蔚来会推出一些工程，6月份左右L3级的标准陆续会出来，加上滴滴和百度自动驾驶的新进展，总体上我们对自动驾驶这两年是相对比较乐观的，一方面是基石芯片越来越多，价格越来越低，算力越来越高，另一方面是算法以特斯拉为代表有新的突破。

提问：大模型是有可能让自动驾驶研发更快的研发？

于芳博：从特斯拉的角度来看效果是明显的。

特斯拉自动驾驶2021年把大模型的架构引入之后，现在第四阶段的占用网络算法，核心理念是计算周围的物体格子被占用的概率，以前是对象监测，学习过这个东西，知道是这个东西，比如椅子学习过，这个东西放在路上的时候是不能碰的，但是一个人坐在上面的时候可能就识别不出来。大模型在深刻地改变自动驾驶领域，只是跟ChatGPT的关系不那么大，他走的是自然语言理解，自动驾驶这里走的是视觉。ChatGPT背后理解起来是把知识进行了压缩的过程，那么ChatGPT能不能帮助人类进行自动驾驶？显然GPT3级别不具备规划和决策的能力，只是具备了一定的知识压缩，或者说基础的知识问答，包括具备一定的推理能力。但是GPT4略有不同，推理能力有大幅度的提升。