商汤绝影智能汽车事业群总裁王晓刚：智能汽车时代，驾舱云三位一体的创新范式

    上周，在“2022T-EDGE全球创新大会暨钛媒体十年致敬盛典”上，商汤科技联合创始人、首席科学家、绝影智能汽车事业群总裁王晓刚发表《智能汽车时代下，商汤绝影驾舱云三位一体的创新范式》主题演讲。王晓刚表示，商汤科技智能汽车平台品牌“商汤绝影”的定位，是做智能汽车时代的人工智能（AI）核心供应商，同时为智慧城市提供管理中枢。基于在感知、决策规划控制和AI云三大核心能力方面，绝影打造了驾、舱、云三位一体的产品体系。而且商汤还拥有包括智慧健康、元宇宙、智慧城市、智慧交通等众多业务和场景，这些跨场景智慧产业生态的融合，给绝影带来了创新的新范式。

    截至目前，商汤绝影已经与30家车企合作，拥有超过50个生态合作伙伴，商汤绝影智能驾驶和智能座舱产品累计前装定点数量超过2700万台。凭借行业领先的量产成绩与深厚的技术实力，在上周举办的中国汽车供应链峰会暨第七届铃轩奖盛典上，商汤绝影智能车舱产品及商汤绝影赋能引擎产品分别斩获2022铃轩奖的量产·智能座舱优秀奖、前瞻·工具及工艺优秀奖。经历7载，铃轩奖已成为中国最具权威的汽车零部件产业评奖之一，是中国汽车零部件行业的风向标、主流汽车厂商重要供应链选择的考量标准。

    本文为王晓刚教授在“2022T-EDGE全球创新大会暨钛媒体十年致敬盛典”演讲内容梳理。大家好，我是商汤科技王晓刚。很荣幸有机会跟大家分享智能汽车时代下，商汤绝影驾、舱、云三位一体的创新范式。首先，我们来看一下智能汽车时代的行业发展趋势。未来 5~10 年，是 L3、L2++ 智能驾驶高速发展的黄金窗口期。我们可以看到，2030 年，中国汽车的销量预计达到 3,420 万台。其中，具备L2 级及以上智能驾驶功能的新车渗透率将会达到 82%。

    与此同时，国家也出台了一系列的政策，加速推动智能汽车的落地应用。例如，国家自然资源部选择了北、上、广等 6 个城市去推广智能汽车的高精度地图的试点，为 L2++ 的自动驾驶进入城区打开了窗口；最近，工信部也发布了《关于开展智能网联汽车准入和上路通行试点工作的通知（征求意见稿）》；此外，若干地区也通过立法的方式，去界定 L3 和 L4 自动驾驶的责任边界，这也为 L3、L4 自动驾驶大规模的量产奠定了法律基础。  打造驾、舱、云三位一体的产品体系在这样的大背景下，商汤绝影的定位，是做智能汽车时代的人工智能（AI）核心供应商，同时为智慧城市提供管理中枢。面向前装量产，我们为主机厂提供智能座舱、AI云、智能驾驶三位一体的智能化服务。同时，我们还为智慧城市高效地管理智能汽车，提供强大的 AI 云控中枢，提供如市政养护、智慧交通、公共安全、城市管理等一系列增值服务。

    经过多年积淀，商汤绝影拥有了驾、舱、云三位一体的核心产品。那么在未来，消费者驾驶体验会发生质变的一个关键点，就是智能驾驶和智能座舱的一个深入融合，从而大幅降低硬件成本，提升开发效率，也提升系统的安全性与可靠度。在驾、舱、云三位一体的智能化服务中，AI 云起到了非常关键的作用。在 L3、L4 级自动驾驶规模化落地的同时，需要一个强大的云控平台作为支撑，能够对车辆进行监管，进行责任的界定；AI 云也可以为智能驾驶去提供数据闭环，通过数据回流，不断地在线更新自动驾驶模型，提升系统的核心体验和安全性；AI 云还为智能座舱提供了“大脑”，提供了很多智能推荐与定制化服务，让智能车舱成为我们真正的“第三生活空间”。打造驾、舱、云三位一体的产品体系，需要具有感知、决策规划控制和 AI 云三方面的核心能力。首先，商汤基于自建人工智能计算中心（AIDC）去打造绝影的核心能力。在感知方面，绝影率先将BEVFormer++的感知算法，实现大规模量产落地。在2022年Waymo挑战赛当中，绝影也得到了感知算法的冠军。此外，商汤推动的OpenMMLab，是业内最具有影响力的智能感知开源算法框架平台，里面有超过200种算法，上千种的预训练的模型，已经有超过100多个国家和地区的开发者参与和使用OpenMMLab。在GitHub上，它的星数已经超过了PyTorch。同时，我们也基于AIDC去打造全球最大、拥有超过300亿参数的视觉模型。在 AI 决策方面，商汤联合上海人工智能实验室推出了OpenDILab决策AI平台。这也是结合了学术界和工业界最全面的决策AI平台。基于 OpenDILab，我们开发的 AI 模型 DI-star，在《星际争霸》 当中战胜了曾经的大中华地区冠军，跟世界冠军相比的话也是互有胜负，这都展示了 OpenDILab 强大的决策 AI 能力。决策 AI 平台也可以用到自动驾驶当中，去实现规划和控制。当前的自动驾驶，规划控制还是大多基于规则，靠人工去调整各种参数，编写各种规则。这带来的问题一个是驾乘体验不好，另外也没有办法通过大数据闭环，自动更新迭代智能驾驶中的规划控制。因此，我们将决策 AI 运用到自动驾驶中的规划控制，以期打造业内领先的自动驾驶解决方案。在自动驾驶权威的排行榜CARLA Leaderboard上，我们亦排名第一。在 AI 云方面，商汤在上海临港建设了AIDC，基于强大的AIDC，我们具备了智算、智控双重能力，为车辆实时保驾护航。  数据闭环能力赋能产品创新高效研发高速迭代基于 AI 云，我们为智能驾驶和智能座舱提供了数据闭环的能力，赋能产品的创新研发及高速迭代。

    从智能汽车终端，我们可以回流大量数据，这些数据无法通过人工标注来完成，无论是成本，还是效率都不能满足要求。而有了超大视觉模型，就可以自动对这些数据进行标注，标注好的数据又重新对车端 AI 模型进行训练和更新。那么对于一些当前表现不好的场景，我们也可以依托超大模型，从海量数据库当中做Hard Case挖掘，找到类似的场景和样本，对模型进行有针对性的训练，从而在较短时间让问题得到解决。  加速量产落地：合作车企30+、定点车2700万+台过去几年里，商汤绝影不断去拓展自身的生态圈，去推进 AI 技术规模化落地。目前，30多个车厂成为了绝影的合作客户，我们有超过50个生态合作伙伴，定点车的数量超过2,700万台。绝影的客户包括了全球品牌、国内品牌，还有造车新势力，以及众多的Tier 1（一级供应商）和知名芯片厂商。接下来，我就智能车舱、智能驾驶和车路协同三个方面，将绝影取得的一些成绩做如下阐述。在智能车舱方面，我们目前已累计发布了24款功能。2022年有6款创新产品行业首发，其中包括如多模交互、哨兵模式、智能救援、Air Touch、AR K歌、智能屏保等功能。同时，绝影智能座舱项目落地速度也在不断提升，我们目前有10+个行业产品首发，新产品研发速度提升50%，国内智能座舱视觉 AI 软件市场份额绝影排名第一，累计交付了超过40款车型。其中，仅今年就交付了20+款，交付量同比提升超过170%。在智能驾驶方面，我们以领先的技术能力，赋能头部车厂，实现广泛落地。近期，我们L2++自动驾驶量产方案，会在头部车厂和造车新势力中实现量产落地。我们的量产方案包括了如5Radar 7Vision的高速领航方案，当然也包括与车厂合作打造，即将到来的5Radar 7Vision 3Lidar的城市领航方案。方案覆盖了高算力平台NVIDIA Orin、Huawei MDC以及中算力Ti TDA4等。我们实现了业内首个双TDA4的方案，用于L2++自动驾驶。同时，我们也给众多的车厂提供了数据脱敏服务。此外，绝影还将全栈的驾驶能力和领先的感知技术，赋能重点客户，给客户提供数据闭环产品，其中包括标注、训练、评测、部署等一系列技术。而且，我们也提供相机和激光雷达的感知算法，以及全栈的自动驾驶算法，包括了多传感器融合、预测、决策规划控制、高精定位及泊车等。这些全栈能力支持了众多的场景落地，如高速公路的场景，城市复杂的场景，以及汽车“元宇宙”等。举一个例子，这是商汤绝影与广汽埃安合作的L2++自动驾驶解决方案，从广州到深圳100公里路程里完成一镜到底视频的拍摄，全程零接管。在这个视频中，我们也可以看到开启辅助驾驶的车辆自动去变道超车、上下匝道，去应对各种复杂的场景。  AI云助力智能汽车全局调度，驱动城市感知新范式我们也能看到，自动驾驶和智能车舱的驾舱一体融合，是未来智能汽车发展的核心趋势。商汤也是业内少数同时拥有这两方面能力的供应商。在产品方面，驾驶和车舱的融合能够带来更好的驾乘体验。智能汽车可以自动识别驾驶员的状态和意图，更好的实现人机共驾。现在，驾驶和座舱的智能化功能还是实现在不同的芯片平台、不同的域控制器上。未来，二者可以通过融合、实现在同一个芯片平台和计算平台上，这样可以大幅降低硬件的成本，提升开发效率，提升系统的安全性与可靠度。在车路协同方面，绝影推出了车、路、云一体化的产品矩阵。其中，商汤自动驾驶接驳小巴已经在上海、西安、无锡等多个城市开始常态化运营；今年还推出了自动驾驶无人清扫车等全新产品。基于强大计算平台，云控平台、边缘计算平台和车联网平台，商汤绝影可以将智能汽车终端和各种路侧终端结合在一起，实现“软件定义”的车路协同，让其真正得以低成本规模化铺开。Al云也在助力智能汽车全局调度，驱动城市感知新范式。我们将单车智能拓展到车路协同，能够把感知范围提升1000倍。AI云包括了数据连接与传输，数据挖掘，应用协同，中心云、区域云和边缘云等，可以实时多维感知、虚拟测试、信息汇总和数据闭环，去支撑路侧的智能感知和车路协同的云控。

    在此基础上，智能驾驶与 AI 云的结合，也可以去推动智能汽车和智慧城市的加速落地。在自动驾驶方面，单车智能必然有盲区，那么单车的优化决策不等于全局最优，基于软件定义的绝影车路协同产品矩阵，可以为单车智能规避99%以上盲区问题，并基于全局信息制定最优决策，为自动驾驶去提供新路径；在智慧交通领域，目前是存在强中心、重基建、轻应用的情况，协同的效率不高，服务能力不足，未来，我们通过软件定义的模式去推动车路云高效协同，推出新应用提升运行效率与服务能力，推动智慧交通的转型和升级；在双智城市维度上，单车作为移动感知源未被重视，车辆移动数据价值未被充分挖掘，所以未来，我们的智慧城市和智能汽车可以互为基础设施，汽车能够得以真正成为城市数字化移动终端，去全面赋能双智城市的建设。  跨场景智慧产业生态融合，为商汤绝影带来创新新范式商汤有众多的产品线、业务线和赋能场景，包括如智慧健康、智能网联、元宇宙、智慧城市、智慧交通、移动互联网、智能娱乐和 AI 教育等。这些跨场景智慧产业生态的融合，给绝影带来了创新的新范式。

    商汤的智能汽车业务不是作为单一行业存在的，而是与其他业务板块紧密融合，成为商汤智慧产业生态，在智能汽车上的一个重要出口。举例来说，正是因为这些跨界的融合，产生了如智能援助、虛拟助手、云控平台、车联网等一系列的创新产品。未来，绝影将持续推动跨界融合，提升我们创新的速度，把绝影创新的新范式不断推广，为我们的客户提供驾、舱、云三位一体的智能化服务。