“商汤科技郑祺文：全能感知 畅想驾驶 见证出行方法新变革”

9月28日-29日，“中国车谷2021智能车产业创新论坛”隆重举行。 本次论坛由武汉经济技术开发区和东风汽车集团有限企业共同主办，武汉市智能车产业创新联盟和盖西汽车共同主办，主要围绕智能车创新快速发展的主题展开，包括人机驾驶、地图定位、人工智能和芯片、仿真 论坛期间，商汤科技AIICV事业部副社长郑祺文发表演讲称:“希望以全能的感知见证移动方法的新变革。” 复印件如下。

大家好。 非常荣幸参加“东方风起航领航智能驾驶过渡”中国车谷2021智能车产业创新论坛。 我是商汤科技AIICV事业部的郑祺文副社长。 今天和大家分享的是“想全能感知地驾驶，见证移动方法的新变革”。 等级l4自动驾驶的处理计划，以及我们推进的adas整体的处理计划等，是整体共有的要点。

让我简单介绍一下商汤科学技术。 商汤科技是世界领先的人工智能软件企业，拥有亚洲最大的人工智能研发团队。 我们在20多年的研究历史中，积累了丰富的ai行业人才，现有250+人的人工智能博士，40+人的教授，3500+人的ai研究者和工程师队伍。 我们在计算机视觉行业三大顶级对外发表的论文超过500篇。 目前，我们在四大业务板块(公司服务智能化、城市管理智能化、个人生活智能化、汽车出行智能化)上做了相应的落地，在全球15个国家和地区开展了相应的业务，有2400+领域的顶级客户。

人工智能的迅速发展离不开巨大的计算力平台的支撑。 商汤从创立之初就自建了超大规模超计算集群和分布式训练数据系统，通过平台性创新和自主开发的基础算法链，加速了各种算法的开发和落地。 通过这样大规模的集群，我们可以迅速推进人工智能APP的落地。

原创在人工智能行业很重要，商汤拥有自己的技术实力，构建了原创的深度学习框架senseparrots。 作为未来的学习框架，与现有框架相比有很多特点，支持动态图的并发运行，支持卡路里级联合训练、大规模集群的灵活通信、多种异构解决方案，紧密结合工业级的部署，

智能车行业在2021年世界人工智能大会上，商汤科技发布了智能车平台独立新企业品牌senseauto绝影，首次展现了完整的布局。 从研发维度来看，商汤绝影已经连续几年取得许多国际赛事的顶级成绩，技术展涵盖了智能车的方方面面，包括不同场景的感知、定位、自主导航等技术。 在一点动画分割、实例分割、图像强调、动作识别等方面有一定的积累。

在研发过程中，商汤的绝影提出了横一竖的概念。 我们基于senseparrots构建了自己的算法平台，使视觉感知、激光雷达和多传感器融合感知的应用成为可能。 这些APP最终落地于我们车道的协同、自动驾驶、辅助驾驶等场景。 由于积累了如此强大的深度学习平台，我们的各项技术可以进行快速迭代，而且我们可以在不同的领域应用，快速落地，领先。

自动驾驶感知平台，我们也在不断地发展和迭代技术。 在许多技术行业，我们也处于行业领先地位。 例如，我们远距离的超稳定正面视觉感知，是30度8m的像素摄像头，可以清晰地识别600米的车辆和300米的行人，可以确保相当高的精度。 另外，稳定的多视角感知通过360度的多视角传感器，提供相应的感知冗余度。 前后传感器的信号融合，使我们的结果更加准确和稳健。 丰富的长尾感知场景，使我们能够相应感知极端天气，对遮挡、遮挡、异形车的困难样本，具有很强的识别能力。 多平台深度优化沉淀、量化工具链可以加速模型的推导。

在这个进化过程中，我们积累了丰富的平台适应和性能优化的经验，我们也建立了自己的真值系统，有自己的评价体系。 通过功能评价闭环、模型迭代闭环，实现数据闭环，真值系统可以更快地积累大量比较有效的数据。

在这里，我给大家展示一下纵向全栈智能驾驶模块水平的技术方案。 关于感知，有多传感器融合3d感知，决定了控制系统规划具有相当高的适应性、智能性和安全性。 关于预测，有多模态预测框架，可以进行多模态行为的预测。

而且商汤具备高度自动化的高精度地图绘制能力，我们的车辆可以在运行中绘制高度自动化的地图。 有多传感器融合定位，支持10种对应的组合模式。 自研的预控制器可以访问多种设备，进行多传感器数据的交互式解决。 另外，我们在全栈智能驾驶系统中，商汤也具备了完善的测试和仿真体系，我们积累了大量的测试数据，试题测试场景库1万+； 测试数据量达到了400tb。

对于制造汽车领域的小产品，商汤一直怀着敬畏之心。 在此过程中，商汤将持续进行能力认证建设，根据车规质量体系完成业务，认真贯彻流程的每一步，在算法实现、产品交付上形成严密的体系，对顾客负责，保证顾客的满意度。

我们坚持建设开放共赢的生态环境。 目前，我们与30+汽车厂形成了一点合作关系。 而且，我们也在扩大一部分生态伙伴。 我们始终相信建立良好的生态环境才能有可持续的快速发展。

这里介绍我们智能移动的产品和一点点的处理方案。 在智能驾驶方面，商汤有两个方向的配置，一是批量生产处理方案，其次是l4级智能驾驶远程信息处理方案。

批量生产处理方案包括pilot—v和pilot—p方案。 pilot—v的整个算法识别度很高，能够适应多种算法平台。 这也是我们的一大特点，我们可以在国家标准上，根据要求，根据平台，根据水平，进一步优化。 pilot-v视觉感知产品将商用车场景放在首位进行比较，可以准确识别200米以内的车辆和150米以内的行人。 在不降低性能的情况下，可以实现100元级别的低价产品。

pilot—p导航产品使用多传感器融合感知，实现360度全域感知，可以稳定识别前方600米以内的车辆、300米以内的锥形桶、150米以内的交通信号灯； 此外，还可以拓展激光雷达融合处理方案，提高整车的感知能力。

我们把相关功能分为l0、l1—l2、l2+三个不同的等级，在这个过程中，我们的l2+导航驾驶功能可以实现超车自动进路变更、导航自动进路变更、工程区域通行等相应的功能。 下面展示的是我们飞行员驾驶方案的场景感知视频，包括对我们街道道路、行人意图的识别、制动灯、转向灯的识别、施工区雪糕筒的识别、道路分离点和道路边界等适当场景的识别和预判。

l4级自动驾驶远程信息处理产品板块包括三个重要产品。 自动驾驶连接栏、自动驾驶ar栏，还有智能道路联合云控制平台。

传感自动绝影处理方案是基于多车型软硬件开发的平台，该平台有三个方面的特点。 首先，我们提出多信号融合感知，这个感知平台可以分解为不同功能的子模块，这些子模块可以根据我们的项目诉求迅速集成，举个简单的例子，我们看到的辅助驾驶产品 如果我们的摄像头感知、激光感知、毫米波感知融合在一起，就可以构成我们的l4级自动驾驶感知方案。 如果我们切换车型的话，随时可以进行一系列的修订。 其次，我们提出了统一的硬件平台。 在这些硬件的前期，我们已经进行了适当的选型和匹配。 根据车型的不同，只需选择最佳的布局位置，就可以进行有效的移植。 最后，模块化体系结构定位了比各种需求更高效的功能，通过快速分解和组合合适的功能模块，构建了统一的软件平台，实现了项目快速响应。 根据这三个特点，我们可以将自动驾驶技术迅速移植到轿车、小酒吧和未来的其他车型上。

这里将展示我们降落在江苏无锡远程信息技术试验区的自动驾驶酒吧的实际运行视频。 可以看到，该酒吧位于公开道路上，在许多拥挤的交通场景中可以正常运行。 小型总线的硬件结构比较简单，加装了l4级自动驾驶系统、v2x车载终端、hmi人机交互系统。 另外，该车具有智能网络功能，可以访问我们的远程信息处理云，接收来自云端的相应消息，帮助车方进行较为有效的评估。 在设计过程中，我们也配备了安全保障模块以保证我们整个自动驾驶系统的安全性和可靠性。 将来，我们这个小酒吧也会在全国各地进行适当的配置，更快地体验自动驾驶技术给移动带来的变化。

自动驾驶酒吧融合了商汤原创的增强现实技术，创造了自动驾驶ar酒吧。 这辆车适用于产业园区、景区、主题公园等场景，很容易看到，这是我们实际运行的效果之一。 我们通过车内的显示器，结合我们的ar技术，可以直观地表现出产业的快速发展、经济规划、科技文化等的多元拷贝。 可以提高乘车体验，更好地达到推广展示的效果。

我们为了更好地实现车路协同的相关功能，我们也开发了智能车路协同云控平台，做出了“车陆云一体化”的协同监管、拆解决策。 该平台实现了车路设备的统一管理，可以提供监管服务、数据服务、移动服务，相关数据可以比较有效地解决，具备记忆、融合和分解等功能。 当然，与其运营监控中心，还不如提供可视化的展示功能。

以上是我们商汤科技在ICV方面与大家共享的文案。 谢谢您的聆听。 谢谢你。