标签: 汽车控制

背景：“国六”——新的标准和挑战 为进一步强化机动车污染防治，控制实际行驶过程中的排放，环境保护部、国家质检总局出台了 国六法规 ， 规定所有汽车均应按照法规要求进行RDE试验。 国六，即“国家第六环节机动车辆空气污染物环保标准”，被分成“国六a”和“国六b”两个阶段，国六b将于2023年7月1日在全国各地统一执行。法规对一氧化碳、非甲乙烷、氮氧化合物及其PM可吸入颗粒物的排放标准益发严苛。 国六b比 国六 a更严 ‍ RDE：Real Driving Emission，实际道路排放 ，是指车辆在实际道路上行驶时的污染物排放。通过使用车载便携式排放设备PEMS(Portable Emission Measurement System)对所有车辆在实际道路行驶条件下进行排放测试。 RDE 实际道路排放试验 “国六b”法规规定 所有汽车均应按照法规附录测试要求进行RDE试验 ，试验结果市区行程和总行程污染物排放，均不得超过I型试验排放限值与规定的符合性因子（Conformity Factor，CF）的乘积，计算过程中不得采用四舍五入。 RDE试验带来的挑战： 1. 驾驶员行为（驾驶风格等）差异大； 2. 外部环境（温度、海拔等）不可控因素多； 3. 依靠人工经验难以覆盖各种变型配置项目； 4. 转毂测试条件较为单一，很难进行完整的验证与标定； 5. 试验占用资源多，费用昂贵、周期长、难度大。 解决方案 ‍面对这些挑战，在确定了委托方需求之后 ，不依赖于已知的某种物理方程的专家模型，而是通过机器学习方法，应用自主研发数据驱动强化学习算法工具包「仙启」Revive，来构建与现实排放和动力学表现相符的虚拟模型。 这个方案旨在避免大量实车道路测试， 充分利用有限的资源，迅速适应不同车型（动力总成）的开发需求，快速找到最恶劣的RDE排放工况， 来证明车型是否可以满足RDE法规要求 相较传统方法，这个方案能够： 1. 更为完整地覆盖法规定义的RDE工况域， 避免大规模重复进行RDE试验 ； 2. 可进行 较长时间、可交互的整车动力学、气体排放等动态虚拟仿真 ； ‍ 3. 与实车的动力性能高度匹配， 工况表现能够在实际道路试验中成功复现 ； 4. 大大 降低整车在排放标定开发阶段的经济成本、时间成本以及人力成本 。 此外，它还提供了 法规约束边界库 ，可以按照法规要求的更新对约束条件进行调整。同时，还可以根据最新数据，对策略进行及时更新，以适应不断变化的真实业务场景。 案例和成果： 2022年，某汽车研发中心希望南栖仙策帮助缩短某款车型的研发周期，该方案大大降低了真实道路环境下的需要进行的测试次数，提高了动力系统的开发和验证效率。 在本案例中，我们导入的是RDE 5600 秒采数据： ‍ 秒采数据示意图 经过在 「仙启」 Revive中建模和训练，我们可以看到， Revive算法呈现的 虚拟仿真模型与真实环境的拟合的效果良好 。我们还与传统监督学习的行为克隆方式做了比较，通过对比， 能够更直观的看出，强化学习构建的 虚拟模型与真实动力学和道路排放的结果有多惊人 ：‍ ‍动力学模型： 车速模拟与真实数据对比（训练集） 发动机转速模拟与真实数据对比（训练集） 发动机扭矩模拟与真实数据对比（训练集） 车速模拟与真实数据对比（验证集） 发动机转速模拟与真实数据对比（验证集） 发动机扭矩模拟与真实数据对比（验证集） 排放模型： CO排放模拟与真实数据对比 CO2排放模拟与真实数据对比 NOX排放模拟与真实数据对比 PN排放模拟与真实数据对比 ‍ 通过虚拟环境的构建和验证，我们可以看到，Revive基于强化学习的核心算法仿真的准确性，相比于行为克隆（一种基础监督学习技术），预测误差 显著 降低 。这得益于南栖仙策在 基础模型理论 和 因果泛化理论 上的学术突破，使得Revive 可以进行更长时间步的序列推演 ，从而使 虚拟仿真结果覆盖面更广，也更精确 。 在完成验证之后，接下来我们就可以在仿真环境中进行策略训练和优化，找到最恶劣的RDE排放工况，检查是否符合法规标准。 这是我们在本例中通过模型找到的最恶劣排放工况，可以看到，即便在如此恶劣的驾驶工况条件下，这款车型的动力和排放系统也可以满足法规要求。 动力学工况与法规约束 效果图 解读强化学习 ： 人们对于强化学习的了解，或许还停留在AlphaGo名噪天下的时候，早期的强化学习虽频频取得超越人类的优秀表现，却只能局限在封闭环境。现在，强化学习正在从游戏环境走向实际的应用，与多学科交叉融合，一次次逼近极致，完成一项项看似不可能的任务。

在“双碳”大趋势下，燃油汽车亟需提高技术指标，以面对愈发严格的整车性能标准考核及市场份额的持续下滑趋势。标定是汽车研发的关键环节，直接影响汽车的技术指标，然而传统基于专家或模型的标定方法耗时长、成本高，并不能化解车企面临的困境，而新兴的AI技术可提供超越传统的高效解决方案。 强化学习AI智能决策应用者，在汽车标定业务上，将强化学习技术与汽车标定场景充分融合，摸索并总结出数据驱动的虚拟标定解决方案，旨在高效、高精度、低成本地完成标定业务。南栖仙策汽车交付团队基于强化学习研发的技术优势、服务汽车行业客户的经验，结合整车转鼓排放标定、混动标定两个实际案例，编写了《汽车虚拟标定白皮书》（以下简称为《白皮书》），展示了最新强化学习应用技术带来的AI能力，以及帮助汽车行业客户提升核心竞争力的潜力。 《白皮书》分为三部分进行阐述 第一部分：概述整车标定概念及车企面对的四大行业难题。 《白皮书》总结了汽车行业客户常面临的标定难题： 1.标定复杂度高，标定参数多达上千个。人工联合调优难，性能“将就”。 2.强烈依赖经验，需要经验丰富的工程师。人员易流失，经验随之带走。 3.试验成本高昂，物理实验开销难降低。研发成本难降低，挤压利润空间。 4.迭代周期冗长，需多次反复迭代试错。拖延产品发布，耽误市场时机。 除以上4点外，近两年受新冠疫情的影响，标定实测工作常常中断，严重影响了业务进展。 第二部分：介绍强化学习工具的不同与优势 全球领先的数据驱动强化学习工具REVIVE提供的数据模拟环境和强化学习优化可有助于解决车企面临的标定难题。REVIVE是面向行业专家的强化学习工具，通过数据驱动环境虚拟技术，进行大量虚拟推演与试错，寻找最优方案。 REVIVE基于汽车标定数据模拟环境的强化学习解决方案过程: REVIVE方案主要分为四步： 首先 在人工标定参数的实车验证实验中收集对应的性能状态秒采数据并进行简单的数据整理； 然后 根据汽车控制基础逻辑构建业务模型，导入数据，使用REVIVE系统中的环境模型训练功能，训练控制逻辑图中所有的神经网络模块，得到可运行的“数据仿真车”， 并使用可视化评估指标验证虚拟环境与真实环境的一致性； 再 使用REVIVE系统中的策略模型训练功能，得到优化后的标定参数； 最后 将优化后的标定参数在虚拟环境中验证，评估有效则上载到汽车进行 实车验证。 图为：REVIVE基于数据模拟环境的强化学习解决方案过程 第三部分：结合发动机整车排放标定、混动标定两个案例，介绍REVIVE成功应用方案。 《白皮书》实例证明，独特的AI虚拟标定技术可显著降低汽车尾气排放值。与人类工程师相比，THC降低了51%，CO降低了29%，NOx降低了18%，优于国六排放标准，并为后续车辆设计环节提供了充足的排放余量。 在串并联混动系统标定任务上同样成功。在起点—终点电量相同的约束下，能优化得到更合理的利用电池电量容量、更高效的利用发动机最优工况特性的混动策略，使得整车在WLTC实验中取得更低的油耗。 朋友们可通过“点击头像-私信-留下邮箱”获得 《汽车虚拟标定白皮书》 原文件。