改进深度确定性策略梯度的决策算法研究

来源 :汽车实用技术 | 被引量 : 0次 | 上传用户:xiaoyanger88
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为解决无人驾驶路径规划过程中的决策控制问题,文章针对深度确定性策略梯度算法在未知环境中随着搜索空间的增大,出现训练效率低、收敛不稳定等缺点,提出了基于奖励指导的改进算法.首先在每回合内采用基于奖励的优先级经验回放,减少深度确定性策略梯度算法随机探索的盲目性,提高智能车学习效率.然后在回合间基于奖励筛选优秀轨迹,便于指导智能车对复杂空间的探索,得到稳定的控制策略.最后,在开源智能驾驶仿真环境进行仿真.实验结果表明改进后的深度确定性策略梯度算法性能优于原来的算法,训练效率和收敛稳定性均得到有效提升.
其他文献
随着汽车行业快速向智能化、网联化、电动化的方向发展,车载电子器件(ECU)在整车系统中逐渐增多,整车和ECU已经实现从物理方式到软件升级(OTA)的更新迭代.当前针对汽车的黑客攻击事件频发,OTA功能作为智能网联汽车的重要功能,也成为黑客的重点攻击对象.攻击者通过劫持、篡改、替换等攻击方法对智能网联汽车OTA升级链接发起攻击.文章基于当前智能网联汽车OTA升级架构进行安全分析,通过设计安全的OTA升级方案,提升整车OTA升级的安全性.
为了有效解决某量产新能源汽车压缩机使用过程中出现的接触器绝缘故障问题,文章通过实验确定故障主要原因是未考虑电动空调压缩机输入端滤波电容,导致空调压缩机启动瞬间有较大冲击电流,触点铜排烧蚀.对标几种畅销纯电动汽车压缩机控制回路,坚持改动最小且能有效解决问题的原则对量产车型电路进行整改,在现有空调回路中增加预充控制回路.文章分析结果为其他车型空调控制回路设计提出有效思路,避免因大电流冲击导致绝缘问题.
在一些特定的场合,如汽车在站台、码头等地方作业时,由于空间狭小,需要使用到转弯半径小、转向灵活的微型车.针对此种需求,论文设计出了一种新型的微型车四轮集中转向机构,通过CATIA软件DMU运动机构模块对该转向机构进行了运动学仿真分析.结果表明,设计的转向机构满足微型车的转向要求;将该转向机构应用于实车上进行试验验证,试验表明该机构能很好地完成转向功能.
基于深度学习的目标检测算法能够取得良好的检测速度离不开高性能GPU硬件设备的支持.然而,在智能车中搭载高性能、高功耗、大尺寸的硬件设备与汽车的长续航理念不符.因此,文章以YOLOv3目标检测算法为基线模型进行改进,提出轻量化的目标检测模型Mobile-YOLO,并在采集制作的地下停车场数据集中进行训练测试.实验结果表明,提出了Mobile-YOLO相较于YOLOv3,在平均精度均值略微提升的情况下,检测速度提升了47.1%.在移动端平台TX2上每秒能够检测31张图像.
针对燃油经济性问题,论文以非道路单缸风冷170F汽油机为研究对象,高热效率为核心目标,运用仿真软件对燃烧室形状和压缩比进行优化.在保证不发生异常燃烧的前提下,使用CONVERGE建立仿真模型,并设计仿真了四款高压缩比燃烧室对发动机性能的影响.通过对仿真数据的具体分析来确定较为理想的燃烧室模型.研究结果表明,在自身小型强化技术进一步完善的前提下,可考虑轻微爆震的压缩比情况,此时压缩比为10.5,整机指示热效率较原机提升46.61%,理论燃油消耗率下降至252.69 g/(kW·h),较原机下降31.79%.
为保证FSEC赛事的公平性与安全性,大赛制定了严格的规定,其中,安全回路是保证赛车电气系统安全的最重要环节,在整车高压部分设置预充电回路,可以有效缓解在赛车上高压过程中产生的巨大压升,进而保证动力电池与整车电气安全.论文根据电路基础理论知识计算得出预充电阻与预充继电器的具体参数,利用Simulink软件仿真赛车高压上电过程,设计预充电回路的布置方案,对比设置预充电回路与未设置预充电回路的上高压过程的不同,验证设计效果.最终,将设计成果运用于实车,展现出了良好的准确性与鲁棒性.
随着对汽车车内噪声评价的深入研究,发现传统上只用A计权声压级对车内噪声进行评价有很多不足,不能反映人们对噪声的主观感受.文章对人耳生理基础及心理声学进行了研究,引入了响度这一心理声学客观参量对车内噪声进行评价.对响度计算方法进行了研究,建立了Zwicker响度计算模型,并用Matlab实现了其计算.选取一段纯电动汽车在加速工况下的声音样本进行计算并与Head Artemis软件计算的结果进行对比,误差很小,证明了程序的正确性.
随着智能网联汽车通讯总线越来越丰富,传统的CAN通讯总线安全暴露的风险越来越高.当前亟需对车载网络进行信息安全防护,以提高车载通讯的隐私性、准确性、可靠性等.文章主要介绍了车载网络的安全防护原理,通过引用加解密算法、新鲜值信息、身份校验等相关技术,将车载网络安全防护做到低成本,短周期快速有效地防护应用,提升智能网联汽车信息安全防护水平.
随着物流行业的迅速发展,物流运输车辆不断增加,而传统燃油汽车的使用对环境造成了一定的压力,近年来,物流电动汽车由于其节能环保的特性,得到了广泛的应用.然而由于电动汽车的充电时间较长以及运输行业的发展现状,电动汽车目前无法完全取代传统燃油汽车,两种车型同时存在于物流配送领域.文章针对半开放式多配送中心的燃油汽车和电动汽车混合车型的车辆路径优化问题进行研究,同时考虑了客户需求量、车辆载重量以及电动汽车的充电需求等约束条件,以碳排放成本、运输成本以及时间窗惩罚成本之和最小为目标建立线性整数规划数学模型,针对该问
为了实现悬架俯仰刚度和侧倾刚度的独立调校,文章对一种双横臂解耦悬架进行了优化分析.运用CAXA和UG等软件确定悬架各硬点初始的坐标,并建立三维模型,利用Adams/car对解耦悬架进行运动学仿真,研究摇臂的几何结构对悬架传递比和解耦度的影响,并对摇臂的几何机构进行优化和校核,最后采用Adams/car insight模块对解耦悬架的前轮定位参数进行优化.优化结果显示,前悬的俯仰刚度和侧倾刚度关联度小,且车轮参数变化理想,满足了设计要求,这对FSAE赛车的解耦悬架设计提供了理论基础,具有参考意义.