自适应学习率的增量强化学习飞行控制

针对预先设定学习率的增量强化学习(IRL)飞行控制律失败率较高,并且无法适应飞行器大范围动力学特性变化下的稳定控制问题,提出一种自适应学习率的增量强化学习(ALRIRL)控制方法.首先,基于小波分析方法构造控制系统稳定度评价函数,用于评估控制器稳定度.然后,基于梯度下降法设计学习率在线迭代计算方法,以提升强化学习控制器...     

喷管喉衬背壁绝热层后效传热炭化分析

针对目前喷管喉衬背壁绝热层后效传热炭化缺乏定量分析的现状,通过材料模型、载荷模型的研究工作,建立能够满足喷管后效传热分析精度要求的喷管温度场有限元计算方法,并通过缩比试验喷管温度场计算与试验测试结果的对比分析进行验证。在此基础上,开展了背壁绝热层后效传热的仿真分析,掌握了后效传热炭化分析方法,并得到了解剖测试结果的验证。研究结果表明,背壁绝热层的炭化大部分发生在后效传热期间。利用该方法进行了全尺寸喷管的背壁绝热层后效炭化分析工作,提出了根据温度计算结果进行裕度评估的方法。评估结果表明,全尺寸喷管的背壁绝热层设计厚度有减薄空间。     

鲁棒强化学习及其在航天控制中的应用与展望

针对强化学习(RL)中存在的鲁棒性问题,综述了鲁棒强化学习(RRL)的研究进展和在航天控制中的应用与展望.首先阐释了鲁棒强化学习的基本内涵;然后从引入H∞控制理论的鲁棒强化学习、域随机化方法、鲁棒对抗强化学习3个类别分析总结了鲁棒强化学习研究的主要方法;最后分析了鲁棒强化学习在航天控制中的应用,并面向未来复杂化、智能化...     

圆形肋柱通道强化换热流动机理实验研究

圆形肋柱广泛应用于涡轮叶片内部尾缘强化换热通道.针对圆形肋柱通道强化换热流动机理开展了实验研究,利用PIV技术得到相同雷诺数Re(1.0×104或2.0×104)下通道中心面的流场分布,并与稳态液晶测温实验得到的通道端壁努塞尔数Nu分布进行对比.结果表明:对于圆形肋柱通道,肋柱下游尾迹区后横向速度脉动强度分布和端壁Nu...     

空间飞行器控制软件的动态自适应演化方法

空间飞行器在太空飞行过程中需要满足多任务、多工作模式以及大范围机动的需求,其控制系统在大范围机动飞行条件下存在大量的外界干扰和内部参数不确定,同时飞行器的自适应过程受限于资源,人工干预难度大,并且现有的成熟的动态自适应方法并不一定适合空间飞行器控制软件进行自主控制,所以目前对自主控制系统软件的动态自适应调整方法提出了更...     

基于态势评估及DDPG算法的一对一空战格斗控制方法

已有的空中格斗控制方法未综合考虑基于专家知识的态势评估及通过连续性速度变化控制空战格斗的问题。基于深度确定性策略梯度（DDPG）强化学习算法,在态势评估函数作为强化学习奖励函数的基础上,设计综合考虑飞行高度上下限、飞行过载以及飞行速度上下限的强化学习环境;通过全连接的载机速度控制网络与环境奖励网络,实现DDPG算法与学习环境的交互,并根据高度与速度异常、被导弹锁定时间以及格斗时间设计空战格斗结束条件;通过模拟一对一空战格斗,对该格斗控制方法在环境限制学习、态势评估得分以及格斗模式学习进行验证。结果表明：本文提出的空战格斗控制方法有效,能够为自主空战格斗进一步发展提供指导。     

面向体系对抗的电磁环境模拟技术研究

电磁环境模拟技术广泛应用于装备论证、研制、试验、演习等专业领域中.针对未来体系对抗的研究需求,从近年来的模拟实践出发,重新剖析了当前模拟技术的研究差距,归纳了存在的共性问题.在已有的模拟技术体系基础上,构想了总体目标愿景,提出了一种新的思路,即采用"深度强化学习+云边结合"的技术框架来开展体系对抗背景下的电磁环境模拟技...     

热气防冰参数对机翼表面溢流结冰的影响研究

机翼热气防冰数值模拟中,根据N-S方程求解流场,用Euler法获得水滴撞击特性,通过蒙皮导热将求解得到的内外流场进行耦合传热并达到稳定后,开始模拟结冰,来进行机翼热气防冰及形成溢流结冰的数值计算。计算结果表明,热空气防冰数值模拟是可行和合理的。采用数值模拟方法对机翼热空气防冰过程进行了模拟,得到了由于引气温度不足或机翼热空气保护面积不同而导致的不同溢冰高度和位置。分析了供气温度、防冰区域对翼面溢流冰形成的影响。结果表明：供气温度直接正向影响热交换后蒙皮表面温度。供气温度越低,溢流冰形高度越高,对气动特性影响也越大;热防护区域范围对溢流结冰结果也会产生影响,热防护区域越大,冻结位置距离驻点越远,而且冰形高度越低,对气动特性影响也越弱。     

突片作用下气膜冷却对流传热特性的试验研究

为了研究突片对气膜冷却的影响规律,设计了3种不同堵塞比的等边三角形突片,并对其对气膜冷却特性的影响规律进行了实验研究.研究结果表明,与无突片的气膜冷却相比,突片的存在提高了对流换热系数,在吹风比0.5～0.78时,堵塞比为0.1时气膜冷却对流传热系数最高;当吹风比为1.22～1.5时,堵塞比为0.27时气膜冷却对流传热系数最高.但突片的存在也增大了气流在气膜孔中的流动阻力.     

基于深度强化学习的高超声速飞行器动态面控制方法

针对高超声速飞行器控制问题,通过将深度强化学习与动态面控制方法相结合,设计了智能姿态控制算法。首先,基于模型先验知识,采用传统的动态面控制方法设计控制器结构。然后,考虑跟踪误差和控制量幅值约束的情况下,采用深度学习算法完成对控制器参数的智能寻优,代替传统设计中的人工调参试错过程。为提升训练效果,在奖励函数中引入了控制量变化率。最后,通过数值仿真验证了所设计控制方法的有效性与鲁棒性。