基于强化学习的电磁悬浮型磁浮列车悬浮控制

为了保证磁浮列车的安全、可靠运行,研究了悬浮系统在参数摄动条件下的悬浮控制问题。首先,对电磁悬浮（EMS）型磁浮列车的基本悬浮单元建模,给出了电流控制模型;然后,建立了悬浮系统的强化学习环境以及软演员-评论家（SAC）智能体,并设计了加速训练的奖励函数与“吸死”处理方案;最后,提出了基于强化学习的悬浮控制方法。与传统比例-积分-微分（PID）控制方法的对比结果表明,本方法具有更快的动态响应,在损失50%线圈匝数或磁极面积变化时具有更好的跟踪精度。     

融合电池温度和寿命的深度强化学习PHEV能量管理策略

针对当前插电式混合动力汽车能量管理策略忽略电池老化成本和电池温度变化过大而导致的热失控问题,制定融合电池寿命和电池温度的深度Q-Learning神经网络(DQN)强化学习能量管理策略.首先,从融入能量管理策略的角度,建立动力电池热模型和老化模型,引入调节目标价值函数的严重因子和量化电池老化程度的安时通量.其次,建立由超温惩罚、等效电池老化成本和燃油消耗组成的目标价值函数,进而构建深度强化学习能量管理策略.最后,通过仿真实验对所制定的控制策略进行验证.结果表明：融合了电池老化和电池温度的能量管理策略能够有效抑制电池老化和温度.在4个随机工况中,DQN策略下的电池有效安时通过量相较于CD-CS最大下降了35.75%;与CD-CS相比,DQN策略下单个驾驶任务的行驶总成本最大降低10.36%,证明了所制定策略的有效性.     

强化型硫铁矿自养反硝化工艺深度处理城市二沉尾水研究

为实现硫铁矿自养反硝化工艺快速启动,提高出水稳定性,将以硫铁矿为填料的硫自养反硝化生物滤池反应器(1号反应器)作为对照组,分别构建了以硫铁矿/石灰石和硫铁矿/硫黄为填料的强化型硫铁矿生物滤池反应器(2号、3号反应器)处理城市污水处理厂二沉尾水,从去除效果、出水水质的角度来评价强化工艺的可行性,并通过微生物群落分析来探究强化工艺的强化机理.结果表明：当反应温度为31～33℃,水力停留时间(HRT)为2.2 h时,3个生物滤池反应器总氮(TN)去除率分别为91.3%(1号反应器)、84.5%(2号反应器)、100%(3号反应器),出水TN浓度均小于5 mg/L;总磷(TP)去除率分别为91.4%(1号反应器)、85.0%(2号反应器)和100%(3号反应器),TP去除效果随TN去除效果的提升而提升;出水pH基本均能维持在6.8～7.6,体系内硫酸根生成量较低,维持在4.99～5.91 mg(每mg NO^-₃-N).Thiobacillus作为硫铁矿自养反硝化工艺的核心功能菌属在3号反应器内占据优势地位.以硫铁矿/硫黄为填料的生物滤池反应器不仅可以...     

基于深度强化学习的无人机自组网路由算法

针对无人机自组网节点密度大、拓扑变换频繁,导致移动自组网复杂的问题,提出了一种基于深度强化学习(deep-reinforcement learning, DRL)的分布式无人机自组网路由算法。利用DRL感知学习无人机特征,使节点不断与环境交互、探索学习最优行动(路由)策略;通过存储经验知识,维护端到端路由,赋予无人机网络智能化重构和快速修复的能力,从而提高路径的稳定性,降低路由建立和维护开销,增强网络的鲁棒性能。仿真结果表明,提出的算法具有较好的收敛性能;在路由修复时间、端到端时延,以及网络适应性、扩展性方面都优于传统的路由算法。     

一种无先验地图的移动机器人导航方法

为了提高移动机器人在复杂环境下的无先验地图导航算法模型训练速度及导航成功率,提出一种基于深度确定性策略梯度(deep deterministic policy gradient,DDPG)的移动机器人导航方法。利用2D激光雷达的均匀分布测距信息,降低环境噪声的干扰及高维度环境信息的计算量;采用人工势场法构建移动机器人从初始位置到目标点过程的奖励函数;通过Actor-Critic网络结构提高模型训练的稳定性和泛化能力。实验结果表明,提出的方法具有模型训练速度快、导航成功率高及泛化能力强等优点。     

42CrMo钢离子氮化—沉淀强化组织结构的研究

研究了42CrMo钢离子氮化—沉淀强化的组织结构,结果表明,离子氮化层的组成为ε、r＇a_N、Fe_3C和少量Cr_2N、Mo_2N、CrMoN_x及a";经时效处理后,ε相和a_N相弥散析出Cr_2N、Mo_2N和a" 。325℃时效,CrMoN_x消失;500℃时效,Mo_2N大大减少。a"、Cr_2N和Mo_2N弥散共格析出,必将使氮化层强化。     

激光强化金属材料表面工艺规范问题

本文了金属材料表面激光强化处理的工艺规范选择原则,提出了制订激光强化处理工艺的分析方法。对激光强化表想方设法 研究具有一定的参考价值。     

加热速度对煤的气化反应性的影响

实验室条件下考察了五种不同类型的煤经不同加热速度处理后,煤中碳对ＣＯ２化学反应性及单位质量碳的气化反应速度常数－－特殊反应速度常数的变化规律。研究结果表明：适于直接还原回转窑窑头喷煤用的高挥发分煤,经不同加热速度处理后煤中碳对ＣＯ２化学反应性和特殊反应速度常数发生明显变化,随加热速度增大而明显增大,这一研究结果为直接还原回转窑窑头喷煤强化还原的机理研究提供了依据。     

交错波纹板原表面换热器通道内对流换热的数值研究

对具有正弦波形通道交叉排列的原表面换热器多通道单元内三维稳态层流流动与换热特性进行了分析，利用数值模拟方法探讨了上下波纹板交错角θ、波纹相对节距P／H(波长／波高)及雷诺数RP对流动与换热性能的影响．结果表明：在入口段流动与换热性能的变化较大，此变化在沿主流方向第4个单元后基本消失；在水力直径基本相同的前提下，阻力系数厂及平均努谢尔特数Nu随θ的增大而增大；f及Nu在P／H为1．5～3．1的范围内随P／H的增大而增大，在RP大于900及P／H为3．1～4．0时随P／H的增大却开始减小；壁面局部Nu的最大值发生在主流尾部以及与流体出口邻近的2个入口处附近，最小值在上下波纹板的接触点上产生。     

强化企业技术创新 构建晋江产业集群

随着经济的发展，在新经济生态版图上，其构成单元是产业集群。集群的升级或退化是区域经济生态演化的一项主要的内容和风景，国家经济、区域经济、都市或城镇经济，要么包含若干个集群，要么就是一个集群或集群中的一部分。打造有影响的产业集群是区域经济增长和社会发展的战略要点。我市要提高综合竞争力和环境的吸引力，建设现代化的工贸港口城市，就要考虑这样的问题：从国家战略和本地实际上看，本市在国际上较有影响的产业该是什么？这样的产业可能有几个？也就是说，可形成几个什么样的产业竞争力和要素吸引力的母体——集群。