考虑保证率约束的马氏决策规划和罚因子法

在水电站水库优化调度中，常用马氏决策规划寻求使平均年期望发电量达到最大的最优策略。但是这种策略往往不能满足所谓保证率的要求。本文对带有报酬的完全各态历经的马氏链，根据工程上使用的频率形式保证率的定义，给出它的概率形式的定义。从而把问题归结为一种随机性约束下的马氏决策规划。对于用罚因子法求解这一问题进行了研究，证明该方法的一些在实用上有价值的性质。最后推广到水库优化调度所需要的周期性的情况。     

连续时间首达目标模型(Ⅱ)──L最优问题

研究了连续时间首达时间及首达目标总报酬（非折扣）的Ｌ最优模型。给出新的ｋ阶矩简洁表示式；证明Ｌ最优模型可化为离散时间拟折扣期望报酬优化模型；给出Ｌ最优与Ｍ最优之间的关系与若干性质。     

马氏链首达时间反问题中矩的估计及其性能分析

提出了马氏链的反向问题中，在独立加性高斯有色随机噪声背景下，估计Ｍａｒｋｏｖ链首达时间各阶矩的统计方法。利用累积量的性质，得出了带噪样本的ｋ阶矩仅与噪声的方差有关，而与噪声的其它任意阶矩无关，并证明了用该方法得到的估计值具有无偏性和强相合性的统计性能。通过一个数值例子仿真了连续时间参数Ｍａｒｋｏｖ链模型的构造过程，得到的首达时间各阶矩的估计值及其分布函数的Ｌ－Ｓ变换比去噪处理前更接近无噪声情况，在理论和实验两方面验证了该方法的有效性。     

扩展随机神经网络及其概率结构特性分析

在Ｇｅｌｅｎｂｅ随机神经网络（ＧＮＮ）模型基础上,提出扩展ＧＮＮ（ＥＧＮＮ）模型。考虑信号释放强度依赖于神经元兴奋水平的情形,给出了ＥＧＮＮ的平稳分布。讨论了平稳分布存在的条件。在较弱假设下,ＥＧＮＮ仍具有简洁的“积”形式平稳分布,比原ＧＮＮ增强了调节平稳分布概率结构特性的功能,且能够表达更多的智能和生物特性。例举了它的联想功能。     

首达时间依分布最优模型与风险最小模型

研究了离散时间首达时间依分布（随机序）最优模型与风险最小模型。给出存在最优策略的若干充要条件及重要性质，证明最优方程序列存在唯一解，给出寻优的算法。证明了ｍ时段风险最小Ｅ最优策略必定存在。     

连续时间折扣模型最优策略的结构

本文研究了连续时间马氏决策规划折扣模型在（ｃ）上最优策略的若干重要性质和它的结构。由于引进了映像及，使证明大为简化。特别是证明了：一随机平稳策略，它在（ｃ）上是最优的充要条件是它可表为若干个决定性平稳最优策略的凸组合。