鞅逼近与预解式表示收敛的几个定理

通过引入平稳遍历Markov过程的鞅逼近和S_t(f)的预解式表示, 给出并证明了S_t(f)存在鞅逼近当且仅当预解式表示收敛, 对于Markov链有相应的公式化结果. 表明通过预解式构造平稳遍历Markov过程加性泛函的鞅逼近方法在此意义下具有普遍性.     

产生随机数的新方法

总结了随机数产生的一些方法,并利用马尔可夫链给出了一种随机数产生的新方法.由于过程中转移概率矩阵产生具有随机性,同时服从区间(0,1)上均匀分布,产生的随机数也具有随机性,故双重随机性保证了状态空间中随机数的产生具有更好的随机性.     

基于分层马尔可夫决策过程的AUV全局路径规划研究

自主路径规划是自治式水下机器人(AUV)自主能力的重要体现,是保障AUV在大范围复杂海洋环境中自主完成使命作业的关键技术之一。提出了基于马尔可夫决策过程的路径规划方法;并建立了基本的马尔可夫决策模型和结合状态聚类的分层马尔可夫决策模型,同时给出了两种规划的仿真实验及结果分析。实验证明,此类方法能够很好地求解大范围复杂环境内AUV的二维路径规划问题。     

基于GSPN方法的柔性制造系统过程模型和性能分析

应用广义随机Petri网方法,对柔性制造系统进行建模和分析,提出了控制策略和优化方法.针对柔性制造系统的离散性,对整个系统的过程模型进行分析.利用广义随机Petri网结合马尔可夫链的方法,确立了系统的配置参数,得出了系统的平均运行时间,机床的平均使用率,系统的生产率,故障概率,对系统的优化和生产效率的提高以及柔性的提高提供了理论支持.最后,通过柔性制造系统实例,对该方法进行了检验.     

跳变时滞随机系统的鲁棒保性能控制

研究了马尔可夫跳变参数时滞随机系统的鲁棒保性能控制问题。通过构造一个Lyapunov函数,并应用Ito微分公式沿系统对其求微分,再利用线性矩阵不等式(LMI)的性质和广义Ito公式,给出了此类系统保性能控制律存在的充分条件,估计了其保性能值,同时,控制器的设计归结为一族LMI的求解问题。最后,数值算例说明了方法的有效性。     

机群出动能力的Markov模型

以往在评估武器装备的效能时,只注重其基本性能和作战能力,而忽视了包括出动能力在内的可用性指标,而作战仿真中这类指标往往是决定仿真真实性的关键。建立了有备份飞机条件下机群出动能力的Markov模型。根据故障率和所需出动飞机的数量,确定了备份飞机数量和维修组数,所模拟得到的数据曲线符合实际情况,可应用于陆基或舰基机群出动能力的评估和分析,其分析方法对优化飞机装备配备和保障资源配置具有重要意义。     

Interaction model of artificial fish in virtual environment

Conventional artificial fish has some shortages on the interaction with environment, other fish, and the animator. This article proposes a multi-tier interaction control model of artificial fish, realizes the interaction model through integration of virtual reality technology and Markov sequence, and provides a virtual marine world to describe the interaction between artificial fish and the virtual environment and the interaction between the artificial fish and the animator. Simulation results show that the interaction model owns not only the basic characteristics of virtual biology, but also has high trueness interaction function.     

权马尔可夫链在河流丰枯状况预测中的应用

针对河川径流量为相依随机变量的特点,提出了以规范化的各阶自相关系数为权, 用加权的马尔可夫链来预测河流未来丰枯状况的方法, 并通过实例对该方法进行了具体的应用     

网络传输TCP的马尔可夫过程建模

首先简要介绍了因特网上最重要的协议之一传输控制协议TCP的基本原理,分析了传输控制协议工作时6种可能发生的事件,以发送一个数据段作为一个随机变量表示发生的事件,然后建立了网络传输控制协议TCP的数据段传输过程的马尔可夫过程模型,并由此对传输控制协议TCP系统正确接收的概率P(c)、TCP系统错误接收(包括传输有误但没有检查出的段、重复的段、漏掉的段)的概率P(e)、相对误差R(e)和传输效率等性能指标进行了初步分析.     

基于马尔柯夫过程的可修系统可靠性建模

针对可修系统的可靠性、维修性计算问题,运用马尔柯夫过程数学模型对可修系统可用度和可靠度进行数学建模.首先推导出单部件可修系统可用度与可靠度的表达式,在此基础上,推导出工程上常用的两并一备复杂可修系统可用度与可靠度的表达式,总结出求解复杂可修系统稳态可用度的简单方法.两种方法结论一致,为进一步研究可修系统可靠性、维修性提供重要理论依据.