基于马尔科夫决策过程的多目标跟踪算法

目前,多目标跟踪算法仍面临诸多挑战,例如遮挡、快速运动等所造成的影响难以完全规避.为了解决上述问题,提出一种基于马尔科夫决策过程的多目标跟踪算法.该算法将每个目标建模成一个马尔科夫决策过程,通过最大化奖励函数来驱动状态间的转移,并将强化学习训练用于数据关联相似度函数,有效地解决了目标遮挡问题.同时,为了解决物体快速运动...     

马尔科夫决策过程下含可再生能源的实时电价策略

运用马尔科夫决策过程表示用户调度各种类型家电和可再生能源发电量的不确定性,提出了一种新的用户福利最大化模型。为平衡用户用电效用（表示用户使用购买到的电力之后的满意程度）和支付成本之间的关系,引入权重因子作为未知变量。运用改进的模拟退火算法求解该模型并得到最优权重值。最后,仿真结果验证了模型的合理性和算法的可行性,可以指导用户进行能源优化配置和家电用电调度,以达到用户侧总体利益最大化的目标。     

基于马尔科夫决策过程的应急资源调度方案的动态优化

利用马尔科夫决策方法,对突发公共事件下的应急资源调度方案的动态优化过程进行研究,以期找到特定场景下最优应急资源调度方案,保证应急救援行动的时效性.通过实例分析表明,基于马尔科夫决策过程的应急资源调度方案动态优化方法可实现应急资源调度方案的动态优化,未来通过采用本方法,可以为突发公共事件下的应急资源动态调度提供依据.     

不完美维修情形下部分可观测系统的最优维修策略

针对监测费用昂贵导致难以实施连续监测和维修效果通常不完美的问题,研究了维修效果不完美情形下部分可观测系统的最优维修策略.在假设系统的性能退化状态变化规律可以用马尔可夫链进行描述的基础上,利用部分可观测马氏决策过程对该系统进行维修决策建模,并通过引入信息状态将其转化为完全可观测马氏决策过程;引入维修效果矩阵用以刻画维修效果对最优维修策略的影响;针对所建立的最优方程以单位时间期望维修费用最小为目标设计了最优维修决策算法.通过数值仿真验证了所提算法的有效性.     

基于自适应数据广播的缓存一致性维护

为了提高移动环境中缓存数据的效率,在分析现有技术的基础上,提出了基于自适应数据广播的缓存一致性维护.将数据的访问形式分为共享和独占两种,根据数据访问形式以及数据的更新频率,采用定时、计数以及数据状态等三种方法,动态地调整服务器广播更新数据的频率和内容.通过数据库中事务的可串行化操作,对该方法的正确性进行了理论证明,并通过具体的系统验证了其效率.该方法可以在各种无线网络环境中应用,为无线应用提供数据缓存.     

基于双机冗余的兰炭生产过程监控系统

针对兰炭生产工艺流程和安全生产的特点与要求,开发了基于双机冗余的兰炭生产过程监控系统.该系统采用工控机、PLC、仪表和以太网,构成IPC+S7-300PLC和智能仪表+工业以太网的双机冗余监控系统.系统实现了兰炭生产过程中工艺参数的实时监控与优化控制,提高了生产过程的自动化程度和管理水平.     

基于属性更新的语义缓存一致性维护算法

目前语义缓存一致性维护的更新策略主要是将更新操作转化成删除和添加操作,其增加了不必要的数据通信流量和数据存储,而且只能处理全属性的情况,故本文提出新的语义缓存一致性维护算法,通过分析语义缓存段与更新语句的条件谓词以及投影属性的关系,从而将更新粒度细化至被更新的属性。理论分析和仿真实验均表明该策略能够有效的减少数据存取和数据通信的开销,以及提高缓存命中率和减少查询响应时间。     

基于Markov过程的集束型设备预防维护策略

为了更好地保障集束型晶圆制造设备运行的可靠性,同时考虑维护的经济性,建立了基于Markov过程的预防性维护策略.根据集束型设备的特点,采用大修和小修相结合的预防性维护方式,同时考虑随机失效和退化失效两种失效形式,建立了状态转移模型.依据Markov理论求得设备各状态的稳态概率及状态转移概率.再根据Markov决策理论及策略迭代算法求得最佳维护策略.实验结果表明,所提出的预防性维护策略有效可行.     

基于模糊决策网格的维护策略选择模型

以传统决策网格为基础,通过模糊化方法建立了维护策略选择模型.以平均故障时间和故障频率作为决策变量而构建决策网格图,建立了不同网格区域所代表的维护策略以及决策变量的隶属函数,运用模糊加权平均算法评估设备备选维护策略的满意度,同时,建立维护策略成本满意度的模糊集,运用模糊加权平均算法确定其最优维护策略.实例分析结果表明,运用模糊理论所构建的维护策略选择模型较好地解决了传统决策网格的决策偏差,考虑了决策变量权重与策略成本而具有较好的灵活性和实用性.     

基于缓存开销的信息中心网络缓存协作策略

网络化缓存策略影响ICN网络的传输性能,考虑到缓存执行时的开销不仅包含访问缓存节点时的路径代价,还应包含替换旧信息的替换代价,因此提出一种基于路径访问代价和节点替换代价的缓存协作策略(path and node cost based cooperative caching strategy, 简称PNC3S).该策略对两种代价进行整体考虑,将代价总量作为是否进行信息与节点匹配缓存的依据,对提出的策略模型进行优化分析,将最优解作为缓存部署方案.实验结果表明,与CEE,LCD策略相比,PNC3S可以改善网络的信息缓存率、服务器的负载率、网络链路平均利用率,以及访问跳数减少率.     

基于马尔科夫过程的单路由网络建模

基于通信网络的传输原理,利用马尔科夫随机过程理论讨论了由单路由器构成的简单网络的建模问题.分析了TCP窗口四种变化状态的马尔科夫特性,给出了状态转移矩阵,得到了一个单路由网络模型.该模型反映了窗口变化同数据包丢包概率之间的关系,同时给出了队列长度和窗口大小之间的关系.     

考虑质量的退化生产系统可用性中心维护决策

为了减少系统非计划停机时间,控制产品质量,提出了以设备可用性为中心的多机维护策略.首先定义三种维护方式,研究其对设备状态的影响机理,从而建立可靠性模型.在对系统进行马尔科夫状态分析的基础上,建立产品质量与系统退化状态之间的关系,构建包含质量损失成本的总成本模型.从实际应用的角度出发,综合考虑设备的可靠性和维护性,以可用性为中心、以总成本最小为目标规划系统的预防性维护策略.实验表明,提出的维护策略可有效地应用于多部件生产系统,且多操作预防性维护方式的效果优于单一操作.     

基于马尔科夫模型的期望效用序贯三支决策方法

投资决策过程中的收益和风险充满不确定性,需要通过评价投资决策过程中的效用来判断投资者是否应该投资以及如何投资.序贯三支决策可以有效模拟投资者的动态投资行为过程,为投资者做出最优的动态投资决策.文中通过马尔科夫预测方法来模拟预测投资收益与风险,引入期望效用理论模拟投资者对不同投资行为的偏好并建模,提出了一种序贯三支决策模...     

基于邻域粗糙集的不完整决策系统特征选择算法

针对不完整决策系统属性约简算法时间复杂度较高问题,基于正域不变条件下,决策系统分类能力保持不变原则,提出不完整决策系统前向顺序特征选择算法.该算法从约简集为空集开始,根据在约简集合中加入各属性后对正域影响程度大小将属性降序排列,采用顺序前向搜索,选择当前最佳特征加入特征约简集合,确定最佳特征子集.将该算法扩展到基于邻域...     

基于区分向量的不完备决策系统属性约简算法

区分矩阵是属性约简的一种有效方法.针对不完备的决策系统,定义了区分矩阵的概念,给出了区分矩阵构造方法,并根据区分矩阵稀疏性的特点,定义了区分向量的概念,在此基础上,给出了一种基于区分向量的不完备决策系统属性约简算法.最后,采用恒星光谱数据,实验验证了该算法的有效性.     

基于半马尔科夫过程的虚拟网络生存性模型

针对虚拟网络生存性缺乏准确的定量描述,提出了一种基于半马尔科夫过程的虚拟网络生存性模型。根据虚拟网络运行特征,重点引入虚拟网络重构状态以及认知状态,构建一种优化的虚拟网络状态转移图,并引入半马尔科夫理论,建立虚拟网络状态转移概率方程,构建基于半马尔科夫过程的虚拟网络生存性模型,最后通过仿真实验验证了虚拟网络生存性对各参量的敏感度以及不同类型虚拟网络的生存性特点。仿真表明,降低网络部件发生故障的概率,提高虚拟网络攻击识别概率和虚拟网络重构成功概率可以显著提高虚拟网络生存性;在映射阶段进行资源备份可以显著增强军事虚拟网络生存性。     

基于价值预评估的代理服务器缓存策略

传统方法解决代理服务器内存空间不足的问题都是被动性方法,在没有考虑缓存对象的缓存价值的情况下直接对它们做缓存,在代理服务器内存不够时再将它们替换,使得部分无缓存价值的对象毫无效果地被缓存了一遍.本文引入了缓存的准入机制,提出基于价值预评估的缓存策略,描述了缓存价值的预评估算法,仿真实验结果表明采用本缓存策略的系统运行有较高的文档命中率和字符命中率.     

基于 P2P的VOD系统中数据缓存策略研究

提出了一种结合内存缓存与磁盘缓存的新型缓存策略.该策略在原有内存缓存基础上增加了磁盘缓存,数据从内存中被淘汰时,从磁盘缓存空间中选择合适磁盘分片进行缓存,并建立索引管理已缓存数据,使对等网络中的节点利用彼此的闲置磁盘资源缓存更多的媒体数据,服务器的负载得到有效降低,节点在对等网络中从其他节点获取数据的成功率明显提高.实验证明,该缓存策略有效提高了系统的整体服务能力,充分利用对等网络中的空闲节点资源降低视频服务器的负载.     

基于马尔科夫过程的行驶工况构建中数据处理与分析

在利用马尔科夫过程构建行驶工况的方法中,将车辆的行驶状况看做一个随机过程,只需求得实验数据的状态转移矩阵,便可得到随机过程的统计性质,通过对实验数据进行状态划分、模型事件分类、模型事件集确定,最终可得到实验数据的转移矩阵。文章简述了马尔科夫构建行驶工况的基本原理及实验数据的处理方法和转移矩阵的求法,并利用VBA语言设计了一种数据分析处理程序。     

两参数随机过程的强马尔科夫性

定义了几种两参数随机过程的参数变化为随机的宽过去强马尔科夫性,给出了一类随机过程满足强右选马氏性的充分条件,讨论了几种强马氏性之间的关系,推广了参数变化为非随机的相应结果.