大词汇量环境噪声下的多模态视听语音识别方法

视听语音识别(Audio-Visual Speech Recognition,AVSR)技术利用唇读和语音识别(Audio-Visual Speech Recognition,AVSR)的关联性和互补性可有效提高字符识别准确率。针对唇读的识别率远低于语音识别、语音信号易受噪声破坏、现有的视听语音识别方法在大词汇量环境噪声中的识别率大幅降低等问题,本文提出一种多模态视听语音识别(Multi-modality Audio-Visual Speech Recognition,MAVSR)方法。该方法基于自注意力机制构建双流前端编码模型,引入模态控制器解决环境噪声下音频模态占据主导地位而导致的各模态识别性能不均衡问题,提高识别稳定性与鲁棒性,构建基于一维卷积的多模态特征融合网络,解决音视频数据异构问题,提升音视频模态间的关联性与互补性。与现有主流方法对比,在仅音频、仅视频、音视频融合3种任务下,该方法的识别准确率提升7.58%以上。     

开源Web自动化测试框架的改进研究

目前,Web应用“捕捉/回放”式测试复用率不高,而编写测试脚本的测试方法对测试人员的程序设计能力又有较高要求。针对这个问题,根据Web应用的特性提出了一套自动化测试框架的设计,并基于开源Web自动化测试工具Selenium为此框架设计了一套“私有语言”,即基于XML的数据驱动文件的解析规则,最后实现了基于此数据驱动文件的Web自动化测试框架。数据驱动文件描述了Web应用行为的多请求/响应的模型,清晰地定义了外部测试数据以避免数据“硬编码”的缺陷。利用此框架,测试人员仅仅通过编写XML数据驱动文件就能进行测试工程的开发,有效降低测试门槛,提高测试效率。     

意外低体温气象风险预警服务系统设计与实现

随着更多公众参与极限越野赛事和荒野休闲活动,意外低体温风险逐渐暴露在人们视野中,对应风险评价指标和预警服务系统的不足亟待提升。本文研究针对野外活动人员遭受因野外寒冷暴露气象条件影响引起的意外低体温风险,综合分析引发意外低体温的致灾因子、暴露度、身体脆弱性和防灾能力因子,提出意外低体温气象风险预警指数并构建预警模型。在此基础上,针对缺少固定气象观测站条件场景,利用目前最先进的便携式气象自动观测设备采集相关气象要素数据,集成北斗卫星通信功能,实现数据向数据中心的传输,应用意外低体温气象风险预警模型,产生预警信息和决策服务信息再向现场服务人员回送,形成预警服务系统,以求解决因突变的气象条件引发的野外活动中意外低体温风险无法得到及时预警并妥善处置的难题,具有较好的实际应用与发展前景。     

摇摆钢支撑快速建筑信息模型建模技术及其Revit模块开发

近年来,由于政府引导和行业需求,建筑信息模型(building information modeling, BIM)技术及应用迅猛发展,已取得了良好的社会和经济效益。为了进一步拓展BIM在土木工程新技术中的应用,针对新型摇摆钢支撑,基于Revit平台开发了快速建模功能模块。首先,梳理了Revit软件平台二次开发的基本方式,确定了模块开发所用技术,提出了摇摆钢支撑快速建模功能模块开发的整体架构。随后,利用C#语言作为程序开发基础语言,针对新型摇摆钢支撑的各个部件,分别开发了相应的子模块,并介绍了各自的功能和实现路径,集成了摇摆钢支撑快速建模功能模块。最后,以某小学教学楼抗震加固项目为例,实现了新型摇摆钢支撑的BIM快速建模,从而在既有建筑模型的基础上形成了三维可视、信息共享的建筑模型,为新型摇摆结构加固既有建筑的BIM建模提供了新的方法。研究结果提升了摇摆钢支撑在BIM软件中的建模效率,拓展了BIM在土木工程新技术上的应用。     

管式抽油泵油管缸套装配自动监控系统的研制

管式抽油泵油管装配过程中,通过测量外管所受扭矩的方法,可以间接测量到油管各节缸套之间的压紧力,这对控制油管装配的质量十分重要.在此基础上,设计了测量扭矩的传感器,采用高性能的数据采集芯片ADuC812为核心研制了一套高性能的缸套装配自动监控系统.     

船舶自动靠离泊系统方案及其混合控制策略

船舶靠离泊操纵是船舶航行过程中最精细最困难但又是最重要的一个环节,随着船舶大型化和船员数量的越来越少,使得船舶靠离泊的操作比以往更加困难和复杂,因此船舶自动靠离泊已成为船舶运动控制中的一个亟待解决的难题;同时水面船舶又是一个结构复杂的、不完全驱动的非线性系统,采用传统的控制策略不能满足要求.基于RTK技术和以太网技术给出了船舶自动靠离泊智能系统方案,同时指出了当前船舶运动非线性控制研究发展的一个新方向:一种基于逻辑的混合控制策略在船舶自动靠离泊控制设计中的应用.所得结果对船舶自动靠离泊系统的进一步研发具有一定的实践指导和理论参考价值.     

MIS 的自动生成工具

本文阐明了 MIS 的功能共性.介绍了在此基础上研制成功的自动生成工具的主要功能、设计思想及其实现算法.它能生成程序风格较好、运行效率较高、用户界面友好的且可直接运行的程序系统.这可为研制人员赢得大量宝贵时间和精力,给 MIS 的研制提供了一个可靠的高效的有力工具.     

支票自动处理系统中的图像处理及识别

为对银行支票进行自动分析、验证、检索,该文设计了一种支票自动处理系统,介绍了图像处理及识别技术在该系统中的应用,描述了一种支票要素自动分割方法及针对支票图像的处理与识别算法,成功地实现了强噪声情况下支票部分要素的图像分割和识别,具有较好的稳定性和很强的抗噪声能力。对５５０张真实使用的支票做版面分割、角码区域分割识别实验,其中版面分割正确率为１００％,角码分割识别准确率为９９１％。另外该文实现了一种小波编码压缩算法,在较高的压缩率下获得了较好的图像质量,极大地节约了支票图像的备份空间。     

大坝渗压自动监测系统

针对大坝渗压人工监测的弊端,开发研制了一种通用性强、可靠性高、易于扩展维护且性能价格比高的大坝渗压自动监测系统。从总体结构、软硬件设计、通讯系统设计等方面阐明了系统的组成及其工作原理。     

由膜孔畦灌水流推进及水深资料推求点源入渗参数

根据膜孔畦灌大田灌水试验实测资料,研究了膜上水流推进规律,并对膜孔入渗采用Ｋｏｓｔｉａｋｏｖ入渗模型,提出利用膜孔畦灌田面水流推进和观测断面水深资料推求充分供水条件下点源入渗参数的新方法。实例计算表明,该法简单易行,并可消除土壤空间变异性对入渗参数的影响。该研究成果为膜孔灌理论与技术研究奠定了基础。