秦腔汉英多模态双语语料库构建与应用

秦腔表演包含的台词、身段、唱腔、脸谱和服饰等要素,构成了秦腔语言与非语言模态,为目标语受众呈现秦腔的多层次意义,是一种典型的动态多模态话语。多模态语料库作为新兴的语料库研究领域,为秦腔研究提供了新方向。基于张德禄多模态话语分析模型,提出秦腔汉英多模态双语语料库构建的基本步骤,并从指导秦腔翻译实践、创新CAT教学内容和搭建秦腔外宣资源平台三方面探讨该语料库如何应用于戏曲翻译人才培养和戏曲文化的对外传播。     

一种基于多任务学习的多模态情感识别方法

为了通过设置辅助任务学习到更具有情感倾向性的视频和语音表示,进而提升模态融合的效果,提出一种基于多任务学习的多模态情感识别模型,使用多模态共享层来学习视觉和语音模型的情感信息.在MOSI数据集和MOSEI数据集上的实验表明,添加两个辅助的单模态情感识别任务后,模型可以学习到更有效的单模态情感表示,并且在两个数据集上的情...     

基于距离置信度分数的多模态融合分类网络

使用多模态数据建模可以有效地克服单一模态信息量不足的问题,大大提高模型的性能.但在量化神经网络模型置信度,尤其是对于多模态融合模型方面并没有很多进展.基于此,提出一种基于嵌入的方法,在嵌入空间中通过计算样本间的距离进行局部密度估计,进而计算模型的置信度分数.该方法具备可扩展性,不仅可以用于单一模态模型,还可以用于多模态...     

基于文本指导的层级自适应融合的多模态情感分析

提出了一种基于文本模态指导的多模态层级自适应融合方法,以文本模态信息为指导实现多模态信息的层级自适应筛选及融合。首先,基于跨模态注意力机制实现两两模态之间的重要性信息表征;然后通过多模态自适应门控机制实现基于多模态重要信息的层级自适应融合;最后综合多模态特征和模态重要性信息实现多模态情感分析。在公共数据集MOSI和MOSEI上的实验结果表明：对比基线模型,本文所提方法在准确率与F₁值方面分别提升了0.76%和0.7%。     

国内多模态话语研究动态述评

随着现代信息技术的发展,人们更加依赖多模态话语进行交际,多模态话语已经引起越来越多的学者的关注。我国多模态话语研究主要涉及多模态话语理论探讨,视觉语法应用,多模态外语教学实践探索等。文章分析了近十年我国多模态话语研究现状问题并展望未来发展方向。     

"文本为主"的多模态特征融合的新闻视频分类算法

视频分类算法通过融合多模态特征提高分类性能.大多数多模态特征融合算法采用统一模式处理不同模态特征,忽略文本与声音/图像特征在视频分类能力和可靠性方面的差异.该文提出一种新闻视频分类算法,采用文本为主,声音/图像为辅的特征融合模式.该算法充分考虑文本特征在内容分类方面的高可靠性,并在适当情况下,辅以声音/图像信息为补充.对10类新闻视频进行分类实验,并与其他两种分类算法对比,表明在提取相同的底层特征情况下,该文算法的平均分类性能最佳.     

多模态医学图像融合技术综述

介绍了医学图像融合的级别和方式,重点对目前国内外医学图像配准和融合的技术与方法进行了阐述,最后提出了在医学图像融合技术研究中的几个热点问题.     

标准化病人的多模态互动话语分析

从社会符号学和概念隐喻的双重视角,考察了标准化病人互动话语的多模态特征,结果发现：标准化病人互动话语表现出纯语言、副语言、肢体语言和非肢体语言四种主要模态,通过补充、强化、替代三种多模态协同关系共同完成信息传递和情感表达,通过相似性表征和动态性表达呈现出“病人是医生最好的老师”的多模态隐喻;作为教育戏剧活动的主体,标准化病人运用多模态互动话语开展并串联情境活动、叙事性活动和诗化活动,最终实现教学目标。     

利用特征距离信息引导决策融合的多模态生物特征识别方法

传统的决策层融合作为识别系统最末端的融合层次,具有信息量不足的缺点,对于各模态分类性能差异较大的系统,识别率低且可靠性差。提出了一种基于特征距离信息的决策层融合方法,应用于包含虹膜、手掌静脉和手指静脉的多模态生物特征识别系统。以置信度作为权重,通过权重来探索不同模态生物特征识别的性能差异,实现了有效特征信息的提取,并且提高了系统的抗干扰能力。该方法充分考虑了权重因子与特征距离信息和模态分类性能参数之间的复杂关系,将模态的决策偏好通过置信度转化为定量表征,不仅使各模态权重因子的求解更具科学性,而且提高了识别系统在复杂情境下的自适应能力。实验结果表明,该融合方法的识别精度与抗干扰能力优于其他决策层融合算法。     

大学英语课堂的多模态话语分析

近年来,多模态话语分析广受国内外语言学家和学者的关注,本文以克瑞斯和勒文所构建的视觉语法为理论依据,分别从向量,距离,视角,情态等四个方面分析了当今的大学英语课堂,并初步提出了消除以上影响的合理建议。     

汉语近义词辨析知识库构建研究

现有近义词辨析词典往往忽略近义词的细微用法,缺乏对近义词的句法分布、语义特征、组合限制及使用模板的细致描述.针对该问题,基于真实语料,以搭配为载体,以词与词之间的关系为手段,构建了一个近义词辨析知识库,为近义词提供用法和语境知识,包括近义词的搭配词及搭配关系、搭配频率以及近义词在语料库中的句法分布信息、语义特征、语境中...     

小麦草害本体知识库构建研究

根据小麦草害信息知识的特点,结合本体理论与方法,以河南省小麦草害为例,在小麦领域专家的指导下,首先凝练出小麦草害领域本体知识资源,并进一步梳理出较为完善的小麦草害领域本体知识组织体系,最后探索并构建了河南省小麦草害本体知识库,为其它领域本体的构建提供了框架参考和技术支撑.     

高档车削中心故障知识库构建技术

面向高档车削中心典型功能部件,构建状态监测试验平台,提出机床故障知识库模型;采用小波包理论进行故障能量特征提取;研究基于粗糙集理论的知识获取技术.实验结果表明,小波包分析与粗糙集方法相结合能够有效获取机床故障规则,提高了故障诊断率,为实现机床故障预测提供可靠数据来源,为分析导致故障的影响因素提供了关键试验技术.     

大规模汉语词汇语义知识库的构建

文章提出了一种基于义项相似度的自动合并算法,用于整合以现代汉语语法信息词典、现代汉语虚词用法知识库和现代汉语词典(第5版)为核心,以现代汉语语义词典和同义词词林等其他19个词典为补充的多源词典和知识库,初步的构建了大规模汉语词汇语义知识库CLSKB。自动合并算法准确率达到32.9%,大幅度地提高了合并工作的效率。CLSKB共包括核心知识库CLSKB_Core和扩展知识库CLSKB_Extended。CLSKB_Core由可信度高的资源合并得到,规模约16万条。CLSKB_Extended是扩展知识库,主要资源来自网络,用于补充核心知识库,规模约33万条。该知识库可为自然语言处理中诸多领域提供丰富的词汇语义及关系信息。     

催化剂分子设计专家系统中数据库和知识库的建立

从建造专家系统的理论体系出发，结合作者以前在计算机辅助催化剂分子设计方面所做的工作，确立了复合催化剂组分子设计专家系统的基本结构，并探讨了这一系统的任务功能、体系结构与支持界面、性质数据库与知识规则库的建立．以甲烷氧化偶联反应为例，说明了数据库的构成和领域知识的分类以及相应的知识表示技术．     

面向学科的高校图书馆参考咨询知识库的构建研究

介绍了面向学科的高校图书馆参考咨询服务的相关概念,剖析了面向学科的高校图书馆参考咨询知识库的构建要素,提出了参考咨询知识库的构建策略,以期为高校图书馆参考咨询服务的发展提供助力.     

评价知识库构建效果的框架与流程

知识库在现代企业和客户服务机构中得到广泛使用,对知识库构建的效果进行评价是企业衡量其实施知识库构建项目成功与否的关键,也为企业对知识库进行动态改进和维护提供了指导.在已有相关评价方法的文献分析的基础上,针对企业知识库构建效果的评价问题,提出了评价知识库构建效果的一种框架,并给出了相应的知识库构建效果评价流程.最后,通过一个实例分析说明了所给出的框架与流程的可行性和应用价值.     

基于聚类方法的CAPP零件知识库构建

传统的零件分类一般根据零件编码从特征矩阵中得到分类结果，未能很好地表达各个零件之间的相似关系，对工艺设计也不能提供启发性的推理策略．此外，零件分类矩阵本身的相似性标准也难以确定，给零件的工艺制作带来了很多困难．为此，提出了一种利用聚类技术构造树型结构表达零件相似性的方法，并根据零件之间的相似性建立层次结构以进行动态分类，进而构建一种有自学习能力的零件知识库．考虑到机器智能的局限性．分类结果可能不尽合理，分类树又能够在自动压缩优化的基础上进行手工优化，并将优化结果记录于分类树中．该知识库能及时反映零件信息的动态更新，并对零件进行多层次、细粒度的动态分类，使零件分类粒度不受数据规模的限制，从而可以通过建立索引结构，实现自适应的工艺设计自动化。     

基于本体的知识库系统构建研究

介绍了本体论和知识库,结合实例论述了知识库系统的体系结构和构建步骤。     

基于平面盘形凸轮CAD系统知识库的构建

凸轮机构的设计是一个多因素、多层次的复杂过程,许多公式非标准化.采用专家知识库,通过Visual Basic的开发并结合Access数据库,实现对知识库的维护和修改,从而构建凸轮机构智能设计系统,方便用户使用,该系统具有易用性和智能性,也对改善凸轮机构的设计具有现实的意义.