基于量子神经网络的视频字幕定位方法研究

关键词 针对目前视频字幕定位精度不高和效率低下的问题,提出了一种基于量子神经网络的视频字幕定位方法。该方法首先利用视频关键帧的边缘特征筛选出备选字幕区域,然后采用灰度共生矩阵提取备选图像块的纹理统计特征,把这些纹理特征参量输入到训练好的量子神经网络,判断备选字幕区域是否包含字幕,同时也为后续视频内容安全分析提供了技术支持。该方法由于采用量子计算加快了神经网络的收敛,能够有效地提高字幕定位的速度以及后续视频安全内容分析的效率。实验结果表明,该字幕定位方法具有较高的准确率     

基于子镜头聚类方法的关键帧提取技术

分析主流的关键帧提取技术,提出了一种基于子镜头聚类的关键帧提取算法.该方法在重新定位镜头的起始和终止帧号后,利用帧与帧之间的颜色直方图特征,通过子镜头检测和聚类进行关键帧提取.实验结果表明,该算法具有良好的适应性,既降低了关键帧提取算法的计算复杂度,正确率高,同时能有效避免关键帧的冗余,达到了很好的关键帧提取效果.     

一种基于互信息量的关键帧提取方法

关键帧提取技术是视频分析和基于内容的视频检索的基础,关键帧的使用大大减少了视频索引的数据量,同时也为视频摘要和检索提供了一个组织框架.介绍了目前的关键帧提取技术,提出了一种基于互信息量的关键帧提取方法,实验证明该方法能较好地提取出视频序列的关键帧.     

动态时域检测窗口的快速关键帧提取方法

在镜头检测基础上对帧图像进行逐帧处理、分析,从而获取关键帧的方法导致提取速度较慢,无法满足实时性要求。针对上述缺点,提出动态时域检测窗口的快速关键帧提取方法。该方法通过时域检测窗口把视频序列分割成长度不等的单元,并对窗口左右边缘帧以及窗口内的抽样帧进行分析、对比,从而判断视频单元的内容变化。同时,采用窗口混合增长模式和窗口慢检测机制保证关键帧提取的质量和速度。最终,对提取的关键帧序列进行聚类,得到最优的关键帧。实验证明,对于不同类型的视频,该方法都具有较高的综合评价性能。     

基于自适应阈值的聚类算法提取关键帧研究

针对当前预先指定聚类算法阈值提取关键帧的问题,使用MPEG-7标准中的主颜色描述子对视频帧进行描述, 以镜头内相邻两帧的相似性测度为数据样本,自适应地确定聚类所需的阈值,并以该阈值去指导同类视频的关键帧提取,提高关键帧提取的效率.实验证明,该方法能较好的提取视频序列的关键帧.     

基于视觉注意模型和互补性融合的关键帧提取

利用视觉注意模型提取的视频关键帧,不能全面地表达视频内容,针对这一问题,提出了基于视觉注意模型和互补性融合的关键帧提取方法。该方法利用视频帧的空间显著度和运动显著度的互补性,分别提取关键帧,再根据它们之间的相关性,消除冗余的关键帧。实验表明,该方法提取的关键帧能比较全面的表达视频内容,并且符合人类的视觉特性。     

基于动态聚类算法的显微刻度线自动提取

设计一种基于机器视觉的显微刻度线自动提取系统,提出了一种实时、自适应能力强的刻度线全自动提取方法.根据Hough变换对刻度图像进行刻度边缘直线提取;基于动态聚类的方法对所提取的刻度边缘直线进行有效归类,给出了自动选取归类阈值的方法,借助归类信息进行非刻度线直线剔除操作;对优选后的直线使用最小二乘法对刻度线中线进行精确拟合.实验结果表明,使用该方法提取刻度线的精度高、抗干扰能力强.     

基于动态规划的关键帧提取算法

在传统的关键帧动画中,动画师对关键帧进行编辑并通过插值生成一段连续的动画.运动捕捉数据的每一帧均可看作关键帧,但是对其直接进行编辑非常繁琐,需要从运动中提取具有代表性的关键帧,简化运动的编辑操作.已有的关键帧抽取方法主要基于一些局部误差度量策略,算法的全局误差难以得到保证.提出了一种基于动态规划的运动捕捉数据的关键帧提取算法,该算法通过曲线拟合技术对密集采样的运动捕捉数据进行减帧,在生成指定数目关键帧的同时保证误差达到全局最小.用户可以利用传统的关键帧技术对减帧后的运动进行编辑.     

基于GEP自动聚类算法的视频关键帧提取方法

视频关键帧提取技术是视频数据处理研究领域的热点研究问题.该文针对现有的镜头边界检测技术不能有效提取关键帧的不足,提出一种基于小波边缘检测算子的自适应分块视频镜头边界检测算法.通过检测视频镜头变化,得到分割的镜头,然后对视频帧提取图像特征,并利用基因表达式编程(GEP)的自动聚类功能对视频帧进行聚类,提出并实现了基于GEP自动聚类的视频关键帧提取算法(KFC‐GEP).实验证明该方法能较好的提取视频序列的关键帧.     

遗传算法优化LVQ网络的监控视频关键帧内容识别

为解决监控视频检索中公安视频侦查关注目标的识别问题,提出一种基于遗传算法优化LVQ神经网络的关键帧内容识别方法。首先通过运动目标检测及二值图像的聚散熵,对监控视频进行子镜头划分,从而提取视频关键帧。其次归一化关键帧中的待识别目标,提取待识别目标的形状统计特征。再次构造LVQ网络并利用遗传算法对网络的初始权值进行优化,训练网络实现关键帧内容识别。最后列举出该方法的实验结果及性能分析。该方法在关键帧内容识别的准确性和鲁棒性上都有良好表现。     

基于ORB算法的输电线路异物识别研究

针对输电线路异物检测问题,通过分析航拍视频,提取关键帧并采用帧差法标注异物,使用特征点跟踪异物,从而达到输电线路异物检测的目的。将预估区域漂移法与欧式距离法融合,弥补关键帧冗余的缺陷;使用概率密度函数分析网格内异物占有率,剔除帧差法中微小非目标区域;提出K-means算法聚类分析Oriented Brief(ORB)算子,可精简特征点提高匹配率。实验结果表明,能有效精简关键帧,并且改进帧差法可精确提取异物;同时快速准确提取ORB算子;故而可快速识别线上异物。     

基于熵的非参数估计的音乐声纹提取方法

提出了一种音乐片段的声纹提取方法,通过这种方法可以得到更具有鲁棒性的声纹特征,利用声纹,即使对音乐名称不确定,也能够找到喜欢的音乐。首先对音乐信号进行预处理,得到各分帧序列的各个子带;对于每一个子带,利用Parzen窗函数法估计它的概率分布函数;然后利用信息论中香农公式的相关算法计算它的熵,最后利用差分算法得出它的声纹。结果显示非参数方法比参数方法具有更低的误码率和更好的识别率。由此得出非参数方法抗各种失真的效果更好。     

面向视频编码的运动对象分割和提取

多媒体通信的发展迫切需要面向对象的视频编解码技术,其关键是视频对象（VO）的提取和视频对象平面（VOP）的分割,提出一种自动分割VOP的新方法。根据初始帧,使用形态运动滤波技术,初始运动对象首先被提取出;在后继帧中使用活动轮廓（Snake)技术对运动对象进行拟合匹配,最后根据一系列精确的二值轮廓导出运动对象的提取。实验结果表明,该算法可有效地提取视频对象和分割视频对象平面。除了个别参数需要调节外,整个过程是自动完成的。     

基于背景差法的运动目标检测

视频序列图像中,视频分割的主要目的是要在视频序列中分割出具有意义运动对象实体.背景差法能够很好地从一段视频中提取出运动目标.可靠的背景图像的提取是该算法的关键.表述了一种新的背景提取算法,利用图像序列的灰度统计特性来提取背景图像,并利用Surendra背景更新算法根据每帧图像对背景进行更新已获得可靠的背景.然后,将当前帧与背景作差,并对差值图像进行适当处理,这样运动目标就能够被精确地提取出来.     

合作原则在《铜雀台》字幕翻译中的应用

电影字幕的翻译过程就是电影创作者与译者进行交流的过程.本文从语用学理论合作原则的角度探讨电影字幕翻译,以《铜雀台》的字幕翻译为个案,阐述了合作原则的基本准则在字幕翻译中的应用,提出了传递适量信息、忠实传递信息、强调主要信息和表达清晰通俗等四个字幕翻译准则,以期促进字幕翻译质量的提高.     

改进残差网络与峰值帧的微表情识别

目的 微表情(Micro Expression, ME)是人们流露内心情感时展现出的细微面部表情。针对微表情识别的样本较少且不同类别数量分布不均导致难以识别和识别准确率较低的问题,提出能够提高微表情识别准确率的模型框架。方法 提取微表情视频序列中含有更多关键表情信息的峰值帧;使用加入SE模块的改进残差网络SE-ResNeXt-50对微表情的峰值帧进行特征提取,其中SE模块可以更好地学习特征中的关键信息,ResNeXt通过分组卷积的方式用稀疏结构取代密集结构从而使结构更加简化,提升了识别效率。与此同时,使用Focal Loss损失函数可以更好地解决因微表情数据的不平衡带来的模型性能问题。结果 在微表情数据集CASMEⅡ上进行了仿真实验,可以发现改进的残差网络与峰值帧提高了微表情识别的准确率与F1值。结论 改进的残差网络与峰值帧可以降低数据集较少所带来的影响,使模型有着良好的拟合效果,同时改善了在不同类别上表现差异较大的问题,提升了微表情的识别准确率,对于微表情识别有着更好的识别性能。     

柔性姿态估计和时空特征结合的乒乓球动作视频片段关键帧提取

为了解决传统方法在场景复杂的情况下,因无法保证时间与空间上的连续性,导致乒乓球动作识别错误,影响关键帧提取性能的问题,将柔性姿态估计和时空特征结合在一起,研究乒乓球动作视频片段关键帧提取问题。依据稠密光流对乒乓球动作视频片段进行分段。对单帧图像人体柔性姿态进行估计,通过可分离线性滤波器时空特征点检测方法对乒乓球动作视频图像序列特征点的检测,将时空特征点当成中心建立时空立方体,提取时空立方体的像素建立时空特征。为了保证时间与空间上的连续性,引入时空特征边,得到有时空特征的柔性姿态估计结果。通过直方图相交法求出乒乓球动作视频片段中姿态相似度,计算全部姿态的Hog间差异度,构成差异度矩阵。在当前帧姿态差异度超过阈值的情况下认为当前帧为关键帧。实验结果表明,所提方法针对不同场景的保真率与压缩率一直高于0. 7,处于较高水平;主观评价结果好,可提取合理关键帧。可见所提方法对复杂场景的关键帧提取性能优,主观与客观评价结果好。     

Shape blending of artistic brushstroke represented by disk B-spline curves

This paper presents an algorithm for automatically generating in-between frames of two artistic brushstrokes. The basic idea of the algorithm is to represent the two key frames of artistic brushstrokes in disk B-spline curves, and then make blending of their geometric intrinsic variables. Given two key frames of artistic brushstrokes, the skeleton curves can be obtained by certain skeleton-based techniques. After disk B-spline representation of the key frames is generated, interpolation of the intrinsic variables of the initial and the target disk B-spline curves is carried out. Examples show that this method can efficiently create in-between frames of artistic brushstrokes.     

Shape blending of artistic brushstroke represented by disk B-spline curves

This paper presents an algorithm for automatically generating in-between frames of two artistic brushstrokes. The basic idea of the algorithm is to represent the two key frames of artistic brushstrokes in disk B-spline curves, and then make blending of their geometric intrinsic variables. Given two key frames of artistic brushstrokes, the skeleton curves can be obtained by certain skeleton-based techniques. After disk B-spline representation of the key frames is generated, interpolation of the intrinsic variables of the initial and the target disk B-spline curves is carried out. Examples show that this method can efficiently create in-between frames of artistic brushstrokes.