Content-based hierarchical analysis of news video using audio and visual information

A schema for content-based analysis of broadcast news video is presented. First, we separate commercials from news using audiovisual features. Then, we automatically organize news programs into a content hierarchy at various levels of abstraction via effective integration of video, audio, and text data available from the news programs. Based on these news video structure and content analysis technologies, a TV news video Library is generated, from which users can retrieve definite news story according to their demands. Foundation item: Supported by the Science Item of National Power Company (No. SPKJ 016-071) Biography: Yu Jun-qing (1975-), male, Ph. D candidate, research interests: scientific visualization and video database.     

视频监控场景下行人衣着颜色识别

近年来,由于视频监控在各地安防的广泛应用,行人的精细化识别显得尤为重要,其中行人的衣着颜色是最显著的外观特征,其识别的正确性直接影响视频检索中对特定行人的检索.论文提出了一个简单实用的行人衣着识别系统,可以有效地识别行人衣着颜色.首先,结合HOG(histogram of oriented gradient)算法和Grabcut算法自动地对监控图像中的行人进行精确分割;然后,在利用外观划分模型精确地分割出行人的上身和下身后对上下身分别分割成若干个小块;最后,使用KNN(k-nearest neighbor)分类方法判断每个块的颜色,通过所有块的颜色标签投票决定衣着颜色.最终,使用收集的监控视频图像数据集验证此方法的有效性和实用性.     

视频对象分割技术的研究

叙述了采用视频标准MPEG-4和MPEG-7进行视频分割技术的一些基本概念和常用的分割方法,同时针对每种方法的优缺点进行了分析,并对发展趋势进行了展望。     

一种基于对象跟踪的视频分割算法

在新一代MPEG-4视频编码标准中,为了支持面向对象编码和实现基于内容的应用,视频分割成为关键技术之一,而半自动的视频分割是常用而且比较精确的一种分割方法.本文提出一种基于对象跟踪的半自动视频分割算法.该算法在用户的参与下,基于图像的时空信息,进行视频对象(VOP)的分割.实验结果表明,该算法能够较精确地连续分割出视频对象.     

视频内容的结构分析研究

基于内容的视频检索是目前一个热点,进行检索前必须要根据视频内容为视频数据建立索引。本文从镜头分割和分类分析了视频内容的语义结构。     

课堂视频分析工具支持下教师课堂教学行为案例分析

优秀课例的评比日渐成为衡量教师教学水平的一种重要评价方式和手段．本文利用课堂视频分析工具，借助教师课堂教学行为编码表，对一节优秀视频课例进行了分析．研究显示，利用课堂视频分析工具可以深入细致地分析教师的教学行为，根据量化的数据对教学过程进行质性的分析，能客观反映课堂教学情况，因而可以为教师和研究者提供一种可视化分析模式和平台．     

基于上下文信息的新闻故事单元分割

为了有效检索和管理新闻视频资源,提出了一种利用多模态特征、基于上下文信息的新闻故事单元分割方法。首先利用字幕变化、音频类型和视频镜头类型信息将新闻镜头序列转换成为相应的关键词序列,使新闻故事单元分割转换成为文体序列分割的问题;然后应用一种有效的序列分割模型—条件随机场,来分割新闻故事单元。对多段视频的测试结果证明了该方法的有效性,取得了查全率为72.9％、查准率为88.4％的较好结果。     

视频数据挖掘的非接触式桥梁振动监测

为克服传统桥梁监测技术施工难、成本高和观测点少等不足,利用视觉技术实现了非接触式桥梁振动状态监测。该方法包含视频数据采集、视频数据分析与结果可视化等3个环节。其中,视频数据分析环节又包含3个步骤:首先,对视频中的稳定像素点进行定位;然后,根据视频中稳定像素点的数值变化,由视频数据挖掘方法建立视频热噪声模型;最后,由视频热噪声模型计算出视频中桥梁各局部位置上的振动频率。实验结果表明,该方法可有效侦测到桥梁可见结构部件上出现的人眼不易察觉的微弱振动,并对桥梁不同局部位置上出现的振动频率进行同步定量测算,从而提供了一种便捷高效、成本合理、通用性好的桥梁结构健康监测新途径。     

基于IP网的视频监控图像传输的研究

在网络化、数字化的视频监控系统中,应用基于小波变换的视频对象分割融合法,提出视图定位法,让前端的网络视频服务器实现前景运动对象与背景的分割,并在监控中心利用该视图定位法,快速实现前景运动对象图像和背景图像的融合.此外,对运用上述方法的视频监控图像传输进行了性能分析.最后,对本领域的研究进行了总结.     

基于事件序列匹配的多摄像机视频同步

在多摄像机应用中,对各摄像机的视频进行同步是一个常用的基本步骤。大多数现有方法都依赖于特征点的检测和对应,往往复杂而且难以通用。该文致力于简单快速视频同步方法的研究,通过对常见同步问题的描述和分析,提出了一套基于事件序列匹配的视频同步框架——利用事件序列相关性来帮助寻找两段视频序列中的对应帧,通过全局投票的方法寻求最优帧偏移量。在动作识别和会议建档系统场景中的示例实验中都得到了正确的结果。误差分析表明,该方法的容错能力强,在较大参数范围内都可以得到正确解。该文提出的方法简单易用,具有很好的实用价值。     

基于云水印的视频内容认证技术

 数字视频内容的认证技术越来越成为研究的热点。基于云水印及镜头分割技术,提出了一种新颖的视频内容认证方案。论文就不变特征提取、云水印生成、嵌入和提取、视频的认证与篡改检测等技术进行了研究并进行了实现。通过实验分析和验证,该方案可对实时的视频进行认证而不影响视频本身的视觉效果。     

一种基于运动背景的视频对象分割算法

随着MPEG-4和MPEG-7的研究发展,基于内容编码和面向对象的存取和交互技术日益得到人们的重视,视频分割技术正在成为当前视频研究领域的热点之一,但是,目前的分割研究大部分是在没有全局运动的情况下进行的,对于运动背景下视频对象的分割研究还不多.为此,提出了一种新的基于改进分水岭和光流的视频分割算法,即先将原始图像使用改进的分水岭算法标记成不同的灰度区域,然后以光流法得到的对象运动信息作为评判准则,将这些区域分别归类于前景对象和背景,达到从运动背景中分割出前景对象的目的.仿真实验表明,此算法能够较精确地分割出视频对象.     

一种固定背景下运动视频对象的自动分割方法

提出了一种固定背景运动视频对象的自动分割方法．该方法通过互帧差四次矩检测运动对象，利用背景减除对点分类，最后用彩色分水线算法得到运动对象实验证明该方法能够对固定背景下运动视频对象进行实时自动分割．     

一种快速运动目标检测算法

运动目标检测是智能视觉监控系统的重要组成部分,其主要功能是检测监控场景中的运动目标,为高层运动分析提供必要的信息。文章提出一种快速运动目标检测算法,以帧差法和背景减法为基础,快速实现背景提取、背景更新、运动目标检测的功能。实验结果表明,该算法计算量小,检测目标完整,能够满足实时监控系统的要求。     

基于IMediaDet的视频捕获关键技术研究

在图像处理应用中,抓取视频图像对视频进行加工是非常重要的.针对传统的基于VFW技术的方法不能提供流数据等问题,探讨了一种简单的利用IMediaDet实现视频抓取的方法,详细研究了图片的结构、抓取帧的计算方法等,并在CJHJ环境中利用该方法实现了一个视频抓取与回放系统,取得了良好的效果.     

基于IMediaDet的视频捕获关键技术研究

在图像处理应用中,抓取视频图像对视频进行加工是非常重要的.针对传统的基于VFW技术的方法不能提供流数据等问题,探讨了一种简单的利用IMediaDet实现视频抓取的方法,详细研究了图片的结构、抓取帧的计算方法等,并在CJHJ环境中利用该方法实现了一个视频抓取与回放系统,取得了良好的效果.     

基于变分水平集图像分割的视频烟雾检测方法

为及时判断火灾发生情况,利于灭火工作,研究了火灾早期产生烟雾的情况下,通过固定监视探头捕捉 到的影像视频,针对视频中的火情烟雾进行检测,结合计算机视频检测技术的光流法和帧差法获得视频中烟雾 运动的区域,基于某一时刻摄像机不动的情况下得到两帧连续的图像并检测视频中的运动区域,提出了一种不 需初始化的变分水平集算法。利用该算法对烟雾的视频进行分割,将运动区域从背景中分割出来,对烟雾进行 检测分析。从而使通过烟雾判断火情更精确,检测结果更实时,提高了视频指挥灭火工作的效率。     

利用空域和时域信息自动分割MPEG-4视频对象

从视频序列中分割出视频对象是实现基于内容压缩编码方法的关键，该文提出了利用空域和时域信息实现MPEG-4视频对象的自动分割方法，利用相邻两帧的帧差和当前帧的纹理、颜色信息及面部定位、梯度滤波等技术，实现目标的初始化，再利用快速Hausdorff距离法跟踪目标．处理结果表明，该方法对处理相对静止的头肩序列图像具有较强的稳定性，处理速度较快，能取得较好的分割效果。     

一种音频辅助的视频分割方法研究

视频分割是视频结构化组织的基础，提出一种结合音频和视觉信息的视频分割新方法，即先对视频作基于边变化率的初步分割，然后提取音频的MFCC及其差分系数特征,利用广义似然比（GLR）距离对音频信息进行相似性比较，并检测相应的音频变化点，在此基础上，应用间频分割点对初步的分割进行验证，获得具有一定语义内容的视频段，实验结果表明，方法简单有效，与单一的基于视觉信息的分割方法相比，获得的视频片段语义信息更为完整，同时也避免了分割的过度细碎。     

武器系统输出数据的视频采集与恢复

为了提取显示器的显示数据,提出一种自动提取视频中显示区域的方法,该方法利用多帧视频图像信息,根据录取的视频图像的特点,采用帧间差分方法,分割出显示区域。然后,针对由于摄像头和显示器刷新率不同带来的阴影问题,采用一种保持对比度的灰度变换方法,消除了阴影的影响,同时增强了视频信息,为后续的图像处理扫清了障碍。