基于多模态相似融合的新闻视频故事分割算法

新闻视频数量的不断增加,为准确分割用户感兴趣的新闻视频,本文提出了一种基于多模态相似融合的新闻视频故事分割算法。首先,通过选定视频切割点获取候选新闻故事单元边界,将视频分成音频流和视频流;其次,选择静音区间为音频候选切分点,主持人镜头帧和主题字幕帧作为视频候选切分点,根据候选切分点获得新闻故事基本单元,利用语义相似性分析各单元内容进行合并或独立分离,得到最终新闻故事;最后,采用人脸识别、YOLOv5来进行主题字幕检测、语义相似性合并或独立新闻故事基本单元,使得新闻故事边界划分更为准确。该新闻视频故事分割算法在《新闻联播》视频中查全率和查准率分别达到了97.17%和98.19%,为新闻视频导航、检索等应用提供辅助准备。

一种通用的基于基本语义单元的体育视频内容分析框架

体育视频内容分析的研究现状集中在语义标注 ,对体育视频的句法分段和框架的研究较少 .本文在分析了体育视频基本特征的基础上 ,提出了体育视频中基本语义单元 (Basic Sem antic U nit,简称 BSU单元 )的概念 ;继而提出了一种基于 BSU的体育视频内容分析的通用框架 ;并且以足球视频为例 ,实例化了这种通用的体育视频内容分析框架 .初步的实验结果表明 ,这种基于 BSU的体育视频内容分析框架是有效和可行的 .

一种基于基本语义单元合成Petri网的足球视频查询描述模型

足球是最具世界性的体育运动之一,球迷遍布五大洲,因此在体育视频节目中足球备受广大观众青睐·在分析了足球视频特点的基础上,提出了一种基于基本语义单元合成Petri网的足球视频查询描述模型·该模型首先定义了一种类似文本字词集合的足球视频基本语义单元集合,在此基础上采用基本语义单元合成Petri网模型建立了一种足球查询语义的描述模型,并分别构建了进球、进攻、角球、犯规、换人等足球语义·初步的实验结果验证了该模型的有效性,并能推广至球类视频和其他体育视频·

“字”作为基本结构单位的“音、形、义、法”

"字"是独立编码、能够不断重组的常用汉语成分,既是汉语的最小意义单位(相当于英语的"语素"),也是基本的结构单位(相当于英语的"词")。"字"因此具有双重性。"字音"和"字形"边界清楚,容易界定;"字义"一般自足自立;"字法",即其组合法则,体现了自由和灵活的特点。

一种基于运动的视频层次化分析框架

运动信息是视频中最重要的特征之一.本文提出了一种新颖的基于运动的视频层次化分析框架.为了揭示视频流中的运动关系和在拍摄过程摄像机的运动信息即拍摄者的兴趣所在,提出了视频层次化结构来对视频流进行描述和检索.该运动层次化结构引入一个新的概念:基本运动单元(Basic Motion Unit,BMU).BMU反映的是MPEG-7中定义的基本摄像机操作,这样就可以把视频分割成BMU的集合.在BMU的基础上发现并挖掘出视频流中潜在的运动语义模式,最后根据运动活力(Motion Activity)将BMU聚类为运动节奏快慢的运动活力单元(Motion Activity Unit,MAU).该基于运动的视频分析框架不仅能够直观地捕获视频流在拍摄过程中拍摄者的注意力,而且为视频流的快速浏览和检索提供了新的思路.

基于功能和装配关系的装配单元规划

装配单元规划是在一定的产品功能和装配关系下,将产品划分为若干个零部件的集合。首先分解产品功能,构建功能单元模型,然后将产品零部件分为功能件和连接件,基于功能件间装配关系信息,构建装配语义信息表和装配关系模型。选定装配基础件,综合功能单元模型和装配语义模型,通过模糊聚类完成装配单元划分。

无烟煤结构的高分辨电镜研究

镜质组不仅是煤结构变化最具规律性，也是影响煤质的主要微成分。用点分辨率为２．１Ａ的高分辨电镜对几种不同煤化程度的无烟煤大分子结构进行了研究。结果表明，电镜图像直接表征了无烟煤分子的非均匀性孔隙结构。京西煤分子方向化程度强，主要以芳层平行堆或有序化前结构为主；晋城煤方向化程度弱，主要以粒状嵌晶结构为主。高分辨电镜技术是研究煤分子结构和煤化作用实质的有效方法。

“汉语一千字”作为通用语义符号的设想

知识经济时代呼唤国际“通用语义符号系统”。本文提出了“通用语义符号系统”的基本单位应该满足的5个条件:1)语义符号的形式简单;2)语义符号容许有不同的读音;3)语义符号与所指有一定的象似性;4)语义符号表示基本概念;5)用语义符号表达复合概念和命题时具有灵活的组装性。跟英语相比,汉字比较适于用作国际“通用语义符号系统”的基本单位。最常用的“汉语一千字”对现代汉语的覆盖率已达90%。在此基础上,经过增减和优化,可确定用于“通用语义符号系统”的“汉语一千字”。

基本语义记录(BSR)标准化研究与分析

基本语义记录的目的是提供一个国际商定的多语种数据概念记录。本文对BSR标准化工作进行了分析总结,并为我国开展BSR标准化工作提出了建议。

汉语篇章句及其灵活性——从话题链说起

本文从话题链的基本概念出发,举例阐述其与现代汉语多种语法形式、语义表达间之互动而产生的结果。实际语料显示,话题链是汉语篇章结构的重要形式之一。其原因在于话题链在小句之间具有极为强势的联结功能。至于其他语法及语义上的联结功能则较为弱势,如平行结构、语义对比、词汇连贯(lexical cohesion)等皆属此类。以上各种机制,或单独运作,或同时发挥作用,形成高于小句之语法单位,本文称之为"汉语篇章句"。至于"文体转换""观点改变"等因素,则往往标示话题链或汉语篇章句之终结,甚至新段落的开始,以致汉语篇章句虽能以形式来规范,却仍具有一定程度的灵活性。