基于时空解耦Transformer的视频字幕去除算法

视频字幕在传递信息的同时,固化在视频中的字幕也阻碍了视频的重复利用。提出一种基于时空解耦Transformer的视频字幕去除算法,能够从带有字幕文本的视频序列中去除字幕文本,并重建出被字幕区域遮挡的背景图像。整体框架分为两个部分,字幕掩膜提取模块和字幕去除模块,前者快速精准地获得输入视频序列的二值字幕掩膜,将得到的二值字幕掩膜作为辅助信息,输入到基于时空解耦Transformer的字幕去除模块,进行字幕文本的去除和背景纹理的恢复,实现对整体视频字幕的去除。与现有的经典视频字幕去除方法相比,在峰值信噪比和结构相异性等图像质量指标以及视觉效果上,该方法均取得了更好的性能,实验结果验证了该方法在视频字幕去除领域的有效性。

基于空间金字塔的视频超分辨率重建算法

为了保证重建视觉质量的同时提高重建速率,提出了一种基于空间金字塔生成对抗网络的视频超分辨率重建算法(SPyGAN),该方法在TecoGAN的基础上使用更轻量级的空间金字塔网络结构SPyNet和更高效的上采样方法,能够快速重建图像的高频纹理细节。主要对生成对抗网络TecoGAN的光流预测网络、图像重建模块和损失函数部分进行改进,实验结果表明,该算法与TecoGAN相比,PSNR和SSIM的平均值均有一定提高,此外参数量减少为53.86%,并且重建速率提高至239%,有效提升了模型的重建速率。

档案信息资源开发利用跨界合作策略研究

档案部门应拓宽思路,积极开展多元的跨界合作,并运用创新思维,进行多途径的跨界合作,同时要遵循合作双方互惠互利的原则,坚持以用户为中心,建立及时的反馈机制,通过跨界合作的方式对档案信息资源进行整合与利用。

基于可变形非局部三维卷积网络的视频超分辨率重建算法

视频超分辨率(VSR)技术的目标是找出从相应的低分辨率(LR)视频序列重建高分辨率(HR)视频的最佳重建方案。提出了一种新颖的可变形非局部三维卷积网络(DNL-3DCNN)能有效地利用时空信息和参考帧与相邻帧之间的全局相关性。具体来说,非局部结构(Non-Local)同时增强了输入帧的时空信息中所需要的精细细节。此外,残差可变形三维卷积(R3D)获得了卓越的时空建模能力和运动感知建模的灵活性。此外,残差密集连接网络(RRDB)再进行重建处理,以充分利用输入到重建模块的层级特征。在基准数据集上进行的定量和定性实验表明,与现有的较为先进的VSR方法相比,所提方法在PSNR指标上提高了1.19db,在SSIM指标上提高了约5.95%。消融性实验确认提出的三个模块均带来了一定的性能增益,实验结果验证了所提算法在视频超分辨率时空信息重建领域的有效性。

基于“互联网+”的档案信息资源开发思考

“互联网+”的提出给档案信息资源开发带来了新的思路,通过“互联网+”的思维指导和技术支持,档案信息资源开发可以重新焕发活力,并向协作整合、创新驱动、开放生态等方向转变。同时,档案信息资源开发应形成“互联网+”的新模式,在生态化开发方面进行创新,使档案信息资源得到充分利用,满足用户的需求,激活档案的价值。

一种基于两步法的时空域图像增强算法及其在三维重建中的应用

为了提高基于多视图立体匹配网络(MVSNet)的深度学习算法在复杂场景下的重建完整性,提出了一种基于两步法的时空域图像增强算法,可用于提高视频图像的质量,并最终提高三维模型的重建完整性。首先利用空间域去噪网络减少视频帧内噪声,在这一步有效地降低噪声水平,使得下一步能够更好地处理帧间噪声和建立网络模型。在第二步时间域视频增强网络利用相邻帧间存在的时间信息,能够有效地减少帧间闪烁。使用公开数据集Tanks and Temples中的Truck视频图像进行验证,实验结果证明,在使用同一个多视图立体匹配网络R-MVSNet下生成三维点云,相较目前先进方法FastDVDnet,该方法误匹配点数更少,点云更完整、更清晰。

基于以太网络的宇航用高清摄像机的硬件设计

由于目前现有工业用摄像机无法满足空间大温度范围、强振动环境等要求,提出了能够适应空间环境的基于以太网络视频传输的高清一体摄像机。该摄像机在完成包括H.264,JPEG2000,MPEG4等图像编码算法的同时,支持空间以太网络协议进行传输和控制。针对宇航环境使用要求,从结构设计、力学设计、热设计、电磁兼容设计等方面进行可靠性设计和仿真验证,满足质量轻、温度适应性好、可靠性高等要求。经过鉴定试验验证,所设计的高清一体摄像机可以可靠地在空间严苛环境中工作。

参与式语境下档案信息公开传播创新的思考

参与式语境下的档案信息公开传播某种程度上创新了档案信息公开传播的模式,它从档案信息公开的参与主体、内容收集、内容呈现、加工及鉴定的诸多环节上重塑了档案信息公开传播,众包、草根性、协作鉴定、社交化是其创新的重要体现。但由此而产生的档案工作者角色定位、参与者管理及质量控制问题需要我们深入思考,从而积极应对参与式语境下档案信息公开传播的变革。

档案学语境下的“参与”研究

在“参与式文化”的时代里,“参与”已经成为档案领域研究的热点。通过对文献梳理分析,发现“参与”主要是在管理与赋权的范围下进行探讨,“参与”方式构成多元化,参与所表达的概念具有多样性及复杂性。今后我国应加强在文化视域、本土化视域及实践视域维度的研究,从而推进我国档案“参与”研究不断深入。