基于Android平台和WiFi传控的多功能机顶盒设计

按照数字电视市场对机顶盒的使用需求,分析了市场上常见的机顶盒的优劣,提出一种基于Android平台和采用WiFi进行数据传输与控制的机顶盒设计方案,以满足用户的使用需求。工程实测表明,基于该方案的机顶盒成本经济、可靠性高、功能强,达到设计的预期目的。

基于Android的智能家居系统设计与实现

Android系统是当前最为流行的嵌入式操作系统之一,具有很高的市场占用率。随着我国互联网技术不断地发展,智能家居技术在这个大环境下也得到快速的普及。本系统主要研究基于智能家居的机器人小车,利用智能小车本身所具有的可刷机、路由、摄像功能,在Android终端开发出一款具有趣味性、实用性以及一定商业价值的智能家居软件。

新一代通用视频编码标准H.266/VVC:现状与发展

相比于上一代标准,新一代通用视频编码标准(H.266/VVC)在同等质量下能够节省大约50%的码率,且适用于多种多样的视频应用场景。论文从H.266/VVC的关键技术出发,对标准的现状、实现和应用发展进行深入探讨。H.266/VVC沿用既往标准中的双层码流体系和混合编码框架,针对帧内预测、帧间预测、变换、量化、环路滤波等所有主要编码模块进行了技术革新,并为屏幕内容视频等应用提供了高效的专用编码工具。H.266/VVC标准目前已处于实用化阶段,官方参考软件VTM和开源编解码器VVenC/VVdeC是目前最具代表性的软件编解码实现。对H.266/VVC的性能分析可以看出:H.266/VVC针对高分辨率视频取得的编码增益更为突出;主要编码工具对性能的贡献通常以复杂度为代价,但也有部分编码工具在提升编码性能的同时可降低整体编码复杂度。H.266/VVC的硬件实现面临诸多挑战,发展明显滞后于软件实现,现有研究主要集中在对具体编码模块的硬件加速方面。H.266/VVC标准发布之后,下一代视频编码标准的发展目前仍围绕混合编码框架进行探索,聚焦在两大方向:超越VVC的增强压缩关注更为先进的、非神经网络的编码工具,基于神经网络的视频编码则探索采用神经网络的编码工具。除此之外,部分或完全跳出现有混合编码框架的端到端视频编码也在飞速发展,未来视频编码标准与神经网络结合成为趋势,但面临着计算资源依赖和稳定结构两方面的考验。

基于NBVTH算法的军用窄带信道视频传输研究

随着信息技术快速发展,音视频传输广泛应用在军民用领域。针对军用环境通信传输带宽窄、电磁干扰强、网络稳定性低等特点,迫切需要对军用窄带信道下音视传输频编码进行优化。介绍了适应军用窄带信道传输的视频编码框架和最新技术,提出了基于HEVC标准优化的窄带视频传输(NBVTH)算法,并在压缩比、压缩图像质量、编码时延等关键技术指标方面,将NBVTH算法与常用的H.264/AVC编码进行了性能对比分析。试验结果表明,NBVTH算法明显提升了编码性能,更加适用于军用窄带信道的视频传输。

分层特征编解码驱动的视觉引导立体声生成方法

视觉引导的立体声生成是多模态学习中具有广泛应用价值的重要任务之一,其目标是在给定视觉模态信息及单声道音频模态信息的情况下,生成符合视听一致性的立体声音频.针对现有视觉引导的立体声生成方法因编码阶段视听信息利用率不足、解码阶段忽视浅层特征导致的立体声生成效果不理想的问题,提出一种基于分层特征编解码的视觉引导的立体声生成方法,有效提升立体声生成的质量.其中,为了有效地缩小阻碍视听觉模态数据间关联融合的异构鸿沟,提出一种视听觉特征分层编码融合的编码器结构,提高视听模态数据在编码阶段的综合利用效率;为了实现解码过程中浅层结构特征信息的有效利用,构建一种由深到浅不同深度特征层间跳跃连接的解码器结构,实现了对视听觉模态信息的浅层细节特征与深度特征的充分利用.得益于对视听觉信息的高效利用以及对深层浅层结构特征的分层结合,所提方法可有效处理复杂视觉场景中的立体声合成,相较于现有方法,所提方法生成效果在真实感等方面性能提升超过6%.

面向嵌入式微处理器的高性能视频编解码算法

针对高清和超高清视频,嵌入式微处理器在进行视频编解码时常常会受到资源的限制,导致输出的视频画面出现模糊的情况。为此,提出一种面向嵌入式微处理器的高性能视频编解码算法。利用最小平均绝对值误差作为匹配准则指标,预判断高性能视频的失真率损耗,计算图像中最大交流系数总能量,获取高细节分块,感知运动视频;利用空时域条件下的边缘图获取视频编码的相邻像素权重,通过像素间距离获取超像素为前景区域的概率,对目标前景区域编码;采用最小化范数优化编码视频约束条件,利用拉格朗日乘子等价转换编码视频,根据训练冗余字典计算视频解码校正因子,完成最终的视频编解码。经实验证明,所提方法能有效地完成高性能视频编解码,保证视频质量,视频的编码率一直处于31.3 dB,相对稳定。

基于时间特征细化网络的时空视频超分辨率研究

时空视频超分辨率(space-time video super-resolution,STVSR)通过时间和空间2个尺度提升视频的质量,从而实现在视频采集设备、传输或者存储有限的情况下依然能实时地呈现高分辨率和高帧率的视频,满足人们对超高清画质的追求。相比两阶段方法,一阶段方法实现的是特征层面而非像素层面的帧插值,其在推理速度和计算复杂度上都明显更胜一筹。一些现有的一阶段STVSR方法采用基于像素幻觉的特征插值,这幻化了像素,因此很难应对帧间快速运动物体的预测。为此,提出一种基于光流法的金字塔编码器-解码器网络来进行时间特征插值,实现快速的双向光流估计和更真实自然的纹理合成,在使得网络结构更高效的同时弥补了大运动对光流估计带来的不稳定性。另外,空间模块采用基于滑动窗口的局部传播和基于循环网络的双向传播来强化帧对齐,整个网络称为时间特征细化网络(temporal feature refinement netowrk,TFRnet)。为了进一步挖掘TFRnet的潜力,将空间超分辨率先于时间超分辨率(space-first),在几种广泛使用的数据基准和评估指标上的实验证明了所提出方法TFRnet-sf的出色性能,在总体峰值信噪比(peak signal to noise ratio,PSNR)和结构相似性(structural similarity,SSIM)提升的同时,插入中间帧的PSNR和SSIM也得到提升,在一定程度上缓和了插入的中间帧与原有帧之间PSNR和SSIM差距过大的问题。

智慧工地领域中视频监控数据编码分析

智慧工地是视频监控的一个特殊应用场景。在这个系统中,视频数据的远距离传输质量至关重要。视频数据的编码与解码,作为视频数据传输质量的关键所在,尤其需要得到关注。为此,从监控视频编码解码工作原理展开,对H.264编码解码器的结构进行深入讨论。

电声信号编解码技术在网络多媒体传输中的应用

探讨电声信号编解码技术在网络多媒体传输中的应用,重点分析音频、语音、视频编解码的原理和关键技术。通过实际案例剖析,揭示了编解码技术在复杂网络环境下的优化措施,如自适应码率控制、智能分路由、错误恢复机制等,有效提升了多媒体传输的质量和稳定性。

深度学习理念下视频编解码技术探究

视频编解码过程中,常因量化操作的引入,导致视频出现有损压缩,在后续播放中,产生较多压缩残影,且在低比特编码中更为明显。因此,针对此问题的优化,在深度学习的理论基础上,提出了一种新型的基于光流技术的时空神经网络模型(FGTSN),旨在对编码视频进行精确的后处理。实验证明,该FGTSN方法能够显著提高HEVC压缩视频的质量,其效果远超过其他视频质量增强技术。此方法能有效解决遮挡和大范围运动场景下的问题,并提升了压缩视频帧的重建效率,证明了其在实际应用中的高价值。

基于卷积神经网络的多路视频多视角场景编解码方法

常规的多路视频多视角场景编解码,主要采用视频单帧迭代处理实现编解码过程,忽略了视频中冗余信息对编解码效果的影响,导致编解码结果的视频帧峰值信噪比较低。因此,提出基于卷积神经网络的多路视频多视角场景编解码方法。构建双任务的双残差连接块卷积神经网络,在该网络中最小化视频空间点的距离值,匹配得到视频运动估计矢量特征并补偿,降低冗余信息的影响,在此基础上定义多路视频的编码内容,并通过重构解码帧实现多视角场景的编解码过程。实验结果表明:所提方法应用后得出的视频编解码结果,表现出的视频帧峰值信噪比较高,有效改善了视频质量,满足了多路视频多视角场景的实际应用需求。

地震应急通讯保障系统的设计与思考

以华东地震应急联动协作区地震应急演练为例,探讨了演练现场与指挥中心之间异地会商、现场音视频实况转播和测震波形实时显示的主要通讯实现方法;通过比较试验,确定采用WiMAX无线通讯方式传输现场本地数据、采用编解码器传输音视频信号时,双向视频传输需使用2对编解码器,但1对编解码器上就能完全实现异地音频的互通,AV-1600e型编解码器在地震系统目前的卫星应急通讯信道下采用600 kpbs的视频编码率,能提供相对稳定的画面。实践表明,WiMAX无线通讯能较好地扩大野外本地网络通讯半径,编解码器能实现异地音视频互通,但对信道要求较高,效果较难保证。

高清晰度电视芯片中视频和音频同步的异步实现

高清晰度电视的传输流采用了MPEG 2系统层标准ISO/IEC 13818 1。阐述了高清晰度电视 (HDTV)传送流中时间信息码在视频和音频同步中的作用 ,分析了信源解码器中视频和音频同步的原理。就实际芯片中系统时钟的恢复、视频和音频的跳帧等机制进行了讨论 ,并提出了一种非锁相异步全数字视音频同步实现方案。该方案采用了直接置数法恢复系统时钟 ,滞后跳帧法实现视频与系统时钟的同步 ,数字锁相法控制音频与系统时钟同步。最后 。

AVS帧内预测算法及其解码器的硬件实现

文章介绍了AVS帧内预测解码模块的硬件实现,概述了AVS视频编解码标准的帧内预测技术,重点讨论了AVS帧内预测各模式的算法,并将AVS的帧内预测技术与H.264的帧内预测技术进行了性能比较,分析了AVS帧内预测的算法复杂度,在此基础上设计了AVS帧内预测解码模块的硬件实现,并提出了一种可重构的帧内预测计算单元的实现方法。

基于压缩感知理论的视频编解码器

结合压缩感知理论和传统的视频编解码技术,提出了一种基于压缩感知理论的视频编解码器。其编码过程可看成是将高维信号投影到低维空间的过程,解码过程不再是传统方式下的编码的逆过程,而可看作是求解欠定方程组的过程。该编解码器结构比较简单,不仅所需图像的样本数很少,样本数可根据不同的编码模式进行选择,而且能获得较高的压缩比和较好的重构图像质量。

MPEG-2 解码中的音视频同步及其实时实现

音视频同步是ＭＰＥＧ－２实时解码实现的难点．讨论了ＭＰＥＧ－２的音视频同步模型，提出了一种适于实时解码的ＭＰＥＧ－２音视频同步算法，给出了同步的判断准则和实际的处理过程．对于不同的失步类型，采取跳帧或重复一帧的纠正措施．采用中断方式实现解码芯片与主控芯片的通信，主控芯片建立ＰＴＳ表并判断是否同步，在失步时控制解码芯片采取纠正措施．这种音视频同步算法已经成功地应用于作者研制的高清晰度电视（ＨＤＴＶ）信源解码功能样机中．实验表明，它能够准确、可靠地实现音视频同步．

基于DM642嵌入式图像融合处理系统硬件设计

本文以图像融合硬件系统及其实现技术为研究内容,以TMS320DM642为核心处理器,以SAA7121H和TVP5150PBS为视频编解码器,介绍了高性能图像融合处理系统的硬件设计过程,详细描述了系统架构、核心处理器内部配置以及视频编解码模块电路设计,并结合实际设计中碰到的问题给出了解决办法。

基于IP的分布式远程视频监控系统

视频监控系统是高速公路管理信息系统的重要组成部分。对视频监控系统的现状及其发展趋势、音视频编解码技术和网络通信技术进行了研究,在此基础上开发了一种基于IP的分布式远程视频监控系统。实际使用表明,该系统具有设备简单、投资小、视频资料数字化网络化管理、系统组网灵活可扩充性好等特点,完全能满足高速公路分布式远程视频监控的需求。该系统同样适合需要分布式视频监控的场合,如:金融、电力、地铁等,具有广泛的应用前景。

GIS和DVS的集成与应用

随着社会的进步和发展,地理信息系统也需要根据用户的需求开发更多的功能。数字视频服务器是一种对音视频数据进行编码处理并完成网络传输的专用设备,可以实现远程监控、语音对讲等功能。将它与GIS结合,可以为GIS提供更加实时的音视频专题信息,GIS也可以对这些信息做出更加科学系统的分析处理,辅助用户做出相应的决策。基于DVS技术的GIS的设计与实现,很好地解决了银行保安、道路监控等实际问题,加快数字城市的建设脚步。

基于局域网的视频实时传输系统的设计与实现

文中提出了一个自行设计开发的视频实时传输系统 ,介绍了采用MJPEG算法实现该系统的特性 ,并就该系统的采集、编码、回放和传输控制等几个问题进行了讨论。