嵌入式Linux下基于FFmpeg的视频硬件编解码

对FFmpeg多媒体解决方案中的视频编解码流程进行研究。结合对S3C6410处理器视频硬件编解码方法的分析,阐述了嵌入式Linux下基于FFmpeg的H.264视频硬件编解码在S3C6410处理器上的实现方法,为嵌入式多媒体开发提供参考。

一种应用于音库压缩的低速率编解码方案

传统的语音编解码器大多针对通信场合设计,无法很好的满足应用于语音合成中的音库压缩的要求。本文根据音库压缩的特点,提出了一种低码速率的编解码方案,其在3Kbps左右的码率下获得类似G.723.1在5.3Kbps下的效果,并具有解码端算法简单的优点。作为技术原型,该方案可以广泛应用于各种场合下的语音合成系统,特别对资源受限情况下语音合成,具有重要的意义。

基于Gstreamer框架的ffmpeg流媒体编解码设计

把数字可视对讲系统的采集端(Android)及播放端(Android)对音视频的采集、编码、RTSP传输、FFmpeg解码、播放等功能模块基于Gstreamer设计成可以插拔的组件。进而实现基于Android与Gstreamer的数字可视对讲系统。本文通过基于gstreamer框架管道设计实现视音频数据的采集后ffmpeg的编解码过程。

基于RISC-V的FFmpeg多媒体算法库优化策略

RISC-V处理器的广泛应用使得FFmpeg多媒体算法库在RISC-V平台上的高性能实现日益重要。提出一种基于RISC-V架构的系列优化策略,针对开源音视频多媒体FFmpeg算法库中不同特征和计算密度的算法,利用RISC-V指令集的扩展性对算法库中某些耗时的算法进行指令加速和并行优化。在深入研究RISC-V开源架构的基础上,构建一个基于RISC-V开源架构的高性能FFmpeg算法库。针对不连续访存类算法、数据依赖类算法、数据快速转换类算法,从向量单元配置、向量化访存、汇编优化、指令流水优化4个方面出发,大幅提升FFmpeg算法库在RISC-V处理器上的性能。实验结果表明,采用以上优化策略后的FFmpeg算法库在基于RISC-V架构的XT-910芯片上的性能得到明显提升,其中的不连续访存类算法、数据依赖类算法、数据快速转换类算法的加速比分别为8.20、3.67、3.62。

Tensilica HiFi音频编解码算法库新增FLAC解码器

Tensilica宣布为其不断增长的软件库新增无损音频压缩编码（FLAC）解码器，用于HiFi系列音频DSPIP核。

基于H.265编解码高清视频传输系统

为解决高清视频的实时传输将带来带宽压力的增加和时延的增长等,基于H.265编解码提出一种新的高清视频传输系统设计方法来改善上述情况。系统首先采用Hi3516A处理器对高清视频进行H.265硬编码,然后运用Boost:asio库进行专用流媒体服务器设计,最后基于Direct X进行渲染显示方案设计。经系统实验验证,文中系统通过对高清1 080P视频在25 fps帧率以及2 M码流传输情况下经H.265编解码后,系统传输时延约为120 ms。同时在普通高清720P和标清480i视频采集条件下,H.265相对于H.264在传输码率减半时解码后图像的PSNR值与经H.264编解码解码后图像的PSNR值基本相同。但在高清1 080P视频采集条件下,H.265编解码在1 M码率传输时解码后图像的PSNR值明显优于H.264编解码在2 M码率传输时解码后图像的PSNR值。

H.264编解码算法在视频会议中的应用

视频压缩是视频会议中的核心技术,压缩技术的好坏决定着视频会议质量的高低.H.264是一种高性能的编解码算法,具有较高的压缩比和较好的网络适配性.对H.264编解码算法中的关键技术进行了介绍,同时介绍了Directshow技术框架.并且,通过将开源的H.264编解码库FFmpeg嵌入到Directshow链路中,实现对用户视频数据的编码压缩及解码播放.

Tensilica推出新AMRWB＋音频，语音编解码器

Tensilica日前为其Hi—Fi2音频处理器算法库新增AMRWB＋（自适应多速率宽带＋）音频／语音编解码器。AMRWB＋语音编解码通过增加对立体声信号和更高的采样率的支持，提供低比特率下更高的语音质量，改善现有的AMR宽带语音编解码器。

基于UCGUI库的外扩中文字库研究与实现

UCGUI是实时嵌入式系统中广泛使用的图形用户界面,但UCGUI不支持中文字符编解码。为此,提出一种支持中文字符编解码的方法。在分析UCGUI字符编解码框架基础上,修改内核代码,添加GB2312汉字编解码驱动,实现中文字符显示编解码服务。针对UCGUI中文显示时中文字库占用空间大与MCU存储空间有限的矛盾,提出一种字体驱动与字模数据分离的中文字体设计方法,包括为外扩字体设计专用驱动、字模数据存储接口及存储方法。在UCGUI仿真平台环境下的测试结果表明,该字库在UCGUI系列环境下,具有较好的可用性和通用性,可弥补UCGUI界面库在低成本嵌入式系统中难以实现中文显示的缺陷。

基于申威421的视频解码的向量化并行

H.264解码器在申威平台移植后遇到解码效率低,视频播放不流畅等问题。为提升视频解码性能,满足国产申威平台用户的多媒体需求,首先对FFmpeg开源编解码库中H.264解码器进行了详细分析,使用性能分析工具找到视频解码的热点函数。然后充分利用申威处理器的向量扩展部件,对解码器运动补偿、DCT反变换等关键模块代码使用手工嵌入式汇编进行向量指令替换来缩短指令周期,实现向量化并行。最后对环路滤波代码中不能直接向量化的循环通过数组重组等方式满足向量化分析,然后进行向量化计算,更深层次挖掘多媒体并行能力,从而提升多媒体程序运行速度。实验结果表明,向量化后的视频解码性能最高提升了35.3%,释放了CPU资源,解决了视频播放不流畅的问题,有效推动了申威处理器市场化发展。

基于H.264的嵌入式视频解码研究

针对H.264格式视频编解码器在嵌入式平台上的应用需求,对H.264格式视频编解码器的优缺点进行了理论性介绍,在对H.264视频编解码器研究的基础上,实现了基于嵌入式S3C6410平台的H.264解码器和播放器的移植。对基于Linux的开源编解码库ffmpeg在嵌入式S3C6410平台上进行了移植,实现了嵌入式平台上对H.264码流的解码和播放。对视频流图像分别在PC机和目标板上的解码效果进行了详细比较,论证了研究的正确性,证明了此研究具有工程应用价值。

基于龙芯SIMD技术的H.264视频解码优化

为提高龙芯平台的多媒体处理能力,分析龙芯处理器核GS464/GS464E的LoongSIMD指令系统,提出SIMD指令级优化方法。通过分析FFmpeg的开源H.264解码器的并行特征,结合龙芯处理器的结构并行特点,利用龙芯特有的性能计数器,解析影响性能的热点函数,采用手工嵌入龙芯SIMD和访存扩展等汇编指令的方式进行细粒度优化。实验结果表明,该方法使平均性能提高了50%,工作成果已推送到龙芯开源社区,增强了基于龙芯3A处理器的国产计算机在桌面多媒体应用领域的用户体验。

FFmpeg在基于Android的楼宇可视对讲程序中的应用

该文介绍了在基于Android的楼宇可视对讲应用程序中,保存对讲视频的意义和工作原理。并提出了将FFmpeg解决方案移植到Android系统中来,以完成对视频信息的编码和解码工作。该文主要分析了FFmepg的源代码和特点,讲述了如何将FFmepg中的有用部分移植到Android平台上,并通过JNI技术实现Android应用层的调用,最终完成音视频的编码和解码工作。

基于FFMPEG的视频水印系统

提出一种基于FFMPEG的视频水印仿真系统,该系统将实现视频水印必须的编解码过程构建在完整的FFMPEG编解码库之上,在FFMPEG的编码器中添加视频水印算法,可以选择各种常用编码格式的视频流进行水印嵌入和提取,有很高的应用价值。实验以MPEG-2格式的视频为例,证明FFMPEG可以便捷地实现视频水印的嵌入和提取,为以后视频水印的研究提供一个通用的仿真平台。

基于FFmpeg的车载嵌入式流媒体终端的研究与实现

基于VS2017+Qt5开发环境实现一款能应用于车载的嵌入式流媒体终端。该终端采用开源的FFmpeg库解码解封装获得流式数据,基于Qt应用程序中的OpenGL库显示平面视频帧数据,对比3种音视频同步方案,解决音视频同步问题。经过测试验证,该款流媒体终端设备能够充分满足车载工作要求,系统功能稳定性良好。软件程序启动效率快并且支持多协议,视频播放流畅,音频无明显杂音存在,音视频同步功能较好。综上所述,该款跨平台的嵌入式流媒体可以很好地实现车载播放功效。

基于FFMPEG的跨平台视频编解码研究

针对视频监控提出了视频编解码器的软件实现。监控客户端采用S3C2440作为嵌入式硬件平台,并通过CMOS摄像头OV9650采集视频,经过FFMPEG编码传输给监控服务器端。监控服务器端接收到视频流后通过FFM-PEG实时解码播放,实现远程监控。实验结果表明,系统达到了监控客户端的视频采集、编码,监控服务器端解码和播放。

多媒体处理工具：FFmpeg

FFmpeg是一款完整的、跨平台的解决方案，根据所选组件，FFmpeg采用LGPL或GPL许可证，提供录制、转换和音视频流化功能。另外，它还支持最新的音视频编码库libavcodec。

Tensilica为HiFi音频DSP算法库增加DRA音频标准

Tensilica日前宣布，业界流行的HiFi系列音频DSP,在支持100多种音频编解码器和音频增强算法库的基础上，增加了《多声道数字音频编解码技术规范》（DRA）音频标准。现在基于HiFi系列音频DSP的所有产品，都符合中华人民共和国批准的多声道音频解码标准（GB／T22726—2008）。

基于FFmpeg的远程视频监控系统编解码

在远程视频监控系统中视频数据的编码传输以及解码显示是一个重要组成部分,通过对FFmpeg的研究学习,考虑采用FFmpeg来实现编解码的方法。远程监控系统由采集发送端和接收处理端组成,采集发送端使用S3C2440作为嵌入式硬件平台,并通过USB摄像头OV9650采集视频数据,经过FFmpeg编码后传输给接收处理端。接收处理端接收到数据后通过FFmpeg实时解码,采用OpenCV显示,实现远程监控。

基于iOS平台的移动视频监控软件设计

传统的远程视频监控系统所需软硬件资源大、视频传输协议和视频采集设备控制协议相互独立,系统传输带宽要求高、时延长、实时性不高。为解决这些问题,利用开放无线监控协议中的信息体结构,将视频信息传输、视频采集设备控制和其他信息融合在一个数据包中,并基于i OS移动操作系统和H.264视频编码标准,设计并实现一种集视频传输与控制于一体的移动视频监控软件。测试结果表明,该移动视频监控软件可有效提高移动视频监控系统的性能,具有控制响应速度快、传输带宽要求低、分辨率自适应以及实时视频播放流畅等特点。