音视频数据通信中自适应多码流网络传输控制技术

网络多媒体通信逐渐成为人们生活、工作以及其他应用中方便简洁的一种技术。网络音视频数据量相对于传统的信息（如文本,图片等）有更大的数据量,在网络传输中因网络硬件及其它因素造成的数据传输的不稳定。为了保证数据的实时可靠的传输,根据长时间开发音视频通信的经验,采用了一种从采集、编解码,到网络传输的相互配合的保证数据的实时可靠的传输的方法,称之为自适应多码流传输技术。

基于Mirror Driver的屏幕图像捕捉技术

目前各类非高依赖DirectDraw应用中屏幕捕捉技术存在效率低下、捕捉遗漏、光标丢失以及不够稳定等问题。为此,提出基于镜像显示驱动的屏幕图像捕捉方案。设计并实现内核驱动,通过捕捉鼠标光标移动路径中的关键点再现光标轨迹,并对捕获到的变化区域集进行优化合并。实验结果证明,该方案能快速稳定地捕捉屏幕上的变化区域图像,实现光标的移动捕捉。

基于FFmpeg的音视频流封装技术的实现

流媒体直播点播系统中,将实时采集的音视频流封装为流媒体文件是一项必不可少的工作。目前,FFmpeg封装音视频流广泛采用先解码、后编码封装的方式,针对该方式内存占用较多、CPU使用率较高的情况,提出将实时的H.264视频流和AAC音频流不解码直接封装为MP4文件的实现方法。该方法基于FFmpeg SDK进行二次开发,可处理实时采集的H.264视频流和AAC音频流。实验结果表明,该方法封装实时音视频流占用内存少,CPU平均使用率较低,适合在流媒体直播点播系统中使用。

基于Mirror Driver的屏幕共享方案研究与实现

针对远程教学中学生机端同步显示教师机端教学内容的需求,提出了一种基于Mirror Driver的教师机端屏幕共享解决方案。该方案基于教师机端对DirectDraw非高依赖和Mirror Driver能精确高效捕捉屏幕变化区域的特点,首先对教师机端屏幕高效捕捉;然后将捕捉的变化图像压缩成JPEG格式,通过网络传输到学生机端;最后学生机端提取JPEG数据,并转换成BMP图像,将多变化区域图像合成显示。实验结果表明,此方案能够实现高效的屏幕捕捉并同步显示,具有良好的实时性,可以应用于远程监控、远程教学等领域。