Protocol Buffers在即时通讯系统中的应用研究

即时通讯系统已经广泛应用在人们的生活中,随着用户数量的增长,计算机设备在网络中传输的数据量越来越大。由于网络中的数据传输是非结构化的,因此需要数据的序列化与逆序列化方法来实现网络数据到可读数据的转换。基于即时通讯系统对于数据的实时性需求,提出了使用Protocol Buffers作为系统的序列化与逆序列化的手段,并且将Protocol Buffers与目前几种比较主流的数据序列化方法进行了对比。

Protocol Buffer在Android企业云通讯录中的应用

本文介绍了在Android企业云通讯录中,应用Protocol Buffer进行数据更新的使用方法,并通过实验测试数据,对XML(extensible markup language)、JSON(JavaScript object notation)、Protocol Buffer进行时间和空间性能比较。

基于Google Protocol Buffer的即时通讯系统设计

为提高即时通讯服务数据传输和存储的高效性和稳定性,提出了一种基于Google Protocol Buffer的即时通讯系统。该系统利用Protocol Buffer数据交换格式对通讯数据进行处理,提高系统的传输效率。实验结果表明,与json、xml相比,经Protocol Buffer序列化后的数据大小要明显小于其他两种方法,系统整体传输效率和安全性较高,并且具有良好的扩展性。

Protocol Buffers——比XML快近100倍

文章介绍了Google公司开发的一种新的数据描述语言—Protocol Buffers,说明了Protocol Buffers的定义、来源、发展和特点,且对Protocol Buffers和XML进行了比较,阐述了Protocol Buffers是如何工作的。

基于Protocol Buffers的配置下发接口适配与应用

简述了网管接口技术的发展现状,对现有网管接口技术使用的编码方式做出了比较;介绍了一种简单快速的序列化机制Protocol Buffers的基本功能与特点;提出了一种采用Protocol Buffers作为编码方式的网管配置下发模型,设计了一个Protocol Buffers与现有命令行(CLI)接口进行适配的适配层,给出了其工作原理与部署方法。

Protocol Buffers在数据采集与传输系统中的应用

随着传感器类型的多样化,采集和传输的数据类型也越来越多样化。这也要求数据采集与传输系统能够方便快捷的对不同类型的传感器和传输数据类型进行扩展。在基于Protocol Buffers的数据采集与传输系统中,通过使用Protocol Buffers作为数据序列化和反序列化的手段,并利用其反射机制等实现系统采集数据类型的快速扩展。

基于ProtocolBuffer协议的服务端-客户端通信

利用Python和Socket编程,实现基于ProtocolBuffer的服务端-客户端通信和接口的平滑升级。

基于Protcol Buffer的数控程序管理系统研究

针对航天机加工产品数控程序离散化、数据不一致、缺乏共享性等问题,文中提出了一种基于Protocol Buffer协议的数控程序管理系统。该系统通过分析车间型号产品工艺数字化需求,针对数控程序复杂、海量、迭代快的特征,提出利用MQTT连接技术将数控程序同机床DNC系统连接,同时基于Protocol Buffer协议设计了数据序列化方法,保证了数据存储和传输的轻量化。系统实现了数控程序的存储、检索、更新和共享应用,一定程度上解决了生产过程数控程序的离散化问题,为航天型号智能制造提供了一种思路。

智能网联汽车的高精地图数据交互模式

随着自动驾驶技术的发展,传统的地图服务已经不能满足以机器为主体的自动驾驶车辆的需要。具有更高精度、更多要素、更快更新频率的高精地图成为自动驾驶车辆的关键。不同来源数据之间的交互是高精地图用于自动驾驶导航决策的保证。针对智能网联汽车系统中高精地图的数据交互问题,本文首先对相关的研究进行了分析,依据高精地图的数据内容和数据来源对智能网联汽车中的高精地图数据进行再组织;然后详细阐述了基于车-路-云三方的高精地图数据交互的内容和交互机制,形成一个适用于智能网联汽车的高精地图数据交互模式;最后在仿真环境下对设计的数据交互模式进行了验证。

基于gRPC的城市轨道交通线网运营指挥平台分布式图纸数据同步更新方法

针对城市轨道交通线网运营指挥平台(简称:线网运营指挥平台)图纸数据更新面临的业务数据量大、效率低,以及图纸一致性难以保障等问题,提出一种基于gRPC的分布式图纸数据同步更新方法。通过对线网运营指挥平台图纸数据更新业务流程的深入分析,设计了技术架构,并详细阐述了图纸分类存储、图纸更新服务、gRPC分布式图纸通信中心、多语言跨平台客户端及图纸更新集合识别等关键技术。实际应用表明,该方法实现了线网运营指挥平台多客户端集群下图纸版本同步更新与一致性保障,有效减少了人工维护图纸版本的工作量,提升了处理效率,为线网运营指挥平台大规模图纸同步更新提供了一种新的解决方案,也为网络化运营提供了重要技术支持。

基于WP-MLP神经网络的VoIP自适应抖动缓冲算法

为解决抖动缓冲区播放延时和丢包之间的矛盾,实现缓冲区的动态调整使延时和丢包达到最优的平衡,提出一种基于WP-MLP神经网络的自适应抖动缓冲算法。首先,对抖动缓冲区的基本原理进行了分析并给出了丢包率与缓冲延时之间的函数关系;其次,提出了WP-MLP神经网络抖动缓冲算法的网络模型并对算法流程进行了分析;最后,通过VoIP网络仿真进行建模对比几种常用抖动缓冲算法,结果表明,本文所提算法能够在播放延时和丢包率之间保持更好的平衡,对缓冲区大小的动态调节表现出更优异的性能。

基于云计算的手机智能出租车呼叫系统

针对目前交通拥堵致使出行打车难的问题,设计并实现一种基于云计算的手机智能出租车呼叫系统。该系统由云服务器和Android手机客户端组成,服务器利用云计算环境下的Map-Reduce并行编程模型对K-means聚类算法实施并行化,提高推送信息的质量和效率;客户端分别利用LocationClient、MapView和MKOfflineMap接口实现定位服务、图层展示更新和百度离线地图服务功能,通过Android智能手机平台为用户提供及时、准确的信息服务。在客户端和服务器之间,利用RPC服务推送Protocol Buffer协议序列化的信息。实验结果表明,与滴滴打车软件相比,该系统的搜索推荐效率提高了20%左右,离线地图展示及定位流量比在线方法减少了90%以上,快速响应性能较好。

基于二维码的内外网物理隔离环境下的数据交换

针对保密性较高的工作数据或者其他原因导致的内外网物理隔离环境下数据交换困难的问题,通过对二维码生成和解析过程的研究,并且利用二维码可以携带数据、成本低和可随载体移动的特性,提出了使用二维码来解决一些特殊情况下的数据交换问题。由于单个二维码可携带数据有限,提出利用Protocol Buffer格式和LZMA压缩算法来简化和压缩需要通过二维码传输的数据,对于大型数据则采取多个二维码的组合方式传输。另外还简述了基于二维码的数据交换的应用前景。

一种高效嵌入式协议栈缓冲区管理机制

提出一种MYBUF高效嵌入式协议栈两级缓冲区管理机制,该机制基于内存保护模式,具有可配置性,支持静态、动态分配和回收.使用该缓冲区管理机制可使嵌入式TCP/IP协议栈各层之间实现零拷贝数据传递.在基于自主开发的HDTV(High Definition Television)双向系统平台上的测试结果表明,该管理机制完全满足嵌入式系统网络通信的应用需求,是一种高效、简洁、可靠的缓冲区管理机制.不失一般性,本文设计的MYBUF缓冲区管理机制可适用于其它嵌入式网络通信系统.

基于Netty的面向移动终端的推送服务设计

随着智能手机和平板电脑等移动多媒体终端的普及和4G的加速发展,移动互联网近年呈现了迅猛的发展态势。基于Android操作系统的各类APP应用如雨后春笋,影响着人们的生活习惯。面向移动端的推送服务通过分析用户喜好给用户推送其感兴趣的内容,能大大提升用户的活跃度和留存率,因此成为了APP应用不可或缺的重要组成部分。然而由于Android官方的消息推送机制C2DM(Cloud to Device Messaging)却有着覆盖率偏低的缺陷,APP开发者需要自己开发消息推送系统。本文通过研究开源消息推送和即时通信系统,分析比较常用的网络通信协议和网络IO框架,最终采用Java NIO网络框架Netty和开源数据序列化工具Protocol Buffers实现了轻量级的面向移动端的推送服务系统。

基于SAE J1939协议的双缓冲区网关设计

J1939是基于CAN2.0B的高速通信协议,它定义了特殊的报文结构和通信方式,描述了CAN网关的功能。从CAN网络拓扑结构等方面介绍了网关的重要作用,探讨了网关的工作流程和基于J1939的报文设计方法以及网关设计中的重要部分——缓冲区设计技术。分析了环形缓冲区的工作原理、规划方法以及发送缓冲区设计方法,并利用基于CANoe的半实物仿真技术对所设计的网关的性能进行检验。

信息物理系统数据格式交换性能研究

信息物理系统(Cyber Physical System,CPS)作为下一代智能感知系统,有效的将虚拟世界与物理世界进行融合,实现计算、通信、控制协同工作。CPS技术构成包括多方面,涉及军工、消防、交通、医疗等各大领域。由于CPS各节点间的数据传输存在规模性、动态性、异构性,选择一种合适的数据交换格式是提高系统传输效率的关键。目前数据间的交换多使用文本格式,针对XML、JSON的数据传输方式,其传输格式复杂,压缩文件体积较大,效率较低;相比较,Google推出的Protocol Buffer二进制传输格式在传输时效方面更具优势。本文主要以异构网关中不同格式的数据转换性能为研究重点,通过不同传输格式传输时效性的对比,并采用具有优势的Protocol Buffer方式对CPS系统数据进行封解包。

基于E-Model的VoIP语音质量研究

针对目前网络电话语音质量难以准确评价及预测的情况,基于E-Model对VoIP的语音质量进行预测。分析几个主要影响因素,如延时、丢包等对话音质量的影响,构建VoIP语音质量预测模型,将E-Model中未考虑到的抖动因素引入模型公式,着重考虑抖动缓冲区的大小对语音质量的影响。通过设计相关验证实验,证明该模型对VoIP语音质量的预测具有较高的准确度。

基于Myrinet的高性能VIA设计与实现

Virtual interface architecture(VIA)建立了一种低延迟、高带宽的通信模型,定义了集群系统中用户层高性能通信规范的标准.通过分析VIA的进展、原理及当前的实现,在Myrinet上设计并实现了一个符合VIA规范的高性能用户层通信软件MyVIA.首先定义了MyVIA的设计原理和框架;然后针对MyVIA实现的不同层次,通过与BerkeleyVIA的比较,提出了UTLB、连续物理内存和可变长NIC内存管理、基于资源和DMA chain的流水线处理、物理描述子环和物理描述子动态缓存等多项优化技术.通过性能的分析比较表明,MyVIA发送4KB数据包时的带宽可达到250MB/s,最小单边延迟为8.46ms.与目前其他VIA实现相比,MyVIA的性能有了较为显著的提高.

基于gRPC分布式数据通信的地铁线网指挥中心平台设计与实现

地铁线网指挥中心平台以综合监视系统为核心,以数据应用系统、运营执行系统为协同管理。由于关联的设备系统多、业务复杂,海量数据交互的实时性、并发性、准确性要求高,线网指挥中心平台的数据通信问题一直是一个难题。为解决该问题,基于Protocol Buffer通信协议,设计和实现了基于gRPC分布式数据通信的地铁线网指挥中心平台系统架构。远程过程调用gRPC机制是分布式系统和计算机网络中通信的新型机制,在网络化运营模式下通过采集大量的设备数据、业务系统数据,可实现平台数据的规范化处理和业务系统间的高内聚、松耦合通信,提高城市轨道交通运营安全保障能力。