面向360°全景视频的帧内预测编码的快速算法

为了节省360°全景视频的编码时间,对通用视频编码标准中的编码单元划分决策过程进行了研究,提出了一种面向360°全景视频的帧内预测编码的快速算法。通过优化编码树单元(Coding Tree Unit,CTU)的编码深度范围和编码单元的划分模式的选择过程,减少编码时间。实验结果表明,在全帧内模式下,所提算法比原始算法平均可以节省34.33%的时间复杂度,同时带来的BDBR平均增量仅为1.665%,BDPSNR的平均降低量仅为0.076 dB。

360度视频与视口预测方法综述

360度视频是获取沉浸式虚拟现实体验的便捷媒介之一,近年来受到了广泛关注。视口预测技术是缓解360度视频高网络带宽要求的重要手段。聚焦视口预测技术,首先介绍360度视频的基本概念、背景和360度视频流式框架,对比常用的球面到平面投影方法、视频编解码标准;分析360度视频高网络资源消耗的原因,体现视口预测技术对360度视频流式的重要作用;介绍360度注意力数据集,总结主流公开数据集;将现有的视口预测方法,分为基于用户历史轨迹的方法和基于视频内容的方法,进行系统性的综述,梳理视口预测方法的发展脉络,介绍视口预测方法的最新工作,比较不同方法的特点、优势和不足,并简略介绍了360度显著性检测,360度显著性检测是基于视频内容的视口预测方法中的重点。最后进行总结,分析了现阶段视口预测方法面临的问题,展望了包括视口预测方法在内的360度视频相关技术的未来发展趋势。

360°全景技术在漓江流域生态旅游资源展示中的应用研究

文章介绍了360°全景技术的特点,并以漓江流域生态旅游资源为例,叙述了通过漫游路径设计、实地取景、全景图制作、全景漫游场景制作等步骤,建立漓江流域生态旅游资源展示系统的过程。研究表明,将360°全景技术应用到旅游资源展示中具有可行性和实用性,可为相关旅游管理部门的旅游资源展示提供参考思路,具有很大的现实意义。

应用360°全景影像于人脸检测方法

针对360°全景影像背景复杂、色彩干扰大的特点,提出了一种新颖的人脸检测新方法:首先进行彩色空间转换,结合色调信息,在YCbCr彩色空间中实现肤色区域分割。对分割区域进行形态学开闭运算有效过滤噪声;然后,利用人脸几何特征剔除不可能为人脸的虚假肤色区域;最后,利用平均人脸模板实现人脸的有效验证。实验结果表明,该方法适合于360°全景影像中的人脸检测,是一种能适应不同环境、不同姿态的人脸检测方法,效率高,稳定性好。

360°全景技术在高校图书馆的应用研究

在虚拟展示中,360°全景技术能给人带来身临其境的真实感受,被越来越多领域应用于宣传推广工作。笔者通过阐述360°全景技术的概念及其应用现状,提出360°全景技术在展示高校图书馆的人文环境、提高读者获取资源的效率、便于图书馆的日常管理等三个方面的作用,并提出将2.5维虚拟与GIS地图技术相结合应用于高校图书馆的设想。

基于车载360°环视影像和深度神经网络的路面坑塘与裂缝检测

为解决目前道路智能病害检测系统自动化程度低、运行成本高和准确度差等问题。基于无缝360°环视影像拼接、YOLOv3目标检测深度卷积网络框架以及Inception v3模型,提出一种新的基于改进深度卷积神经网络的环视拼接路面图像坑塘与裂缝检测算法。创新性地提出以YOLOv3为路面病害目标检测网络框架,将其原有的主干网络darknet替换为对于坑塘与裂缝等路面病害深度特征辨识度更高的Inception v3模型,从而更加精确有效地检测覆盖三根车道的多尺度路面坑塘目标。结果表明,算法对于路面病害,特别是坑塘与裂缝的检测总体准确率有明显提升,在所采集的大规模360°环视路面病害数据集上超越了原始YOLO和简化YOLO算法,以及基于MobileNet和VGG16为主干的变种,平均准确率均值mAP能达到72%以上。

360全景技术让行车更安全

360°全景技术是一种视觉新技术,也称为虚拟现实全景技术,具有视角宽、图像真实、三维等特点,被广泛应用于主动安全领域,全景技术通过处理后以鸟瞰图的形式展现车身四周,做到四周无盲区显示。论文主要对360°全景技术进行概述,并在此基础上探究该技术的应用与发展。

360°全景展示的虚拟校园导航系统创新设计研究

近年来,随着网络技术、虚拟现实技术的飞速发展,为360°全景展示的虚拟校园导航系统的实现创造了条件。文章首先阐述了360°全景技术的概念及应用现状,提出了360°全景展示的虚拟校园导航系统在校园展示中的优势与作用,最后介绍了360°全景展示的虚拟校园导航系统的创新设计实践过程,以求以点带面,研究成果可推广应用于更多的虚拟导航、虚拟展示等领域。

View Direction Adaptive 360 Degree Video Streaming System Based on Projected Area

360 video streaming services over the network are becoming popular. In particular, it is easy to experience 360 video through the already popular smartphone. However, due to the nature of 360 video, it is difficult to provide stable streaming service in general network environment because the size of data to send is larger than that of conventional video. Also, the real user's viewing area is very small compared to the sending amount. In this paper, we propose a system that can provide high quality 360 video streaming services to the users more efficiently in the cloud. In particular, we propose a streaming system focused on using a head mount display (HMD).

360度全景车载智能避障系统的研究

设计了一种基于人工智能图像识别技术和360度全景行车记录仪的智能避障系统。将360度行车记录仪输出图像信号接入AI模块,使用人工智能图像识别算法实时检测行车过程中车体周围可能对行车安全造成危害的障碍物,在显示屏上标注障碍物位置或通过语音方式及时提示用户。

医院“全景导诊”系统的创建与应用

介绍了＂全景导诊＂系统的创建与应用,指出该系统作为医院导诊服务的一个重要组成部分,无论从服务理念和服务模式上,均率先进行了一次打破常规人工导诊模式的新探索。

某数字城市实景影像数据采集方案设计

随着测绘科技、计算机及网络技术的飞速发展,完全基于4D数据构建的数字城市已不能适应信息时代对于属性信息"准、全、新"的要求。可量测立体影像和360°全景影像数据将原来地理信息数据由4D上升到5D,弥补了4D数据的缺憾。本文主要介绍了这两种数据外业采集和内业处理的方法和过程,对未来数字城市建设数据采集方法的改进有一定的参考价值。

校园实景地图的设计与实现

本文研究了以校园实景环境照片为对象,利用ArcSoft Panorama Maker软件的全景拼接技术、Photoshop的图像处理技术、Pano2的360度全景技术和Flash的动画技术而开发的基于互联网的校园实景地图的设计和实现方法,并实现了某一校园的实景地图。

城市地理信息集成应用技术研究

城市多源地理信息的有机集成是当代可视化GIS的重要技术手段。将多源数据集成理论与移动道路测量技术、360°全景技术、虚拟现实技术相结合,可形成一套新颖的地理信息管理系统。它突破传统2维地图的显示瓶颈,为城市宣传、城市规划、实时响应、附属设施管理提供新的解决办法与工作思路,为人们生活提供便利。针对城市多源地理信息的集成关键技术、应用效果等方面做简要介绍。

现代信息技术视野下的古籍文献信息表现形式研究——以《广州大典》为例

《广州大典》的编撰工作,结合现代信息新技术的发展,利用360度全景仿真技术、增强现实技术、三维建模技术来表现古籍文献的内容,在不破坏原有文献的基础上,将艰涩的文言文、特定的文化背景、抽象的知识与生动的现实图像和三维模型相结合,调动了研究与开发者的积极性,消除了学习迁移能力的差异,降低了对古籍文献研究和开发利用的难度,使研究与开发变得更容易、更有趣,能有效扩大古籍文献的受众面,对推动古籍文献的传播与应用有重要的作用。

一种低时延的全景视频传输方法

近年来,以全景视频为代表的虚拟现实技术向高质量、沉浸感的方向发展,低时延全景视频传输技术的研究成为热点。对全景视频传输中影响终端用户体验质量的时延因素进行分析,提出了一种低时延的全景视频传输方法,使用随机接入帧间预测帧来减小视口切换引起的传输时延,进而改善用户的视觉体验质量。经理论分析和仿真实验,在不影响用户体验质量的前提下,针对不同内容的测试序列,该方法可以将视口切换时延平均降低至2.4帧时长,同时将用于用户视口切换的视频码率平均减少20.23%。相比于已有方法,该方法可以在降低时延的同时,提升传输带宽利用率,为实现全景视频的高效传输提供了一种新的技术途径。

县域旅游景区多源全景数据采集与集成发布

本文以龙岩市上杭县旅游景区进行多源全景数据采集与集成发布为工程背景,介绍基于无人机的720°全景及地面鱼眼镜头的360°全景的拍摄、制作和集成技术方案,通过对上杭县87个景区进行实地信息采集、内业处理制作及数据质量检查方法,设计以遥感地图叠加行政区界、地名和五类旅游景区二维码构成县域旅游一张图成果,并最终实现打印输出。研究结果集成发布的旅游一张图,将多个全景景观进行完整拼接并展示给参观者,可实现虚拟景区环境进行游览和交互,为参观者提供方便快捷的帮助,其效益较好。

成都远洋太古里竣工规划测绘多元信息化技术

以成都远洋太古里项目为例,介绍了建设项目竣工规划测绘工作中运用成都市CORS均匀布设图根控制、全站仪免棱镜要素采集技术、大比例尺竣工成果绘制与入库以及三维辅助验收产品制作等系列技术,突出了网络RTK、免棱镜激光测量技术在竣工测量中的优越性,展现了实地360全景影像和建设项目真三维模型辅助规划验收的作用和对数字城市平台建设的贡献。

Flash技术在青岩古镇虚拟游设计中的应用

以贵州青岩古镇虚拟游为研究对象,根据青岩古镇旅游景点虚拟游总体结构设计,介绍了以Flash为平台的青岩古镇虚拟游的设计、制作方法,以实例介绍了ActionScript在实现风景区虚拟游中的应用。

购物中心公共空间环境视觉质量感知评价——模拟场景主观评价效度研究

探索一种基于360°漫游场景模拟的网络调查技术,用于购物中心公共空间质量感知评价。以视觉环境要素为核心评价指标,通过SD法对比被试者在现实场景与模拟场景下环境感知评价的差异,建立模拟场景感知评价效度的评估框架。研究结果表明:部分评价指标的绝对反应差异证明了360°漫游场景在总体印象和偏好评价上与真实环境具有同等效力;两种测试环境下近似的相对反应表明了360°漫游场景在购物中心公共空间视觉质量评价中具有良好的效度水平,且与虚拟现实(VR)模拟场景的效果相近。