“小之知道”:基于大模型的多路召回智能问答助手

之江实验室打造的基于大模型的多路召回智能问答助手“小之知道”,自应用以来,为垂直于自动化办公领域的数字技术管理提供了新的路径和方案向科技创新要高质量发展的空间,向新质生产力要高质量发展的动力活力。重点实验室,作为科技创新的重要平台和科技创新要素最密集的“集大成者”之一,眼下正担负起服务国家重大战略需求的时代使命。

2D视频转换3D视频技术概览

传统的数字高清2D电视已经不能满足人们对视频逼真感的追求,人们需要在观看视频时有一种真切的身临其境的感觉,于是代表下一代数字电视发展趋势的自然三维电视(three-dimensional TV:3DTV)便应运而生了。3DTV的显示离不开合适内容的制作。而由于目前大量传统2D视频的存在,对2D转3D技术的研究有着更为现实的意义,这一技术的研究不仅可以为立体显示提供丰富的素材,而且能大大节省内容制作的成本。

基于非线性扭曲的多视点立体显示内容生成

多视点自由立体显示无需配戴眼镜,并且解决了观看范围和人数的限制,是一种有竞争力的裸眼显示技术。该文探讨了基于非线性warping的多视点内容生成算法,可以自动、有效地利用立体视频生成多视点自由立体显示的内容。在该文实现的系统中,输入信息仅需立体视频,经过图像分析、构造并求解能量方程和视图综合4个步骤,可以得到8个视图的多视点自由立体显示内容的视频输出。

基于体分割重建的增强现实交互系统

利用手持彩色和深度摄像头(Kinect)作为图像采集设备,在KinectFusion算法的基础上进行了扩展,实现了一个人与虚拟屏幕直接触碰交互的增强现实系统。本文提出一种腐蚀膨胀的方法提取场景中的运动物体,借助深度图采用分层渲染的方法实现虚实物体互遮挡效果,最后采用一种体素碰撞检测的方法解决人与屏幕的碰撞检测问题。系统的实现过程中采取GPU并行处理,显著提高了算法速度。