一、成果简介

本团队产出沉浸式文旅内容生成技术与场景创新相关成果，突破虚实融合、智能感知、实时交互等系列关键技术，研发面向多感官虚实融合、多维全要素互动和沉浸式文旅内容时空转换的核心技术体系，建立沉浸式文旅体验技术引擎、集成服务及产业培育平台，创作面向数字文旅、数字艺术、新广告、新娱乐高质量沉浸式数字内容，形成数字资源库，形成“构建-融合-交互-呈现-评价”全链条技术引擎和集成应用与服务平台。结合黄河、长征国家文化公园等国家文化工程建设，围绕传统与红色文化教育、沉浸式互动游乐体验等开展应用示范，培育沉浸式文旅体验新业态、新模式，发展沉浸式体验文旅新消费内容。

近期代表性工作：于国产化算力平台搭建一体化数据工程，同时基于多模态学习及条件扩散模型提出跨模态视频生成大模型，助力沉浸式文旅内容生成；球面化重构全景内容，集成沉浸式三维漫游；基于自适应内容补全、三角划分、网格变形等技术，实现数字资产虚实融合及平台交互；研发沉浸式场景制作系统，实现沉浸式古画长卷场景的快速制作，打破沉浸式内容多人多设备交互局限；基于触觉交互、三维分割、多模态大模型技术，实现对文物的多模态智能呈现。

近期成果示意图

二、技术示例：CAVE系统简介

CAVE 系统依托强大的图形处理器和先进的渲染算法，能够实时生成高质量的三维虚拟场景，可以以极高的精度和流畅度呈现出来物体的运动、光影的变化；多通道投影融合技术通过将多个投影仪输出的图像进行精确的几何校正和色彩校正，实现各个投影面上的图像无缝拼接，形成一个完整的、无边界的虚拟空间；多模态交互技术为 CAVE 系统增添了更多的互动性和趣味性。系统支持手势识别、动作捕捉、语音交互以及眼动追踪等多种交互方式，用户可以通过自然、直观的动作和语言与虚拟环境进行互动。

CAVE系统示意图

CAVE 可交互沉浸式视频

三、应用领域和市场前景

沉浸式内容在文旅领域的应用日益广泛，涵盖数字文化展陈、智慧景区导览、文化遗产数字保护以及沉浸式演艺等多个方向。通过虚拟现实、增强现实、全息影像等技术手段，沉浸式内容能够为游客带来更具互动性和体验感的文化旅游服务，提升景区吸引力和文化传播力，助力文旅融合和文化遗产活化利用，推动文旅场景的数字化、智能化升级。

在市场前景方面，沉浸式内容正迎来政策支持、技术成熟和消费升级的多重利好。随着国家推动文化产业数字化转型和现代服务业融合发展，沉浸式文旅内容将成为提升文化软实力和激发新型消费的重要载体。伴随Z世代成为文旅主力人群，以及沉浸式技术成本持续下降，其商业模式将更加多元，市场规模有望持续扩大，成为数字文化产业的重要增长点。

四、合作方式

对接方式

1.合作意向方联系北京大学计算机学院产学研合作办公室；

2.产学研合作办公室沟通了解意向方情况；

3.会同成果完成团队与意向方共同研讨合作方案。

北京大学计算机学院产学研合作办公室

邮箱：hecheng1213@pku.edu.cn