近日，由yl23455永利集团牵头，东北大学、南京大学共同参与的国家重点研发专项文化科技与现代服务业项目“沉浸式内容智能构建与多模态融合技术研究”课题顺利通过验收，圆满完成各项研发任务并正式结项。

该课题是公司深度参与国家文化数字化战略、推进“文旅+科技”交叉创新的重要标志性成果。课题由yl23455永利集团林卫国教授担任负责人，信息与通信工程学院张岳等骨干老师联合组成攻关团队，历时三年集中攻坚，破解了文旅应用中虚实内容构建效率低、多模态协同性不足等行业痛点，为我国沉浸式文旅产业转型升级提供了坚实的底层技术支撑。

在核心技术研发方面，课题组研发了基于自适应结构光与多模态融合的“高精度大场景数字孪生系统”，实现了毫米级的扫描精度（0.7mm），支持面片数超过4573万的复杂几何重建，显著提升了文化景区真实大场景重建效率与还原质量。同时，课题组还研制了“高保真数字形象采集系统”，突破了真实人物全身重建与智能驱动关键技术。该系统建立了支持情感控制的“语音-几何-外貌”端到端生成框架，实现面部重建误差低于0.07厘米，推动三维数字人生成算法迈入亚秒级，赋予虚拟数字人细腻自然的情感表达能力。

图 高精度大场景数字孪生系统及高保真数字形象采集系统组成及效果示例

此外，课题组针对沉浸文旅内容虚实融合的流畅度与交互性，研发了“三维全景虚实融合工具”。该工具引入基于低秩表示的3D高斯散射（3DGS）技术，有效降低渲染时延，使虚拟元素在复杂的文旅实拍全景视频中，也能保持极高的视觉一致性与交互稳定性。课题组进而针对多感官模态文旅内容的自适应融合需求，建成包含120个高质量全景视频序列的“沉浸式内容质量评价视频数据库”，为多模态内容的感知呈现一致性提供了科学的评价准则，还构建了视觉/听觉/触觉“多模态虚实交互融合体验评价网络”，实现沉浸式内容用户多感官体验融合评价分析。 

图 三维全景虚实融合工具、沉浸式内容质量评价视频数据库及多模态虚实交互融合体验评价网络成果展示

目前，该课题研究成果已成功集成至“沉浸式文旅体验技术集成与场景创新”项目平台，并在黄河文化公园交互式沉浸应用、河南博物院郑国编钟数字化保护、沉浸式VR虚拟编钟体验等多个应用示范项目中落地实施。

课题组将以此次课题结项为新起点，持续深耕文化科技、数字文旅、智能交互等前沿方向，强化跨学科协同与产学研用融合，推动技术成果在智慧博物馆、数字化演艺、虚拟旅游等更广场景转化落地，进一步推动我国文旅产业的沉浸化转型升级。