研究成果

我们和Elke Reinhuber教授合作，以“城市美容师”为主题，借助体积视频与AR技术，将艺术家的墙绘创作等微观城市修复实践，转化为可交互的虚拟叙事。

2025年9月20日，北京文化艺术基金2024年度资助项目“沉浸式京剧文化传播 《白蛇传》 VR互动叙事展”在北京前门开幕。

戏曲艺术承载着深厚的文化积淀与生活方式，值得通过更具吸引力的方式进行推广与保护。然而，传统戏曲的演出形式和观赏体验往往难以满足当代观众的期待。本文旨在运用前沿技术搭建一座桥梁，在保护与推广传统文化遗产的同时，契合现代观众的观赏习惯。通过体积视频采集与三维重建技术，我们记录了戏曲艺术家的高保真表演，并借助交互式粒子效果重建了一座古戏台，打造出沉浸式虚拟现实体验。用户可通过唱腔与身段动作参与互动——粤剧唱腔的音量幅度与手势变化将实时影响交互式点云粒子的运动状态，营造出动态变化的戏剧氛围。这一体验旨在激发年轻观众对传统表演艺术的鉴赏兴趣。

在这次展览中，我们使用体积视频为石丽平老师制作了一段导览视频。通过将石老师在实验室中制作的数字人形象和虚拟的苗绣工作室场景进行结合制作，全方位记录传承人的动作、表情和声音，真实还原其讲解苗绣技艺的过程。

我们提出DREAMS虚拟人数据集，其中包含6位受试者的多视角采集数据。每位受试者分别完成两组动作序列：第一组为标准身体运动与指定面部表情（包含微笑、大笑、愤怒、惊讶等），第二组为自由发挥动作。

我们提出DEGAS（全身高斯虚拟人精细表情建模技术），这是首个基于3D高斯泼溅技术实现、具备丰富面部表情的全身虚拟人建模方案。