面向影像创作的ｘＲ扩展现实（以下简称ｘＲ）技术集成了虚拟现实技术、实时渲染技术、交互技术、定位追踪技术等多种技术。在制片流程中体现出“后期前置”和“所见即所得”的创作特征。可以实现艺术创作在虚拟与真实融合的场景中开展实时的场面调度。
“ｘＲ扩展现实实验剧《琵琶行》”和“ｘＲ扩展现实实验剧《琵琶行》创作记录”两部剧目是中国艺术科技研究所（以下简称“艺科所”）自主科研课题《扩展现实技术（ｘＲ）在“传统文化两创”中的应用研究》的重要成果。经过艺科所和北京电影学院叶风教授及其团队一年以来的共同锤炼，上述两部剧目于２０２２年底在北京进行了最终排演录制。这是艺科所一直以来关注探索的互动媒体技术领域的具有延续性的尝试。
“ｘＲ扩展现实实验剧《琵琶行》”排演录制工作现场
该课题于２０２２年１２月通过结题会验收顺利结项。艺科所科研规划部张晓华同志为该课题负责人，数字艺术部与科研规划部全体人员为该课题组成员和工作人员。
上述两部剧目以一种全新的创作方式再现了中国唐代叙事诗名篇《琵琶行》中“江头送别”这一情节描写的诗意场景。ｘＲ技术通过对虚拟场景的扩展，实现了叙事空间的实时延伸，融合真实演员表演与ＡＲ前景特效叠加，是其与传统影像表现的最大区别。它通过摄影机追踪与实时图像渲染技术，将所构建的虚拟场景与摄影机拍摄的实时场景即时融合，这种虚拟拍摄方式突破了传统绿幕技术的限制，给内容创作和表演提供了更大的创作空间。
演员在ｘＲ演艺场景中排练
从内容创作角度来看，它让创作者的想象摆脱了物理空间的限制而变得更加自由；从表演角度来看，它使演员沉浸在一个可视听、可感受、可互动的虚拟数字场域当中进行表演，从而获得更好的现场感，提高演员的艺术表现力和感染力，最终使演员的表演和观众的体验紧密相连，让演出变得更加生动和引人入胜。因此这部基于ｘＲ技术，集舞蹈、音乐、舞台表演和影像艺术于一体的《琵琶行》实验剧在创作方法和美学思考上具有很强的实验意义。
ｘＲ技术在剧目中的应用
研发团队试图将ｘＲ技术的优势充分发挥，例如，在拍摄江面船只时，因演员与虚拟船只存在虚实遮挡关系，为了符合真实视觉效果，采用了ＡＲ技术，将制作的部分船只模型作为前景遮挡叠加至画面中。在演员舞蹈拍摄的部分，尝试在某些场景中设计增加一些由演员舞蹈姿态触发的虚拟三维物体（如缤纷的花瓣和飘曳的丝绸）互动的效果。同时还尝试设计了适合ｘＲ虚拟拍摄流程的场景调度和灯光效果，通过景别的变换和镜头的运动，使作品获得更优的拍摄效果。
“ｘＲ扩展现实实验剧《琵琶行》”成片特效
科技和演艺融合创新是大势所趋，新技术的发展也势必会拓展演艺模式的多样化。ｘＲ虚拟拍摄这类新的编创方式并不是对传统表演形式的替代，而是提供一种新的创作模式、表现方式和艺术体验。我们不妨把其中的“ｘ”理解为一种未来发展的无限可能性，它有待大家持续探索，它可能成为我们通往元宇宙的一种途径。
“ｘＲ扩展现实实验剧《琵琶行》”、“ｘＲ扩展现实实验剧《琵琶行》创作记录”原视频详见“艺科资讯”公众号。
“ｘＲ扩展现实实验剧《琵琶行》”脚本图
