2026年9月25日至10月6日,由北京市文化和旅游局指导、北京交响乐团主办的第三届台湖古典音乐季在台湖演艺小镇举办。台湖古典音乐季是北京交响乐团2024年入驻北京城市副中心永久团址后打造的首个品牌音乐活动,至今已举办三届,已成为台湖演艺小镇的代表性文化品牌和首都古典音乐普及推广的重要平台。中国艺术科技研究所人工智能创作团队携音画互动体验、虚拟舞团两项数字艺术成果深度参与本届音乐季,探索数字艺术科研成果在文旅场景中的转化应用。
音画交互体验:看得见的音乐,听得见的画面
我所在站博士后戴姗珊主持的科研课题《数智时代人机协同赋能音乐创作新范式研究》,形成的应用型研究成果在首都交响乐体验馆实现落地转化。该成果以音乐与视觉的联觉关系为切入点,将音乐中的节奏、音色、力度与美术作品中的色彩、线条、构图相联系,构建“看得见的音乐,听得见的画面”的交互式艺术体验。
在这次展览的艺术设计与技术研发中,作品融合音频特征分析、人工智能体态识别与实时粒子渲染技术,将五幅经典美术作品转化为动态粒子画面,通过音乐的响度、节奏及频段能量变化控制视觉艺术的形态、聚散与运动。同时,系统识别观众体态、追踪手部动作,使观众参与画面的流动与重组,在聆听、观看和身体互动中感受音乐与美术的关联。

音画互动体验现场

图源:北京日报都视频公众号

图源:北京日报手机端网页
数字虚拟舞团:数字人物与交响音乐同台“共舞”
在北京交响乐团演出的闭幕音乐会《在交响中舞动》中,人工智能创作团队为《序曲》《热巴舞曲》两部作品分别设计了国标舞数字人舞蹈以及藏族舞数字人舞蹈,由戴姗珊完成音乐与舞蹈相融合的AIGC创作,将数字人物、舞蹈动作与交响音乐相结合,拓展舞台艺术的表达方式。
其中,藏族舞蹈动作运用光学动作捕捉技术,通过多台高速红外摄像机追踪舞者身上的50个反光标记点,记录舞姿、步法、手势及身体重心变化,转化为驱动数字角色的人体骨骼数据。数据采集在文化和旅游部民族民间文艺发展中心实验室开展,数据处理由中国艺术科技研究所人工智能创作团队完成。


国标舞数字人演出现场


藏族舞数字人演出现场
中国艺术科技研究所数字艺术部长期开展数字艺术领域的科研工作,积极推动科研成果在舞台演艺、文化体验等文旅场景中的转化应用。此次音画交互与虚拟舞蹈成果融入音乐季展演,是数字艺术部以科研赋能艺术创作、以技术丰富观众体验的又一次实践。

