科技与艺术的交汇!上音“音乐科技探索之旅”
科技与艺术的交汇!上音“音乐科技探索之旅”
5月26日,上海音乐学院音乐工程系、数字媒体艺术学院和山东艺术学院的师生们,在山东艺术学院举办了一场以"音乐科技探索之旅"为主题的项目展演活动。此次活动以现场解析、作品演示、数字交互等方式,展示了双方在艺术与科技、虚拟现实和音乐人工智能等方面的最新实践与探索。
山东艺术学院音乐学院院长王歌群教授表示,此次项目展演活动从内容到形式都是一次开创性的全新探索。未来,由上海音乐学院与山东艺术学院共同创办的音乐与科学联合实验室也将会推出更加精彩的节目。
在项目演讲环节,上音音工系主任于阳教授,青年教师秦诗乐副教授、陈世哲副教授和戴维一副教授分别针对音乐与数学的起源、声音合成与虚拟音色,音乐人工智能、虚拟现实和音乐媒介四个主题展开介绍和展示。
由人工智能技术参与创作、演唱和音视频制作的节目《芣苢》《星光海洋》《枫桥夜泊》和《Portrait》穿插在展演过程中,也给人耳目一新的视听体验。
本次展演项目的特色之一是在场上和场下向观众展示大量自主开发的音乐类程序,并鼓励观众参与互动。
虚拟乐器博物馆
“虚拟乐器博物馆”项目是一个富有教育意义且能弘扬中国传统音乐文化的虚拟现实程序,该程序在使用游戏引擎打造的虚拟空间中,用户足不出户便可走近各式乐器,探索音乐文化。通过虚拟的演奏,可以助力非遗保护,并增加乐器教学的乐趣。
沉浸式体验:行星组曲
“行星组曲”项目将英国作曲家霍尔斯特的《行星组曲》在虚拟现实中搬到外太空,让听众除了可以分声部聆听此部作品,还可以用另一种方式感受作曲家的音乐想象力。这也让古典音乐在新的时代有了新的欣赏方式。
虚拟音乐剧
“虚拟音乐剧”项目则尝试将传统舞台,利用AI动作捕捉、AI演唱和虚拟建模等技术将其自由在不同的时间和空间跳转,是一种对舞台艺术新的探索,除了降低演出成本,也让观众获得更多维度的体验。
HeartGroove 心 律
“心律” 项目是一款基于智能穿戴设备的音乐疗愈工具集。在音乐疗愈的热度不断提升的背景下,人们对于音乐与人体健康之间联系的探索也不断深入,为了使这样探索的过程变得更“可穿戴化”,这款音乐疗愈程序利用智能手的健康监测功能和相应算法,让人体状态来控制音乐,实现了心率与音律的结合。
Reflex-in
“reflex-in”通过上音与天桥脑科学研究院合作研发和应用的智能脑机接口reflexin,读取脑电图、血氧饱和度、陀螺仪等数据,实时生成属于自己的音乐。脑机接口可以由使用者自行修改参数,从而形成因人而异、可定制的声音体验,帮助人们量身定制个性化的“声音疗愈机制”。该项目在治疗帕金森等疾病,改善睡眠等方面有一定前景。
跳舞毯与音乐游戏
“跳舞毯与音乐”游戏,通过外接跳舞毯设备,让两位玩家通过脚下的步伐,操控不同声部虚拟乐器,通过“对位”的形式合作演奏出音乐,这让观众除了体会到合奏的快乐以外,还能感知到“对位”的魅力。
水果架子鼓
创意电子程序“水果架子鼓”通过单片机将苹果、柠檬和香蕉等水果变为打击乐器,驱动程序中的虚拟架子鼓,让观众能自由的演奏一段“水果打击乐”。
此次项目是科技与艺术的交汇,是思想与创意的碰撞,更是未来新音乐表现形式的预演。通过该演出内容的策划、创作以及演出品牌的打造,展示了上音在音乐科技、数字媒体艺术和音乐人工智能领域的前沿研究进展以及丰硕的教学成果。
未来,主创团队将围绕该品牌持续打磨节目内容,不断优化和升级演出质量,探索艺术与科技相结合的无限可能,以“科技兴国”和“文化传承”为导向,用好新质生产力,更好传播和发扬音乐文化的独特魅力。
本文原文来自澎湃新闻