索尼公司发布了一项新专利“游戏中的动态音乐创作”,该专利描述了一种基于游戏内容和预期情感的动态音乐创作方法和系统。
根据原理图,该方法主要包括以下主要部分:
收集音乐数据并生成每个组成元素的元数据;生成对应于音乐的情感元数据;将音乐元数据映射到情感元数据,并相应地训练模型
收集游戏场景/组件元素;将游戏组件元素映射到情感元数据
借助之前培训中完成的模型和游戏组件的分析数据,为角色和场景创建主题曲。
通过推子和开关调整主题曲到游戏中,并测试和调整它。
根据描述,在这个系统中,音乐的构成要素(包括节奏、节拍数、旋律结构等。)将被首先分析,然后映射到相应的情感元素(包括紧张、幸福、恐惧等。)分别以独立和组合的方式,这是神经网络的训练集。
这些数据主要来自对音乐会、唱片和其他内容的评价,以及社交媒体上的公众意见。应用的神经网络可以包括卷积神经网络、循环神经网络和/或动态神经网络。
同时,这些音乐元素将被映射到游戏中的各种元素/玩家,包括角色(领导者、同伴等)。),活动类型(战斗、休息等。)、地区(森林、城市等)),玩家的个性等。
最后,作曲工具将根据游戏内容(具体地,每个组成元素)实现音乐创作,为游戏中的角色或元素创建音乐元素或主题。
作曲后,系统将根据主题曲和期望的情感进行模拟。作曲家可以通过相应的界面观察与音乐相对应的元素,并通过调整参数来修改音乐。当游戏风格以外的其他因素(如时间或游戏时间、游戏状态等)出现时。)改变,系统也可以自动调整参数来完成更新。