6月4日,
谷歌Magenta团队发布了MagentaRealTime2(MRT2)模型,同时免费提供了乐器应用Jam和DAW插件MRT2。MRT2是一款定位于与用户“即兴合奏”的本地实时音乐模型,包含两种规模的模型:mrt2_base(24亿参数)和mrt2_small(2.3亿参数)。谷歌强调,这两个版本都针对苹果Apple Silicon芯片进行了优化,特别是mrt2_small能够在搭载M1及后续芯片的Apple电脑上实时运行。
MRT2的最大变化在于其“低延迟”特性。相较于上一代MagentaRealTime需要TPU或高性能GPU,控制延迟约3秒,MRT2改为逐帧生成,每帧40毫秒,实际控制延迟降低至约200毫秒,仅为前代的十五分之一。这使得模型对输入变化的反应速度显著提升,更接近真实乐器的演奏体验。MRT2支持文本和音频风格提示,以及MIDI音符与鼓开关控制,能够持续跟随音符输入变化,并在Auto-Strum模式下自动决定拨弦或起音时机。
技术层面,MRT2基于SpectroStream音频编解码器处理48kHz立体声音频,并以25Hz帧率生成音频标记。交互方面,谷歌推出的Jam应用允许用户输入音乐风格描述后模型开始生成音乐,同时支持音高调整。输入设备包括鼠标点击、MacBook键盘和MIDI键盘,使得实时控制更接近传统电子乐器和数字编曲工作流。对于习惯在成熟编曲环境中工作的创作者,MRT2插件提供了接入路径,允许在常用的DAW中调用MagentaRealTime2。



来源:一电快讯
返回第一电动网首页 >
以上内容由AI创作,如有问题请联系admin#d1ev.com(#替换成@)沟通,AI创作内容并不代表第一电动网(www.d1ev.com)立场。
文中图片源自互联网或AI创作,如有侵权请联系邮件删除。