OC
YuE2 先写乐谱再生成歌曲,可编辑比榜单第一更值得看
科技 · 2026-09-12 · AI 创作与音乐工具 · 阅读 4

YuE2 先写乐谱再生成歌曲,可编辑比榜单第一更值得看

据 YuE2 项目页面,这一音乐系统把可编辑的符号乐谱与音频生成连接起来,并配套音乐表征和录音转谱模型。页面展示的领先分数来自自动评测,YuE2 使用了 best-of-8 设置,不能直接理解为普通听众盲听中的全面胜利。

作者:沈南乔|OC 社会影响编辑

据 YuE2 项目页面,这一音乐系统把可编辑的符号乐谱与音频生成连接起来,并配套音乐表征和录音转谱模型。页面展示的领先分数来自自动评测,YuE2 使用了 best-of-8 设置,不能直接理解为普通听众盲听中的全面胜利。

一句话结论:生成一首好听的歌固然重要,但让创作者能明确修改旋律、节奏和结构,才可能把一次抽签式生成变成可持续的创作过程。

“再来一版”不是完整的编辑能力

不少生成式创作工具最容易完成的是从零开始:输入风格与主题,得到一个完整结果。真正进入制作之后,需求却往往很局部。

创作者可能喜欢副歌,只想缩短前奏;希望保留旋律,修改一个和弦;或者需要同一段音乐适应另一个场景。如果每次改动都像重新抽取整首作品,之前满意的部分也会一起漂移。

这时,可编辑的中间表示就有价值。乐谱不必包含音频的一切细节,但它能把某些结构从模糊的听感转成可指向、可讨论的对象。

YuE2 的符号规划路线值得关注,正因为它试图在“我要什么”与“最后听到什么”之间增加一个可以修改的层次,而不是只给出最终波形。

乐谱能表达结构,却不能替代全部声音

旋律、节拍与和弦可以帮助组织音乐,但音色、发声方式、演奏细节和混音仍影响最终体验。把音频转成乐谱,也不意味着每一个声音都能无损还原。

因此,符号编辑与音频编辑应被视为互补。前者更适合控制结构,后者处理具体呈现。用户应该知道自己改的是哪一层,以及哪些属性可能在重新生成时发生变化。

对于工具设计者,一个重要验收问题是“没有要求改变的部分是否被保留”。这比单纯询问结果好不好听更严格,也更贴近实际工作。

可编辑乐谱经过中间表示生成音频的概念示意

例如,一个用于视频配乐的片段已经与画面节奏对齐,修改最后几秒时,如果前半段节拍也发生漂移,创作者就需要重新剪辑。生成质量没有下降,工作量却增加了。

best-of-8 是产品流程的一部分,不是脚注

项目在 192 个提示、15 种系统配置的比较中展示自动评测结果,best-of-8 意味着从八次生成中选择一个结果。它衡量的不只是单次生成,也包含候选筛选的收益。来源:评测说明

这种策略本身没有问题。创作本来就常常需要尝试。但如果与单次输出比较,就必须说明额外的计算、等待和选择成本。

更不能把一个自动评分差距直接换算成“听众更喜欢多少”。评价器偏好、提示分布和筛选方法都会影响结果。对用户最实际的方式,是用相同任务与相近预算试听,并检查修改是否可控。

“能够生成”与“可以商用”要分开核对

项目称训练主要使用 CC0 音乐和获许可的合成数据。这是一项来源说明,不应自动延伸为每一次生成都没有第三方权利风险。

对于要发布的作品,还需要分别查看模型与代码许可证、输入素材授权,以及输出涉及的具体内容。上传一首受保护录音去做改编,与从自有素材开始创作,并不是同一个使用条件。

这里不需要先给技术贴上安全或危险标签。更重要的是产品把相关信息清楚交给创作者,而不是用“AI 生成”四个字替代所有来源判断。

创作者真正需要的是可回到上一步

一个成熟的音乐工作流应能保存版本、比较局部变化,并恢复到之前的结构。对话式修改很方便,但如果每一次修改只剩一段聊天记录,回到某个确定版本仍然困难。

可编辑乐谱提供了一种更稳定的锚点。它让创作者与工具讨论的对象不只是一段听觉印象,也可以是一段明确结构。这可能帮助协作,也可能让学习者看见声音与形式之间的关系。

但最终决定权仍应留给人。模型可以提出变化,不能因为评分更高就自动替换创作者已经认可的表达。创作不是把评价器推到最大值,而是形成一个有意图的作品。

关键事实

  • YuE2 将符号规划与音频生成结合。
  • 项目配套音乐表征与录音转谱能力。
  • 页面成绩为特定自动评测,其中包含 best-of-8 配置。
  • 数据来源说明、模型许可和具体作品授权应分别理解。

OC 判断

音乐生成工具最有前景的方向,不只是把整首歌做得更逼真,而是让修改更局部、更可解释、更能保留人的选择。可控的第二稿,往往比惊艳的第一稿更接近生产工具。

为什么重要

  • 对创作者:关注局部修改和版本恢复,而不只看试听样例。
  • 对开发者:验证未修改部分的稳定性。
  • 对用户:自动榜单可以提供线索,但不能替代实际听感与使用条件。

参考来源

相关阅读

基于标题、摘要和正文内容自动匹配。

更多科技

评论

围绕这篇文章补充信息、提出问题或分享观察。

0
暂无评论。

发表评论

继续看看 OC 用户围绕这个话题说了什么、做了什么。

相关帖子

更多

做 AI 语音产品时,授权、撤回和审计日志应该怎么落地?

<p>最近看到越来越多关于声音授权的讨论。对开发者来说,真正麻烦的往往不是“模型能不能模仿”,而是授权如何进入系统、生成结果如何追溯,以及授权撤回后该怎么办。</p> <p>我们在做 FlowSpeech 时也碰到过类似问题。我的体会是,不要把“用户勾选过同意”当成一个布尔字段,而应该把它做成一组可以审计的业务对象。</p> <h2>1. 把声音资产和授权分开</h2> <p>声音文件只描述技术属性,例如哈希、上传者、存储位置和创建时间。授权记录则至少要包含授权主体、用途范围、地域、有效期、来源证据和当前状态。这样同一份声音用于个人试听、商业广告、公开播客时,可以绑定不同的授权,而不是共用一个模糊的 consent=true。</p> <h2>2. 每次生成都保存授权快照</h2> <p>生成任务不要只引用当前授权 ID。授权内容以后可能变更,如果任务只查最新状态,历史结果就无法解释。更稳妥的做法是在任务创建时保存授权版本、文本哈希、声音版本、模型版本和操作者。生成出的音频再记录 artifact_id,并反向关联任务。</p> <p>我会把最小链路设计成:</p> <ol> <li>voice_asset:原始声音及版本;</li> <li>consent_grant:授权范围与证据;</li> <li>generation_job:请求参数和授权快照;</li> <li>audio_artifact:输出文件、校验值和公开状态;</li> <li>audit_event:谁在什么时候创建、下载、公开或撤回了内容。</li> </ol> <h2>3. 撤回不是简单删除一行</h2> <p>授权撤回后,系统至少要阻止新任务,并把相关公开音频进入下架队列。已经交付给客户的文件是否能删除,要按照合同和产品能力区分,不能在界面上承诺技术上做不到的“全球删除”。更现实的状态机是 active、suspended、revoked、expired,并明确每个状态允许哪些动作。</p> <h2>4. 对外展示也要可验证</h2> <p>除了后台日志,公开音频最好带上来源标记或可查询的生成记录。水印不是万能方案,但“可识别的音频 + 可验证的元数据 + 清晰的举报入口”组合起来,比一句“AI 生成”更有用。</p> <p>我们现在做的 <a href="https://flowspeech.io/zh">FlowSpeech</a> 主要解决上下文感知、情绪和停顿控制。越往产品化走,越觉得声音效果只是前半程,权限边界和可追溯性才决定这类工具能不能长期使用。</p> <p>大家在实际项目里会把授权证据放在业务数据库、对象存储,还是单独的审计系统?如果授权撤回,你们通常怎么处理已经生成并交付的音频?</p>

FlowSpeech 0 1

你们的Codex额度提前耗完了没?戒断反应如何?

<p>我在第三天就消耗了只剩1%,忍了一天,然后今天干脆用这最后的1%,开着5.6 Sol 极高 强推我一个提示词笔记本应用的功能落地。最终用时3小时,居然还是跑完了。但是现在还是出现一些戒断反应,感觉啥也做不了,就无精打采的,困。</p> <p>我做了一个Prompt Notebook,专门用来收藏或者记录自己手搓的生图提示词。带Chrome一键收藏插件。支持AI优化提示词。支持提示词中提取常用字段作为提示词百科词汇。也自带生图功能用来测提示词。但是要搭配Cloudflare R2+Worker的图床。</p> <p>今天主要是做一个AI模特的资产库。将常用的AI模特固定下来,进行身份设定,以及模特的一些角色定妆图。之后生图可以直接调用AI模特自动作为垫图。</p> <p>这是AI模特资产库的界面: <img src="/upload/thread/202608/42b5f73e-938f-45de-b74e-da69da9d72a8.webp" alt="1bb0d28b-c7dd-4327-bafa-26b60323cbed" /> 这是主界面的提示词瀑布流,支持关键词或标签搜索: <img src="/upload/thread/202608/3e15b6e7-345f-48b4-aeff-1bbd89afe9d3.webp" alt="ab998e2f-9ccc-4173-832f-223aa6c6fa81" /> 这是提示词笔记的预览界面,可以复制提示词,分享提示词,点击分享还有分享短链:(https://prompt.jintao.co.uk/share/20260806LfsmY) <img src="/upload/thread/202608/bab31972-0468-4582-b873-6309233254a6.webp" alt="20260806-201213" /> 可惜现在没额度了,我又不想换模型折腾。现在还有些界面细节和小功能需要落地完善,可能还要虫子要抓。弄好了,打算放GitHub开源。</p> <p>有朋友想试试的么?</p>

shynloc 2 4

你为什么不移民?

<p>我是一定要移了,在这里连正常呼吸都不行了。以前正常呼吸指的是言论自由,现在是生物学意义的正常呼吸问题了。</p> <p>你为什么不移民?</p>

tinyfool 741 48