相宗佑 Zongyou Xiang EN
研究

两项试点研究,同一个问题

AI 音乐检测器在训练时见过的样本上表现很好,遇到新样本就会失效。我分别在音频和乐谱(符号音乐)上验证了这一点。

研究一 · 音频

未见过的生成器上的 AI 音乐检测

独立试点研究 · 2026 · FakeMusicCaps · PyTorch

检测器能抓住训练时见过的生成器做的 AI 音乐,但面对从没见过的生成器,只能抓出大约一半。

0.975CNN 在训练时见过的生成器上的平衡准确率
0.50来自没见过的生成器的片段中,被判为 AI 的比例
0.21频谱统计检测器在没见过的 MusicLDM 上的 AUC:比真实音乐还“像真的”
五个检测器在没见过的生成器上的平均检出率(0.35 到 0.56)和平均 AUC(0.59 到 0.90)
五个检测器,留一生成器测试,3 个随机种子的平均。左:没见过的生成器的片段被判为 AI 的比例;右:AUC。图中文字为英文。
每个被留出的生成器上各检测器的 AUC
每个被留出的生成器上的 AUC。

局限:只有 52% 的 MusicCaps 真实片段还能下载;真实片段是有损压缩的 YouTube 音频,AI 片段是无损的;只跑了 3 个随机种子;只测了五个开源生成器。

研究二 · 符号音乐

用拼接仿作测试贝多芬分类器

复现并扩展 Galajda & Hua(IEEE MIPR 2024)· 2026 · MAESTRO v3 · PyTorch

贝多芬分类器逐个小节地判断,所以用真实贝多芬小节拼出来的仿作能骗过它;看小节之间怎么衔接,就能识破。

0.96复现的 GRU 分类器的 AUC,按作品或按年份划分数据后依然稳定
83–92%拼接片段被判为贝多芬的比例(真实贝多芬:83%)
0.94–0.96衔接检测器区分拼接片段和真实 32 小节片段的 AUC
0% 25% 50% 75% 100% 真实贝多芬片段 83% 片段内打乱小节 61% 贝多芬拼接,2 小节一块 92% 贝多芬拼接,4 小节一块 86% 平滑拼接,4 小节一块 85% 其他作曲家拼接 25% 其他作曲家真实片段 8%
GRU 把 32 小节片段判为贝多芬的比例,在未参与训练的作品上运行 3 次的平均。