虚拟歌姬调教小技巧:MIDI 与 Pitch 对照

成品展示:

站内已有多位UP主提到过这个技巧,比如:

为了方便没有相关软件、插件的用户,在这里提供一个开源方案。如果您可以访问基于云端的开发环境,整个流程可以在云端进行。由于专栏修改次数的限制,详细使用方式请前往 github/gitee 参考最新代码。如有疑问可评论或私信,不保证解答。
本文中文字内容均按照 CC BY-SA 4.0 进行许可
人声分离
推荐两个开源方案,在 Github repo 内均有完整的用户指南,均可以通过 本地安装 或 Docker 镜像 或 云端环境 运行。
Spleeter
Music Demixing Challenge 的 baseline,所需算力较小,效果稍差
Demucs
其内置的 mdx 模型 在 2021 Music Demixing Challenge 榜 A 冠军 榜 B 亚军,所需算力稍大,效果较好。
输出对比视频
下一步,请按照 https://github.com/zsliu98/midi-pitch 或 https://gitee.com/zsliu98/midi-pitch (gitee 将尽量与 github 同步)中 README.md 的要求,安装所需的项目。
运行代码后将在输出目录产生三个文件,其中 pitch.mp4 即是成品视频。