magenta/mt3
MT3: Multi-Task Multitrack Music Transcription
它解决了什么问题
它提供了一种将音乐录音自动转录为乐谱的方法，支持单一乐器（钢琴）和多乐器录音。
运作原理
MT3 使用 T5X 框架来实现多任务多轨音乐转录模型。它允许用户应用预训练检查点（钢琴专用模型或多乐器模型）将音频文件转换为转录数据。
目标受众
需要将音乐录音转换为数字乐谱的音乐家、研究人员和开发人员。
特色亮点
- 多乐器支持：能够同时处理多种乐器。
- 预训练检查点：包含基于 ISMIR 2021 和 ICLR 2022 研究论文的模型。
- Colab 集成：提供笔记本以便轻松测试和转录个人音频文件。
相关
- 项目
- 项目
- 项目
- 项目