Audio Decomposition是什么?一文让你看懂Audio Decomposition的技术原理、主要功能、应用场景

来源:卓商AI
发布时间:2025-04-05

Audio Decomposition概述简介

Audio Decomposition是音频处理技术,基于傅里叶变换和信封匹配将音乐中的各个音符和乐器分离,实现音乐到乐谱的转换。Audio Decomposition开源项目是Matthew Bird推出的,无需外部乐器分离库,自动识别和分离音乐中的不同乐器声音,帮助用户更好地理解和重现乐谱。

Audio Decomposition的功能特色

音频源分离:将混合音乐中的不同乐器声音分离出来。

音乐转乐谱:将音乐文件转换成乐谱,帮助用户识别音高和和弦。

音频分析:分析音乐中的音符和乐器,提供音乐结构的深入理解。

开源工具:作为开源项目,支持用户自由使用和修改代码,适应不同的需求。

Audio Decomposition的技术原理

傅里叶变换:程序每0.1秒对音乐文件进行一次傅里叶变换,生成频谱图。将每种乐器的傅里叶变换相加,重新创建音乐的频谱。

包络分析:将声波分成几块并取每块的最大值获取包络。进一步优化结果,找到包络低于原始声波的点,添加新点定义包络。

信封的分解:将波的包络分解为起音(攻击)、延音(持续)和释音(释放)。

波形分类:考虑乐器的静态衰减和动态变化,及是否有释音。

带通滤波:对每个音符频率的信号进行带通滤波,分离特定乐器的声音。

互相关和均方误差(MSE):用乐器的起音和释放的互相关找到每个音符的开始和结束。计算乐器波和滤波后的音频的MSE,获得乐器的成本。

Audio Decomposition项目介绍

项目官网:matthew-bird.com/blogs/Audio-Decomposition

GitHub仓库:https://github.com/mbird1258/Audio-Decomposition

Audio Decomposition能做什么?

音乐教育:分离不同乐器的声音,帮助学生更直观地理解音乐作品中的和声与配器。

音乐制作:支持制作人从复杂的音乐中提取单独的音轨,用在混音或创作新的音乐元素。

乐谱转录:自动将音频记录转换为乐谱,节省人工转录的时间和成本,尤其适用于古典音乐作品。

音乐分析:深入分析音乐作品的构成,为音乐理论家和作曲家提供研究工具。

音频编辑:在电影和视频制作中,帮助编辑精确地处理和调整音频元素,如对话、音乐和音效。

© 版权声明:本站所有原创文章版权均归卓商AI工具集及原创作者所有,未经允许任何个人、媒体、网站不得转载或以其他方式抄袭本站任何文章。
卓商AI
卓商AI

AI爱好者的一站式人工智能AI工具箱,累计收录全球10,000⁺好用的AI工具软件和网站,方便您更便捷的探索前沿的AI技术。本站持续更新好的AI应用,力争做全球排名前三的AI网址导航网站,欢迎您成为我们的一员。

猜你喜欢
  • Baklib
    Baklib Baklib 是一款 All in Content 的企业级云平台,帮助企业一站式管理数字内容,实现多场景的数字体验。它采用独特的三层架构,将资源库、...
  • SimFin
    SimFin SimFin是一款财务数据分析工具,提供股票筛选、回测等功能。用户可以使用自定义筛选条件和指标,优化投资策略。同时,SimFin还提供高质量的366数...
  • Nia
    Nia Nia 是一款面向开发者的 AI 工具,专注于代码库的理解和协作开发。它通过高级语义文件搜索和代码理解能力,帮助开发者快速找到所需文件、理解代码结构,...
  • jit codes
    jit codes JIT.CODES是一个由AI驱动的编码平台,可帮助各个级别的开发人员保持生产力并有效地协作。借助其AI技术,用户可以快速准确地编写代码,从而在提高准...
  • StoryPear
    StoryPear StoryPear是一个AI打造的音频故事平台,提供数百种不同故事情节,数十位角色带你踏上新的冒险之旅。用户可以在平台上探索迷人的音频故事世界,享受令...
  • Typelets
    Typelets Typelets Editor Beta 是一款基于云的在线编辑器,通过集成的生成性人工智能(Generative AI)来提升用户的工作效率和协作体...
  • MaskVAT
    MaskVAT MaskVAT是一种视频到音频(V2A)生成模型,它利用视频的视觉特征来生成与场景匹配的逼真声音。该模型特别强调声音的起始点与视觉动作的同步性,以避免...
  • Lumen Orbit
    Lumen Orbit Lumen Orbit是一家致力于将数据中心部署到太空的创新型公司。随着成本的降低,该公司利用太空中24/7的太阳能和被动辐射冷却技术,提供无需电池的...