Audio Decomposition是什么?一文让你看懂Audio Decomposition的技术原理、主要功能、应用场景

来源:卓商AI
发布时间:2025-04-05

Audio Decomposition概述简介

Audio Decomposition是音频处理技术,基于傅里叶变换和信封匹配将音乐中的各个音符和乐器分离,实现音乐到乐谱的转换。Audio Decomposition开源项目是Matthew Bird推出的,无需外部乐器分离库,自动识别和分离音乐中的不同乐器声音,帮助用户更好地理解和重现乐谱。

Audio Decomposition的功能特色

音频源分离:将混合音乐中的不同乐器声音分离出来。

音乐转乐谱:将音乐文件转换成乐谱,帮助用户识别音高和和弦。

音频分析:分析音乐中的音符和乐器,提供音乐结构的深入理解。

开源工具:作为开源项目,支持用户自由使用和修改代码,适应不同的需求。

Audio Decomposition的技术原理

傅里叶变换:程序每0.1秒对音乐文件进行一次傅里叶变换,生成频谱图。将每种乐器的傅里叶变换相加,重新创建音乐的频谱。

包络分析:将声波分成几块并取每块的最大值获取包络。进一步优化结果,找到包络低于原始声波的点,添加新点定义包络。

信封的分解:将波的包络分解为起音(攻击)、延音(持续)和释音(释放)。

波形分类:考虑乐器的静态衰减和动态变化,及是否有释音。

带通滤波:对每个音符频率的信号进行带通滤波,分离特定乐器的声音。

互相关和均方误差(MSE):用乐器的起音和释放的互相关找到每个音符的开始和结束。计算乐器波和滤波后的音频的MSE,获得乐器的成本。

Audio Decomposition项目介绍

项目官网:matthew-bird.com/blogs/Audio-Decomposition

GitHub仓库:https://github.com/mbird1258/Audio-Decomposition

Audio Decomposition能做什么?

音乐教育:分离不同乐器的声音,帮助学生更直观地理解音乐作品中的和声与配器。

音乐制作:支持制作人从复杂的音乐中提取单独的音轨,用在混音或创作新的音乐元素。

乐谱转录:自动将音频记录转换为乐谱,节省人工转录的时间和成本,尤其适用于古典音乐作品。

音乐分析:深入分析音乐作品的构成,为音乐理论家和作曲家提供研究工具。

音频编辑:在电影和视频制作中,帮助编辑精确地处理和调整音频元素,如对话、音乐和音效。

© 版权声明:本站所有原创文章版权均归卓商AI工具集及原创作者所有,未经允许任何个人、媒体、网站不得转载或以其他方式抄袭本站任何文章。
卓商AI
卓商AI

AI爱好者的一站式人工智能AI工具箱,累计收录全球10,000⁺好用的AI工具软件和网站,方便您更便捷的探索前沿的AI技术。本站持续更新好的AI应用,力争做全球排名前三的AI网址导航网站,欢迎您成为我们的一员。

猜你喜欢
  • RoboResponseAI
    RoboResponseAI RoboResponseAI是一款由生成式AI驱动的主动式聊天机器人,能够主动发起对话并根据用户反馈不断改进,提高网站访客转化为潜在客户的比例。它能根...
  • zipchat
    zipchat Zipchat是专门为Shopify商人设计的AI动力聊天机器人。 Zipchat以Shopify徽标集成为特色,使商人可以快速有效地吸引客户,并提高...
  • Airbrush
    Airbrush Airbrush是一款使用AI技术的创作工具,可以在几秒钟内生成原创的照片、NFT和艺术品。它提供了丰富的功能,包括照片编辑、滤镜效果、插画生成等。无...
  • Vibrato
    Vibrato Vibrato是一款能够打电话的人工智能助手,具有多功能的任务处理能力,能够节省用户时间和精力。它拥有低延迟的语音识别技术,能够模拟人类声音和智能,自...
  • Repo Prompt
    Repo Prompt Repo Prompt是一个为macOS设计的原生应用,旨在消除在使用本地文件时与最强大语言模型交互的摩擦。它通过允许用户选择文件和文件夹作为提示的上...
  • Gemini 2.0 Flash Thinking Experimental
    Gemini 2.0 Flash Thinking Experimental Gemini Flash Thinking 是 Google DeepMind 推出的最新 AI 模型,专为复杂任务设计。它能够展示推理过程,帮助用户...
  • Rep AI
    Rep AI Rep AI是Shopify的第一个AI销售助手聊天机器人,为电子商务提供个性化的购物体验。它结合了行为AI和生成AI,为每个人提供引导式的购物体验。...
  • UniFab
    UniFab UniFab 是一款强大的 AI 助力的视频音频增强工具。它利用先进的超分辨率技术,能够将视频分辨率提升至 8K/16K,同时将 SDR 转换为 HD...