使用HTML5 web音频API提取mp3文件的歌曲频率

Extracting the song frequency of an mp3 file using HTML5 web audio API

本文关键字:文件 频率 mp3 提取 HTML5 web 音频 API 使用      更新时间:2023-09-26

我使用HTML5 web音频API来分析歌曲,并在平均声音频率低于某一值时创建标记。使用现有的AudioNode基础设施,我设法做到了这一点,但只有在播放歌曲时才会分析声音。

然而,我想要的是提前分析歌曲,所以我可以提取沉默标记,并将它们转换为CUE按钮,用户可以使用它来移动整个歌曲。

显然,为了分析它,首先要播放整首歌是非常慢的,特别是如果这首歌是一个50分钟的播客。我试着把播放速率加快到10倍,但是没有用。

我认为解决方案在于跳过Web音频API,并分析原始的ArrayBuffer,然而,我真的不知道从哪里开始。

建议吗?想法吗?

我在一个演示文稿中找到了一个幻灯片,它正好描述了这个:这里

API的正常使用是实时处理音频。相反,我们可以通过整个系统对音频进行预处理,并得到结果:

唯一的问题是,我对音频API的理解过于简单,看不到代码示例中的"技巧":

var sampleRate = 44100.0;
var length = 20; // seconds
var ctx = new webkitAudioContext(2, sampleRate * length, sampleRate);
ctx.oncomplete = function(e) {
  var resultAudioBuffer = e.renderedBuffer;
  ...
};
function convolveAudio(audioBuffer, audioBuffer2) {
  var source = ctx.createBufferSource();
  var convolver = ctx.createConvolver();
  source.buffer = audioBuffer;
  convolver.buffer = audioBuffer2;
  // source -> convolver -> destination.
  source.connect(convolver);
  convolver.connect(ctx.destination);
  source.noteOn(0);
  ctx.startRendering();
}

但我认为至少分享这个比完全离开它更好,即使这不是我希望给出的答案。

上面的卷积描述了傅里叶变换,它将音频从随时间的强度移动到随频率的强度。我建议谷歌一下javascript傅里叶变换。根据你要找的东西,我看到了几个关于这个主题的有用链接。