Question

我尝试使用分析器节点和getByteFrequencyData（）来测量两个声音之间的差异。我认为通过总结每个频率箱的差异，我可以得出一个数字来表示两个声音的差异。然后我就可以改变声音并再次测量数字，看看新声音是否与以前差不多。

getByteFrequencyData（）是否完全包含声音的表示，还是我需要包含其他数据来限定声音？

以下是我使用的代码：

var Spectrogram = (function(){
    function Spectrogram(ctx) {
        this.analyser = ctx.createAnalyser();
        this.analyser.fftSize = 2048;
        this.sampleRate = 512;

        this.scriptNode = ctx.createScriptProcessor(this.sampleRate, 1, 1);
        this.scriptNode.onaudioprocess = this.process.bind(this);

        this.analyser.connect(this.scriptNode);

        this.startNode = this.analyser;
        this.endNode = this.scriptNode;

        this.data = [];
    }

    Spectrogram.prototype.process = function(e) {
        var d = new Uint8Array(this.analyser.frequencyBinCount);
        this.analyser.getByteFrequencyData(d);
        this.data.push(d);

        var inputBuffer = e.inputBuffer;
        var outputBuffer = e.outputBuffer;
        for(var channel = 0; channel < outputBuffer.numberOfChannels; channel++) {
            var inputData = inputBuffer.getChannelData(channel);
            var outputData = outputBuffer.getChannelData(channel);
            for(var sample = 0; sample < inputBuffer.length; sample++) {
                outputData[sample] = inputData[sample];
            }
        }
    };

    Spectrogram.prototype.compare = function(other) {
        var fitness = 0;
        for(var i=0; i<this.data.length; i++) {
            if(other.data[i]) {
                for(var k=0; k<this.data[i].length; k++) {
                    fitness += Math.abs(this.data[i][k] - other.data[i][k]);
                }
            }
        }
        return fitness;
    }

    return Spectrogram;
})();

Answer 1

您可以使用Meyda软件包提供的spectrumFlux功能来比较两个信号。根据维基百科，光谱通量通常计算为两个归一化光谱之间的2范数（也称为欧几里德距离）。＆＃34;

在runninng npm install --save meyda之后，你会做类似的事情：

const spectralFlux = require('meyda/src/extractors/spectralFlux');

const difference = spectralFlux({
  signal: [your first signal],
  previousSignal: [your second signal]
});

您可以随意复制here中的代码，这样您就不必处理依赖项，代码库已获得相应的许可。

它将返回一个系数＆＃34;不同＆＃34;这两个信号听起来。您可以在时域或频域中执行此操作。你会得到不同的数字，但两者都会与不同的数字相关联。声音来自彼此。

但＆＃34;差异＆＃34;可能无法为您的用例准确描述差异。例如，您可能非常关心音量差异，而不是太多关于音质差异，但频谱通量指标并未考虑到这一点。您可能希望首先通过特征提取器运行每个信号，找到有关其属性的其他统计信息，例如它们的感知音量，亮度等，然后在这些数据之间采用加权的欧氏距离，这将提供更加量身定制的信息。差＆＃34;衡量您的目的所需的指标。

很高兴进一步详细说明，但对于答案来说已经很长了。

如何使用Web Audio API测量两种声音之间的差异？

1 个答案: