Question

我对音频处理非常陌生。我创建了一个程序，用于记录和流式传输音频单向，而不会记录在另一端。基本上，它将在一个位置记录的内容传输到另一个位置。但是，在许多情况下，该程序还将在与录制源相同的位置输出音频。由于音频延迟（取决于许多因素），这会产生明显的“回声”。

因为我不确定是否有任何其他内容，我正在尝试使用WebRTC的音频处理模块进行增益控制和声学回声消除。增益控制似乎运作良好，但AEC并没有真正起作用。我想也许是因为我没有设置正确的流延迟，或者这可能不是AEC的用途。

我正在使用的当前代码读取我从文件中记录的内容，试图摆脱回声，至少第一次出现。如果我将流延迟设置为0.我们可以想象当前音频完全被取消。我尝试了不同的价值，但没有多大用处。

所以我的问题是，我希望这是特定的，我在这个模型中做错了什么？

void start( char *inFilename, char *outFilename )
{
    FILE *infile = fopen( inFilename, "rb" );
    FILE *outfile = fopen( outFilename, "wb" );

    // Our frame manager
    AudioFrame frame;
    frame._audioChannel = CHANNELS;
    frame._frequencyInHz = SAMPLERATE;
    frame._payloadDataLengthInSamples = SAMPLERATE/100; // Math for 20ms frames

    // Get the size of our frames
    const size_t frameLength = frame._payloadDataLengthInSamples*CHANNELS;


    AudioProcessing* apm = AudioProcessing::Create(0);
    //
    apm->set_sample_rate_hz( SAMPLERATE ); // Super-wideband processing.
    //
    // // Mono capture and stereo render.
    apm->set_num_channels(1, 1);
    apm->set_num_reverse_channels(1);
    //
    apm->high_pass_filter()->Enable(true);
    //
    //apm->echo_cancellation()->set_suppression_level( EchoCancellation::SuppressionLevel::kHighSuppression );
    apm->echo_cancellation()->enable_drift_compensation( false );
    apm->echo_cancellation()->Enable( true );
    //
    apm->noise_suppression()->set_level( NoiseSuppression::Level::kHigh );
    apm->noise_suppression()->Enable( true );
    //
    apm->gain_control()->set_analog_level_limits( 0, 255 );
    apm->gain_control()->set_mode( GainControl::Mode::kAdaptiveDigital );
    apm->gain_control()->Enable( true );
    //
    // apm->voice_detection()->Enable(true);
    //
    // // Start a voice call...

    while( fread(frame._payloadData, sizeof( int16_t ), frameLength, infile )==frameLength )
    {
        //apm->set_stream_delay_ms( 0 );

        apm->AnalyzeReverseStream( &frame );
        //
        // // ... Render frame arrives bound for the audio HAL ...
        //
        // // ... Capture frame arrives from the audio HAL ...
        // // Call required set_stream_ functions.
        // apm->gain_control()->set_stream_analog_level(analog_level);
        //

        apm->set_stream_delay_ms( 300 );

        int err = apm->ProcessStream( &frame );

        fprintf( stdout, "Output %i\n", err );
        //
        // // Call required stream_ functions.
        // analog_level = apm->gain_control()->stream_analog_level();
        // has_voice = apm->stream_has_voice();


        fwrite( frame._payloadData, sizeof( int16_t ), frameLength, outfile );
    }

    //
    // // Repeate render and capture processing for the duration of the call...
    // // Start a new call...
    // apm->Initialize();
    //
    // // Close the application...
    AudioProcessing::Destroy( apm );
    apm = NULL;

    fclose( infile );
    fclose( outfile );
}

使用来自http://www.freedesktop.org/software/pulseaudio/webrtc-audio-processing/

的包含和库

Answer 1

我有同样的问题，我试图找到API告诉我在OpenSLES API手册中有多少流延迟但是失败了。就像现在一样，我认为可能需要自己计算流延迟。

WebRTC音频处理模块（APM）并计算播放设备的回声延迟

1 个答案: