如何在ios中使用AudioQueue编码/解码speex

时间:2011-08-02 15:29:49

标签: iphone ios codec audioqueue speex

如果有人有使用AudioQueue编码/解码speex音频格式的经验吗?

我试图通过编辑SpeakHere示例来实现它。但不成功!

从Apple API文档中,AudioQueue可以支持编解码器,但我找不到任何样本。有人能给我一些建议吗?我已经在XCode 4的项目中成功编译了speex编解码器。

3 个答案:

答案 0 :(得分:0)

在苹果示例代码“SpeakHere”中你可以做这样的事情:

AudioQueueNewInput(
                                     &mRecordFormat,
                                     MyInputBufferHandler,
                                     this /* userData */,
                                     NULL /* run loop */,
                                     NULL /* run loop mode */,
                                     0 /* flags */, &mQueue)

你可以在函数“MyInputBufferHandler”中做一些事情,比如

[self encoder:(short *)buffer->mAudioData count:buffer->mAudioDataByteSize/sizeof(short)];

编码器功能如下:

while ( count >= samplesPerFrame )
    {
        speex_bits_reset( &bits );

        speex_encode_int( enc_state, samples, &bits ); 

        static const unsigned maxSize = 256;
        char data[maxSize];
        unsigned size = (unsigned)speex_bits_write( &bits, data, maxSize );
        /*
                    do some thing... for example :send to server
        */

        samples += samplesPerFrame;
        count -= samplesPerFrame;
    }

这是一般的想法。当然事实很难,但你可以看到一些VOIP的开源,也许可以帮助你。 祝你好运。

答案 1 :(得分:0)

您可以使用FFMPEG实现所有这一切,然后使用AudioQueue将其作为PCM播放。 FFMPEG库的构建并不是那么轻松,但整个解码/编码过程并不那么难:)

FFMPEG official site SPEEX official site

您必须下载lib并自行构建它们,然后您必须将它们包含在FFMPEG中并构建它。

答案 2 :(得分:0)

下面是使用speque捕获音频的代码和使用speex编码(宽带)的代码 (为了获得更好的音频质量您可以在单独的线程中对数据进行编码,根据捕获格式更改样本大小。)

音频格式

    mSampleRate = 16000;
    mFormatID = kAudioFormatLinearPCM;
    mFramesPerPacket = 1;
    mChannelsPerFrame = 1;
    mBytesPerFrame = 2;
    mBytesPerPacket = 2;
    mBitsPerChannel = 16;
    mReserved = 0;
    mFormatFlags = kLinearPCMFormatFlagIsSignedInteger | kLinearPCMFormatFlagIsPacked; 

捕获回调

    void CAudioCapturer::AudioInputCallback(void *inUserData, 
                           AudioQueueRef inAQ, 
                           AudioQueueBufferRef inBuffer, 
                           const AudioTimeStamp *inStartTime, 
                           UInt32 inNumberPacketDescriptions, 
                           const AudioStreamPacketDescription *inPacketDescs)
    {
    CAudioCapturer *This = (CMacAudioCapturer *)inUserData;

int len = 640;
char data[640];
char *pSrc = (char *)inBuffer->mAudioData;

while (len <= inBuffer->mAudioDataByteSize) 
{
    memcpy(data,pSrc,640);
    int enclen = encode(buffer,encBuffer);
    len=len+640;

    pSrc+=640; // 640 is the frame size for WB in speex (320 short)
}

AudioQueueEnqueueBuffer(This->m_audioQueue, inBuffer, 0, NULL);
    }

speex encoder

    int encode(char *buffer,char *pDest)
    {
int nbBytes=0;
speex_bits_reset(&encbits);

speex_encode_int(encstate, (short*)(buffer)  , &encbits);

nbBytes = speex_bits_write(&encbits, pDest ,640/(sizeof(short))); 

return nbBytes;
    }