如何使用audioConverterFillComplexBuffer及其回调?

时间:2013-01-10 17:31:52

标签: macos core-audio

我需要一步一步地了解如何使用audioConverterFillComplexBuffer及其回调。不,不要告诉我阅读Apple文档。我做他们说的一切,转换总是失败。不,不要告诉我去寻找audioConverterFillComplexBuffer的示例及其正在使用的回调 - 我已经复制了大约十几个这样的例子,无论是行还是修改,转换总是失败。不,输入数据没有任何问题。不,这不是一个端点问题。不,问题不在于我的OS X版本。

问题是我不明白audioConverterFillComplexBuffer是如何工作的,所以我不知道我做错了什么。并且没有任何东西帮助我理解,因为看起来地球上没有人真正了解audioConverterFillComplexBuffer的工作方式。从实际使用它的人(我在他们的代码中窥探货物崇拜编程)到甚至是学习核心音频和/或Apple本身的作者(http://stackoverflow.com/questions/13604612/core-audio-how-can酮分组酮字节时-清楚酮分组4个字节)。

这对我来说不仅仅是一个问题,对于想要在Mac平台上编写高性能音频的人来说,这是一个问题。那些显然是错误的Threadbare文档以及不起作用的示例并不好玩。

再一次,要明确:我需要一步一步地了解如何使用audioConverterFillComplexBuffer及其回调,整个Mac开发人员社区也是如此。

1 个答案:

答案 0 :(得分:0)

这是一个非常老的问题,但我认为仍然很重要。我花了几天时间来解决这个问题,并最终成功实现了转换。我当然不是专家,但是我将概述我对其工作原理的理解。请注意,我正在使用Swift,我也在学习。

以下是主要函数参数:

inAudioConverter: AudioConverterRef:这很简单,只需传入以前创建的AudioConverterRef。

inInputDataProc: AudioConverterComplexInputDataProc:非常复杂的回调。我们将回到这一点。

inInputDataProcUserData, UnsafeMutableRawPointer?:这是对您可能需要提供给回调函数的任何数据的引用。重要,因为即使快速回调也不能继承上下文。例如。您可能需要访问AudioFileID或跟踪到目前为止读取的数据包数量。

ioOutputDataPacketSize: UnsafeMutablePointer<UInt32>:这有点误导。名称暗示它是数据包的大小,但阅读文档意味着我们了解到它是输出格式所期望的数据包总数。您可以将其计算为outPacketCount = frameCount / outStreamDescription.mFramesPerPacket

outOutputData: UnsafeMutablePointer<AudioBufferList>:这是一个音频缓冲区列表,您需要已对其进行初始化,并具有足够的空间来容纳预期的输出数据。大小可以计算为byteSize = outPacketCount * outMaxPacketSize

outPacketDescription: UnsafeMutablePointer<AudioStreamPacketDescription>?):这是可选的。如果您需要数据包描述,请传入一块outPacketCount * sizof(AudioStreamPacketDescription)大小的内存。


在转换器运行时,它将反复调用回调函数以请求更多数据进行转换。回调的主要工作就是简单地从源数据中读取请求的数字数据包。然后,转换器会将数据包转换为输出格式并填充输出缓冲区。这是回调的参数:

inAudioConverter: AudioConverterRef:再次是音频转换器。您可能不需要使用它。

ioNumberDataPackets: UnsafeMutablePointer<UInt32>:要读取的数据包数。读取后,必须将其设置为实际读取的数据包数量(如果到达末尾,则可能小于请求的数量)。

ioData: UnsafeMutablePointer<AudioBufferList>:除了实际数据以外,已经配置的AudioBufferList。您需要以足够的容量初始化ioData.mBuffers.mData来容纳预期的数据包数量,即ioNumberDataPackets * inMaxPacketSize。将ioData.mBuffers.mDataByteSize的值设置为匹配。

outDataPacketDescription: UnsafeMutablePointer<UnsafeMutablePointer<AudioStreamPacketDescription>?>?:根据所使用的格式,转换器可能需要跟踪数据包描述。您需要使用足够的容量来初始化它,以容纳预期数量的数据包描述。

inUserData: UnsafeMutableRawPointer?:您提供给转换器的用户数据。


因此,要开始,您需要:

  1. 具有有关您的输入和输出数据的足够信息,即帧数和最大数据包大小。
  2. 初始化具有足够容量以容纳输出数据的AudioBufferList。
  3. 致电AudioConverterFillComplexBuffer

在每次运行回调时,您需要:

  1. 初始化ioData并具有足够的容量来存储ioNumberDataPackets源数据。
  2. 初始化outDataPacketDescription,具有足够的容量来存储ioNumberDataPackets的AudioStreamPacketDescriptions。
  3. 用源数据包填充缓冲区。
  4. 写数据包描述。
  5. ioNumberDataPackets设置为实际读取的数据包数量。
  6. 返回noErr(如果成功)。

在下面的示例中,我从AudioFileID读取数据:

var converter: AudioConverterRef?
// User data holds an AudioFileID, input max packet size, and a count of packets read
var uData = (fRef, maxPacketSize, UnsafeMutablePointer<Int64>.allocate(capacity: 1))
err = AudioConverterNew(&inStreamDesc, &outStreamDesc, &converter)
err = AudioConverterFillComplexBuffer(converter!, { _, ioNumberDataPackets, ioData, outDataPacketDescription, inUserData in
    let uData = inUserData!.load(as: (AudioFileID, UInt32, UnsafeMutablePointer<Int64>).self)
    ioData.pointee.mBuffers.mDataByteSize = uData.1
    ioData.pointee.mBuffers.mData = UnsafeMutableRawPointer.allocate(byteCount: Int(uData.1), alignment: 1)
    outDataPacketDescription?.pointee = UnsafeMutablePointer<AudioStreamPacketDescription>.allocate(capacity: Int(ioNumberDataPackets.pointee))
    let err = AudioFileReadPacketData(uData.0, false, &ioData.pointee.mBuffers.mDataByteSize, outDataPacketDescription?.pointee, uData.2.pointee, ioNumberDataPackets, ioData.pointee.mBuffers.mData)
    uData.2.pointee += Int64(ioNumberDataPackets.pointee)
    return err
}, &uData, &numPackets, &bufferList, nil)

再次,我不是专家,这就是我通过反复试验中学到的东西。