我正在制作一个需要将音频流式传输到服务器的应用。我想要做的是将录制的音频分成块并在录制时上传。
我使用了两台录像机来做到这一点,但效果并不好;我可以听到块之间的差异(停止几毫秒)。
我该怎么做?
答案 0 :(得分:2)
您的问题可以分为两部分:录制和分块(以及上传,但是谁在乎)。
要从麦克风录制并写入文件,您可以使用AVAudioEngine
和AVAudioFile
快速入门。请参阅下面的示例,该示例以设备的默认输入采样率记录块(您可能希望对其进行速率转换)。
当你谈论块之间的区别时,"你指的是能够将你的音频数据分成几块,当你连接它们时,你不会听到不连续性。例如LPCM音频数据可以在样本级别划分为块,但LPCM比特率很高,因此您更有可能使用像adpcm(iOS上称为ima4)或mp3或aac的分组格式。这些格式只能在数据包边界上划分,例如比如64,576或1024个样本。如果您的块没有标题(通常用于mp3和aac,不确定ima4),那么连接是微不足道的:简单地将块放到端到端,就像cat
命令行工具一样。遗憾的是,在iOS上没有mp3编码器,因此将aac留作可能的格式,但这取决于您的播放要求。 iOS设备和mac绝对可以播放它。
import AVFoundation
class ViewController: UIViewController {
let engine = AVAudioEngine()
struct K {
static let secondsPerChunk: Float64 = 10
}
var chunkFile: AVAudioFile! = nil
var outputFramesPerSecond: Float64 = 0 // aka input sample rate
var chunkFrames: AVAudioFrameCount = 0
var chunkFileNumber: Int = 0
func writeBuffer(_ buffer: AVAudioPCMBuffer) {
let samplesPerSecond = buffer.format.sampleRate
if chunkFile == nil {
createNewChunkFile(numChannels: buffer.format.channelCount, samplesPerSecond: samplesPerSecond)
}
try! chunkFile.write(from: buffer)
chunkFrames += buffer.frameLength
if chunkFrames > AVAudioFrameCount(K.secondsPerChunk * samplesPerSecond) {
chunkFile = nil // close file
}
}
func createNewChunkFile(numChannels: AVAudioChannelCount, samplesPerSecond: Float64) {
let fileUrl = NSURL(fileURLWithPath: NSTemporaryDirectory()).appendingPathComponent("chunk-\(chunkFileNumber).aac")!
print("writing chunk to \(fileUrl)")
let settings: [String: Any] = [
AVFormatIDKey: kAudioFormatMPEG4AAC,
AVEncoderBitRateKey: 64000,
AVNumberOfChannelsKey: numChannels,
AVSampleRateKey: samplesPerSecond
]
chunkFile = try! AVAudioFile(forWriting: fileUrl, settings: settings)
chunkFileNumber += 1
chunkFrames = 0
}
override func viewDidLoad() {
super.viewDidLoad()
let input = engine.inputNode!
let bus = 0
let inputFormat = input.inputFormat(forBus: bus)
input.installTap(onBus: bus, bufferSize: 512, format: inputFormat) { (buffer, time) -> Void in
DispatchQueue.main.async {
self.writeBuffer(buffer)
}
}
try! engine.start()
}
}