正如很长的标题所示,我无法通过PubNunb通过网络发送的音频播放音频。我所做的是使用以下代码从AudioRecord录制时发送音频:
AudioConfig audioConfig = getValidSampleRates(AudioFormat.CHANNEL_IN_MONO, AudioFormat.ENCODING_PCM_16BIT);
buffer = new byte[audioConfig.getBufferSize()];
recorder = new AudioRecord(MediaRecorder.AudioSource.MIC, audioConfig.getSampleSize(), AudioFormat.CHANNEL_IN_MONO, AUDIO_FORMAT, audioConfig.getBufferSize());
当用户按下按钮时发送记录的数据:
private class RecorderRunnable implements Runnable {
@Override
public void run() {
while(mRecording) {
Log.d("RECORDER_STATE", "Recording LOOP");
recorder.read(buffer, 0, buffer.length);
String base64EncodedBuffer = Base64.encodeToString(buffer, Base64.NO_WRAP);
pubnub.publish(MainActivity.CHANNEL_ID, base64EncodedBuffer, new Callback() {
@Override
public void successCallback(String channel, Object message) {
super.successCallback(channel, message);
}
});
}
}
}
接收代码:
@Override
public void successCallback(String channel, final Object message) {
byte[] decodedBase64 = Base64.decode(message.toString(), Base64.NO_WRAP);
speaker.write(decodedBase64, 0, decodedBase64.length);
}
问题: 我得到了音频,但我听到的声音非常慢。 "你好"听起来像: " Hee- *静态* -11- *静态* -oo"
为了排除可能的原因,我尝试立即播放这样的音频(没有网络):
while(mRecording) {
Log.d("RECORDER_STATE", "Recording LOOP");
recorder.read(buffer, 0, buffer.length);
String base64EncodedBuffer = Base64.encodeToString(buffer, Base64.NO_WRAP);
byte[] decodedBase64 = Base64.decode(base64EncodedBuffer, Base64.NO_WRAP);
speaker.write(decodedBase64, 0, decodedBase64.length);
}
(注意:我故意转换为base64并返回字节数组。)
上面代码的结果(录制后直接播放)非常好。因此,我想知道在通过网络处理时我做错了什么。
任何建议表示赞赏。谢谢。
编辑:2015年8月28日 找到了这个here的一个很好的解释。但现在问题是,使用我当前的实现处理网络抖动/缓冲和数据包丢失的最佳方法是什么。
答案 0 :(得分:3)
pubnub通过tcp(not udp)传递数据。 http://www.pubnub.com/knowledge-base/discussion/263/does-pubnub-support-the-udp-protocol
应用程序中不需要处理数据包丢失。
您可能需要通过创建某种缓冲区来处理抖动。由于没有严格的实时约束,我将讨论一种方法而不是粘贴代码。
您可以使用队列创建缓冲区。我建议有两个线程。一个用于您的读者(您的播放器),一个用于编写器(网络流)。在让读者阅读之前,让作者排队一些数据(可能是几秒钟的数据)。在纸面上,通过非常简单的概念验证,您不应该有同时读取和写入的问题,因为编写器正在写入队列的末尾并且读取器正在读取队列的开头。
把它想象成一个半满的桶。你倒水,让水以相同的速度泄漏。