来自Base64 String Slow Sounds的Android Play PCM字节数组

时间:2015-08-28 10:49:39

标签: android audio audio-streaming pubnub

正如很长的标题所示,我无法通过PubNunb通过网络发送的音频播放音频。我所做的是使用以下代码从AudioRecord录制时发送音频:

 AudioConfig audioConfig = getValidSampleRates(AudioFormat.CHANNEL_IN_MONO, AudioFormat.ENCODING_PCM_16BIT);
    buffer = new byte[audioConfig.getBufferSize()];

    recorder = new AudioRecord(MediaRecorder.AudioSource.MIC, audioConfig.getSampleSize(), AudioFormat.CHANNEL_IN_MONO, AUDIO_FORMAT, audioConfig.getBufferSize());

当用户按下按钮时发送记录的数据:

   private class RecorderRunnable implements Runnable {
    @Override
    public void run() {
        while(mRecording) {
            Log.d("RECORDER_STATE", "Recording LOOP");
            recorder.read(buffer, 0, buffer.length);

            String base64EncodedBuffer = Base64.encodeToString(buffer, Base64.NO_WRAP);

            pubnub.publish(MainActivity.CHANNEL_ID, base64EncodedBuffer, new Callback() {
                @Override
                public void successCallback(String channel, Object message) {
                    super.successCallback(channel, message);
                }
            });
        }
    }
}

接收代码:

       @Override
                    public void successCallback(String channel, final Object message) {


                        byte[] decodedBase64 = Base64.decode(message.toString(), Base64.NO_WRAP);

                        speaker.write(decodedBase64, 0, decodedBase64.length);
                    }

问题: 我得到了音频,但我听到的声音非常慢。 "你好"听起来像: " Hee- *静态* -11- *静态* -oo"

为了排除可能的原因,我尝试立即播放这样的音频(没有网络):

 while(mRecording) {
            Log.d("RECORDER_STATE", "Recording LOOP");
            recorder.read(buffer, 0, buffer.length);

            String base64EncodedBuffer = Base64.encodeToString(buffer, Base64.NO_WRAP);

            byte[] decodedBase64 = Base64.decode(base64EncodedBuffer, Base64.NO_WRAP);

            speaker.write(decodedBase64, 0, decodedBase64.length);
        }

注意:我故意转换为base64并返回字节数组。

上面代码的结果(录制后直接播放)非常好。因此,我想知道在通过网络处理时我做错了什么。

任何建议表示赞赏。谢谢。

编辑:2015年8月28日 找到了这个here的一个很好的解释。但现在问题是,使用我当前的实现处理网络抖动/缓冲和数据包丢失的最佳方法是什么。

1 个答案:

答案 0 :(得分:3)

pubnub通过tcp(not udp)传递数据。 http://www.pubnub.com/knowledge-base/discussion/263/does-pubnub-support-the-udp-protocol

应用程序中不需要处理数据包丢失。

您可能需要通过创建某种缓冲区来处理抖动。由于没有严格的实时约束,我将讨论一种方法而不是粘贴代码。

您可以使用队列创建缓冲区。我建议有两个线程。一个用于您的读者(您的播放器),一个用于编写器(网络流)。在让读者阅读之前,让作者排队一些数据(可能是几秒钟的数据)。在纸面上,通过非常简单的概念验证,您不应该有同时读取和写入的问题,因为编写器正在写入队列的末尾并且读取器正在读取队列的开头。

把它想象成一个半满的桶。你倒水,让水以相同的速度泄漏。