来自WebSocket的WebAudio AAC流媒体播放

时间:2017-12-19 00:44:54

标签: websocket web-audio

我需要从WebSocket播放aac(adts)流媒体,我搜索了互联网,发现aac.js可以做到,但听起来像延迟差不多2~5秒。

我发现有些人使用WebAudio来做这件事。我尝试使用下面的代码但解码器在一些数据包之后返回错误(并非总是但重复错误):

Uncaught (in promise) DOMException: Unable to decode audio data

我的示例javascript:

  var context  = new AudioContext();
  var nextStartTime = 0;

  var audioWs = new WebSocket("ws://" + hostip + ":8084");
  audioWs.binaryType = 'arraybuffer';

  audioWs.onopen = function(evt) {
      console.log("onOpen");
      bexit = 0;
  };

  audioWs.onclose = function(evt) {
      console.log("close");
  };

  audioWs.onmessage = function(evt) {
      var blob = evt.data;
      if ( blob.slice == undefined) {
          console.log("undefined message");
          return;
      }
      decodeAudio(blob);
  };

  audioWs.onerror = function(evt) {
      console.log("error");
  };

  var decodeAudio = function(blob) {
      context.decodeAudioData(
          blob,
          function(buffer) {
              if (!buffer) {
                  console.log('error decoding file data: ' + url);
                  return;
              }
              console.log("playback buffer");
              playBuffer(buffer);
          },
          function(error) {
              console.error("decodeAudioData error", error);
          });
  };

  var playBuffer = function(buffer) {
      var source = context.createBufferSource();
      source.buffer = buffer;
      if(nextStartTime == 0){
          nextStartTime = context.currentTime + buffer.duration/2;
      }
      source.connect(context.destination);
      source.start(nextStartTime);
      nextStartTime += buffer.duration;
  };

我不确定它是否会因为从websocket收到的数据过快而导致解码器错误!我该如何解决?

或者使用WebAudio API执行此任务可能不是一个好方法吗?

1 个答案:

答案 0 :(得分:1)

WebAudio decodeAudioData无法解码部分blob。一般来说,它需要整个文件,因为在许多编码格式中,必要的信息(采样率,通道,样本大小等)仅在开始时。