如何将.aac网址流式传输到wit.ai语音API

时间:2017-01-04 13:02:37

标签: node.js express facebook-messenger chatbot wit.ai

我正在尝试获取facebook messenger audioclip网址并将该网址的音频剪辑转发给wit.ai语音API。

传入消息提供有效负载URL,下载时具有.aac文件。从这里的API文档HTTP API - speech endpoint看起来不支持.aac文件类型。

我已经尝试使用标头来发送mpeg3内容类型(希望它可能需要)但是我的所有响应都没有文本,并且机智控制台显示传入消息的日志“无文本”。 我已尝试使用文档页面上描述的所有音频组合进行以下操作。

发送的形式为:

curl -XPOST 'https://api.wit.ai/speech?' \
 -i -L \
 -H "Authorization: Bearer <TOKEN>" \
 -H "Content-Type: audio/mpeg3" \
 -H "Transfer-encoding: chunked" \
 --data-binary "https://cdn.fbsbx.com/v/<rest of url>"

显然,请求是正常的,如响应所示,但文本中没有返回任何内容,因此文件类型是我的问题。

HTTP/1.1 200 OK
Server: nginx/1.8.0
Date: Wed, 04 Jan 2017 12:51:13 GMT
Content-Type: application/json
Content-Length: 91
Connection: keep-alive

{
   "msg_id" : "12265ac7-3050-4cd2-94c1-7bf0d27eeab4",
   "_text" : "",
   "entities" : { }
}

在收件箱的“语音”下检查控制台我什么都没看到,因为我的标题和/或文件类型错误,显然没有拿起音频。

我认为不可能流式传输信使应用程序创建的文件(如果重要的话,在ios上),那么是否可以在运行时使用后端的node / python将.aac转换为.wav?

任何帮助表示感谢。

2 个答案:

答案 0 :(得分:0)

现在看起来我的问题的技术答案是&#34;它无法完成&#34;因为Wit不支持这种格式。但是作为一种解决方法,我创建了一个python脚本,可以获取url并创建一个本地转换的.wav文件,然后我将其传输到语音api。

from pydub import AudioSegment
import os
import sys
import urllib2
import uuid
import json

# Globals
PATH = os.path.dirname(os.path.realpath(sys.argv[0])) + "/speech/"


def convertFiletoWAV(infile):
    OUT_FILE = 'speech_'+ str(uuid.uuid1())+ '.wav'
    OUT_NAME = PATH + OUT_FILE
    INPUT = PATH + infile
    AudioSegment.from_file(INPUT,"aac").export(OUT_NAME, format="wav")
    return {
        'in_full':INPUT,
        'in_file':infile,
        'out_full':OUT_NAME,
        'out_file':OUT_FILE
    }

def main(file):
    print json.dumps(convertFiletoWAV(str(file)))
    sys.stdout.flush()

if __name__ == "__main__":
    main(sys.argv[1:][0])

然后从js音频处理程序调用它:

let convertAndParseSpeech = (url) => {
  let file_p = config.root + '/python/speech/'
  let file = "fb_" + uuidV1() + "_down.aac"
  return new Promise(function(resolve, reject) {
    let stream = request
      .get(<url passed from Facebook payload>)
      .pipe(fs.createWriteStream(file_p + file))

    stream.on('finish',()=>{
      console.log(file);
      PythonShell.defaultOptions = {
        scriptPath: config.root + '/python/'
      };
      var options = {
        mode: 'text',
        args: [file],
      }
      PythonShell.run('convertAudio.py',options,(err, results) => {
        if (err || results.ERR) {
          reject(err)
        }else {
          console.log("RESULTS :",JSON.parse(results))
          fs.createReadStream(file_p + JSON.parse(results).out_file)
          .pipe(
            request.post({
              url : 'https://api.wit.ai/speech?v=20160526',
              json : true,
              headers: {
                "Content-Type": "audio/wav",
                "Authorization": "Bearer " + config.WIT_TOKEN
              }
            },(err,res,body)=>{
              if (!err || res.statusCode == 200) {
                resolve("OK", res.body);
              }else {
                reject("NOK", err);
              }
            })
          );
        }
      })
    })
  });

这在分割成单个部分或从命令运行时有效,但是当我运行测试说pydub不可用时,我从python脚本返回错误。

ImportError: No module named pydub

我将跟进PythonShell人员,看看我做错了什么,并用结果编辑答案,但这个解决方案为我提供了我现在想要的基本功能

答案 1 :(得分:0)

在你的代码上,

--data-binary "https://cdn.fbsbx.com/v/<rest of url>"

你不必在开头追加“@”吗?

--data-binary "@https://cdn.fbsbx.com/v/<rest of url>"