Question

我正在编写一个与Google Actions合作的应用。唯一令人遗憾的是，我无法找到有关如何形成我的回复的任何信息，以便Google将流式传输来自给定网址的音频。谷歌甚至还支持这个吗？

我已经在Alexa上编写了相同的应用程序，而且在Alexa上您所要做的就是返回一个音频项目（令牌，URL，播放命令），Alexa将开始流式传输。

我应该提到我不使用API.AI，但我只是使用Actions SDK并使用C＃在Asure上托管我的Web服务。

那么，底线......如何通过Actions SDK格式化响应以将MP3文件流式传输到Google Home？

Answer 1

根据文档，您可以在SSML中嵌入元素。 https://developers.google.com/actions/reference/ssml包括以下示例：

<speak>
  Here are <say-as interpet-as="characters">SSML</say-as> samples.
  I can pause <break time="3s"/>.
  I can play a sound
  <audio src="https://www.example.com/MY_MP3_FILE.mp3">didn't get your MP3 audio file</audio>.
  I can speak in cardinals. Your number is <say-as interpret-as="cardinal">10</say-as>.
  Or I can speak in ordinals. You are <say-as interpret-as="ordinal">10</say-as> in line.
  Or I can even speak in digits. The digits for ten are <say-as interpret-as="characters">10</say-as>.
  I can also substitute phrases, like the <sub alias="World Wide Web Consortium">W3C</sub>.
  Finally, I can speak a paragraph with two sentences.
  <p><s>This is sentence one.</s><s>This is sentence two.</s></p>
</speak>

修改

p / s：SSML in Documents有以下限制：

首选单通道，但立体声可以接受。

最长持续时间120秒。如果要播放持续时间较长的音频，请考虑实施媒体响应。 5兆字节的文件大小限制。

源URL必须使用HTTPS协议。

我们的UserAgent在获取时音频是“Google-Speech-Actions”。

Answer 2

更新：第一个答案仅适用于Dialogflow的V1。至于V2，您可以通过这种方式创建mediaResponse（来自Google的文档）：

conv.ask(new MediaObject({
  name: 'Jazz in Paris',
  url: 'http://storage.googleapis.com/automotive-media/Jazz_In_Paris.mp3',
  description: 'A funky Jazz tune',
  icon: new Image({
    url: 'http://storage.googleapis.com/automotive-media/album_art.jpg',
    alt: 'Media icon',
  }),
}));

=============================================== =========================

我发了一个答案over here。

基本上，您可以创建一个播放音频文件的mediaResponse对象。我可以播放50分钟的音频文件。

Node.js中的代码示例可以（使用当前文档）：

const richResponse = app.buildRichResponse()
 .addSimpleResponse("Here's song one.")
  .addMediaResponse(app.buildMediaResponse()
  .addMediaObjects([
    app.buildMediaObject("Song One", "https://....mp3")
      .setDescription("Song One with description and large image.") // Optional
      .setImage("https://....jpg", app.Media.ImageType.LARGE)
        // Optional. Use app.Media.ImageType.ICON if displaying icon.
  ])
)
.addSuggestions(["other songs"]);

如何判断Google上的操作流式传输音频？

2 个答案: