在RASA中将语音添加到文本功能

Question

我需要在RASA中添加语音到文本功能，用户可以使用自己的声音提出问题，而漫游器将通过聊天回答他。有谁知道我如何在RASA中做到这一点？ 作为我的前端将是一个Android应用程序。请告诉我该怎么做。

预先感谢。

Answer 1

只要您使用语音转文本（STT）API，就可以使用Rasa开源构建语音机器人，因为Rasa仅处理文本。这将涉及建立一个自定义通道，该通道将语音作为输入，将其发送到STT API，然后将文本返回给Rasa。

您可以在Rasa博客上找到一些详细的示例：

• https://blog.rasa.com/how-to-build-a-voice-assistant-with-open-source-rasa-and-mozilla-tools/
• https://blog.rasa.com/how-to-build-a-mobile-voice-assistant-with-open-source-rasa-and-aimybox/

如果您不介意使用封闭源代码，那么也可以选择集成Google Speech API。