如何在神经网络算法中处理文本和图像输入

Question

我正在研究神经网络机器学习算法。我想知道适用于NN功能列表的输入数据格式。是否有可能处理文本＆amp;将图像一起用作CNN中的输入或使用任何其他机器学习算法。我将如何理解输出。

Answer 1

是的，可以一起处理文本和图像数据。 使用每个文本数据点或图像数据点创建的特征向量可以组合在一起并且并行地用作新的大特征向量。 在文本数据矢量化之后，像素矢量和文本矢量之间没有太大差异。

特别是在CNN的情况下，对于最终模型，可以创建一个组合神经网络，其中一个卷积分支在一边，而矢量化的一个分支在另一边。

图片来源：This图片来自Christopher Bonnett article

有关详细信息，请参阅上述文章。它解释了如何使用图像和文本数据将电子商务产品分类为各种类别层次结构。