使用卷积LSTM生成下一帧

Question

我一直在努力寻找能够展示卷积LSTM的优秀教程或示例。

我正在尝试构建一个模型，该模型将根据一系列先前的帧生成下一帧。使用TimeDistributed和ConvLSTM2D有点棘手。

有人可以分享一些例子吗？

Answer 1

使用此链接： https://github.com/keras-team/keras/blob/master/examples/conv_lstm.py

在上面的链接中，他们使用形状为（n_samples = 1200，n_frames = 15，n_row_image = 40，n_col_image = 40，n_channels = 1）的视频来预测测试集中的另一个视频帧。他们使用了ConvLSTM2D，这是一个不错的功能，可用于帧预测或任何其他与视频相关的深度学习问题。