如何从视频的所有帧中获取像素值？

Question

我的大学有一个项目要求创建视频编解码器。问题是即使我已经研究了很多关于视频压缩，技术，算法等但我无法在任何地方找到如何从视频帧中获取像素值（因为这是第一个想要应用离散余弦的想法）后来改造）。