在我的Mac应用程序中,我根据附加相机的YUV 4:2:2数据定义矩形纹理。使用标准的顶点和纹理坐标,我可以将它绘制到屏幕上的矩形区域,没有任何问题。
但是,我想使用GLSL片段着色器在GPU上处理这些图像帧,并且无法将矩形视频纹理作为均匀传递给片段着色器。当我尝试这样做时,纹理只读为黑色。
着色器程序编译,链接并传递验证。我从着色器程序中收到了制服的正确地址。其他制服(如浮点值)正确传入,片段着色器响应这些值的变化。片段着色器接收正确的纹理坐标。我还使用glGetError()自由地散布了我的代码,并且在任何地方都没有看到任何错误。
顶点着色器如下:
void main()
{
gl_Position = gl_ModelViewProjectionMatrix * gl_Vertex;
gl_FrontColor = gl_Color;
gl_TexCoord[0] = gl_TextureMatrix[0] * gl_MultiTexCoord0;
}
,片段着色器如下:
uniform sampler2D videoFrame;
void main()
{
gl_FragColor = texture2D(videoFrame, gl_TexCoord[0].st);
}
这应该只是在我的矩形几何体上显示纹理。
相关的绘图代码如下:
static const GLfloat squareVertices[] = {
-1.0f, -1.0f,
1.0f, -1.0f,
-1.0f, 1.0f,
1.0f, 1.0f,
};
const GLfloat textureVertices[] = {
0.0, videoImageSize.height,
videoImageSize.width, videoImageSize.height,
0.0, 0.0,
videoImageSize.width, 0.0
};
CGLSetCurrentContext(glContext);
if(!readyToDraw)
{
[self initGL];
readyToDraw = YES;
}
glViewport(0, 0, (GLfloat)self.bounds.size.width, (GLfloat)self.bounds.size.height);
glMatrixMode(GL_PROJECTION);
glLoadIdentity();
glMatrixMode(GL_MODELVIEW);
glLoadIdentity();
glClearColor(0.5f, 0.5f, 0.5f, 1.0f);
glClear(GL_COLOR_BUFFER_BIT);
glEnable(GL_TEXTURE_2D);
glGenTextures(1, &textureName);
glActiveTexture(GL_TEXTURE0);
glBindTexture(GL_TEXTURE_RECTANGLE_EXT, textureName);
glTexImage2D(GL_TEXTURE_RECTANGLE_EXT, 0, GL_RGBA, videoImageSize.width, videoImageSize.height, 0, GL_YCBCR_422_APPLE, GL_UNSIGNED_SHORT_8_8_REV_APPLE, videoTexture);
glUseProgram(filterProgram);
glUniform1i(uniforms[UNIFORM_VIDEOFRAME], 0);
glEnableClientState(GL_VERTEX_ARRAY);
glEnableClientState(GL_TEXTURE_COORD_ARRAY);
glVertexPointer(2, GL_FLOAT, 0, squareVertices);
glTexCoordPointer(2, GL_FLOAT, 0, textureVertices);
glDrawArrays(GL_TRIANGLE_STRIP, 0, 4);
[super drawInCGLContext:glContext pixelFormat:pixelFormat forLayerTime:interval displayTime:timeStamp];
glDeleteTextures(1, &textureName);
此代码位于CAOpenGLLayer中,超类的-drawInCGLContext:pixelFormat:forLayerTime: displayTime:
只运行glFlush()
。
使用如下代码读取统一地址:
uniforms[UNIFORM_VIDEOFRAME] = glGetUniformLocation(filterProgram, "videoFrame");
正如我所说,如果我注释掉glUseProgram()
和glUniform1i()
行,则此纹理矩形会正确绘制。离开它们会导致绘制黑色矩形。
什么可能阻止我的纹理均匀传递到我的片段着色器?
答案 0 :(得分:7)
不确定您正在使用的GLSL版本,但是从1.40开始,类型sampler2DRect
专门用于访问非二次幂纹理。 可能是您正在寻找的,但我不知道在glsl 1.40之前如何处理矩形纹理。