macos - 为什么我无法将此纹理统一附加到我的 GLSL 片段着色器？

Question

在我的 Mac 应用程序中，我根据连接的相机的 YUV 4:2:2 数据定义了一个矩形纹理。使用标准顶点和纹理坐标，我可以毫无问题地将其绘制到屏幕上的矩形区域。

但是，我想使用 GLSL 片段着色器在 GPU 上处理这些图像帧，但我无法将矩形视频纹理作为制服传递给片段着色器。当我尝试这样做时，纹理只是显示为黑色。

着色器程序编译、链接并通过验证。我从着色器程序中收到制服的正确地址。其他制服，如浮点值，正确传入，片段着色器响应这些值的变化。片段着色器接收正确的纹理坐标。我还在我的代码中大量使用 glGetError() 并且没有发现任何错误。

顶点着色器如下:

void main()
{
    gl_Position = gl_ModelViewProjectionMatrix * gl_Vertex;

    gl_FrontColor = gl_Color;
    gl_TexCoord[0] = gl_TextureMatrix[0] * gl_MultiTexCoord0;
}

片段着色器如下:

uniform sampler2D videoFrame;

void main()
{
    gl_FragColor = texture2D(videoFrame, gl_TexCoord[0].st);
}

这应该只是在我的矩形几何体上显示纹理。

相关绘图代码如下:

static const GLfloat squareVertices[] = {
    -1.0f, -1.0f,
    1.0f, -1.0f,
    -1.0f,  1.0f,
    1.0f,  1.0f,
};

const GLfloat textureVertices[] = {
    0.0, videoImageSize.height,
    videoImageSize.width, videoImageSize.height,
    0.0, 0.0,
    videoImageSize.width, 0.0
};

CGLSetCurrentContext(glContext);

if(!readyToDraw)
{
    [self initGL];
    readyToDraw = YES;
}


glViewport(0, 0, (GLfloat)self.bounds.size.width, (GLfloat)self.bounds.size.height);

glMatrixMode(GL_PROJECTION);
glLoadIdentity();

glMatrixMode(GL_MODELVIEW);
glLoadIdentity(); 

glClearColor(0.5f, 0.5f, 0.5f, 1.0f);
glClear(GL_COLOR_BUFFER_BIT);

glEnable(GL_TEXTURE_2D);

glGenTextures(1, &textureName);
glActiveTexture(GL_TEXTURE0);
glBindTexture(GL_TEXTURE_RECTANGLE_EXT, textureName);

glTexImage2D(GL_TEXTURE_RECTANGLE_EXT, 0, GL_RGBA, videoImageSize.width, videoImageSize.height, 0, GL_YCBCR_422_APPLE, GL_UNSIGNED_SHORT_8_8_REV_APPLE, videoTexture);  

glUseProgram(filterProgram);    

glUniform1i(uniforms[UNIFORM_VIDEOFRAME], 0);   

glEnableClientState(GL_VERTEX_ARRAY);
glEnableClientState(GL_TEXTURE_COORD_ARRAY);
glVertexPointer(2, GL_FLOAT, 0, squareVertices);
glTexCoordPointer(2, GL_FLOAT, 0, textureVertices);

glDrawArrays(GL_TRIANGLE_STRIP, 0, 4);

[super drawInCGLContext:glContext pixelFormat:pixelFormat forLayerTime:interval displayTime:timeStamp];

glDeleteTextures(1, &textureName);

此代码驻留在 CAOpenGLLayer 中，其中父类(super class)的 -drawInCGLContext:pixelFormat:forLayerTime: displayTime: 简单地运行 glFlush()。

使用如下代码读取统一地址:

uniforms[UNIFORM_VIDEOFRAME] = glGetUniformLocation(filterProgram, "videoFrame");

正如我所说，如果我注释掉 glUseProgram() 和 glUniform1i() 行，这个带纹理的矩形就会正确绘制。保留它们会导致绘制一个黑色矩形。

什么会阻止我的纹理制服被传递到我的片段着色器？

Answer 1

不确定您正在使用的 GLSL 版本，但从 1.40 开始，有类型 sampler2DRect 专门用于访问非二次方纹理。 可能 是您正在寻找的内容，但我不知道在 glsl 1.40 之前如何处理矩形纹理。