图形渲染与 Shader / 系统课时

实现图像后处理

实现图像后处理

本节把场景先渲染到纹理,再用全屏四边形进行第二次片段着色。你将用一个着色器完成灰度颜色变换和 3×3 卷积,并理解纹理像素尺寸、采样邻域与卷积核之间的对应关系。

学习目标

  • 说清离屏颜色附件到屏幕纹理采样的后处理链路。
  • 在片段着色器中实现灰度变换与 3×3 锐化卷积。
  • 根据纹理尺寸正确计算邻域采样偏移,并避免边缘与数值范围问题。

后处理为何要多一次绘制

常规绘制直接把片段写进默认帧缓冲,着色器只能处理当前片段。图像后处理则先把完整场景写入自建帧缓冲的颜色纹理,再把这张纹理贴到覆盖屏幕的四边形上。第二次绘制时,每个片段都能读取当前像素及其邻居,因此既能做颜色变换,也能做卷积。

离屏纹理到后处理着色器的渲染链路

真正执行后处理时,应暂时关闭深度测试,因为全屏四边形只负责覆盖屏幕;同时要确保第二次绘制绑定的是默认帧缓冲,而不是再次写回作为输入的颜色纹理。

在片段着色器中组合颜色变换与卷积

下面是片段示例,依赖已经创建好的全屏四边形、纹理坐标以及名为 screenTexture 的普通二维颜色纹理。effectMode 为 0 时原样显示,为 1 时转灰度,为 2 时执行锐化卷积。

glsl
#version 330 core

out vec4 FragColor;
in vec2 TexCoords;

uniform sampler2D screenTexture;
uniform int effectMode;

void main()
{
    vec3 center = texture(screenTexture, TexCoords).rgb;

    if (effectMode == 0) {
        FragColor = vec4(center, 1.0);
        return;
    }

    if (effectMode == 1) {
        // 使用感知亮度权重,而不是简单平均 RGB。
        float gray = dot(center, vec3(0.2126, 0.7152, 0.0722));
        FragColor = vec4(vec3(gray), 1.0);
        return;
    }

    vec2 texel = 1.0 / vec2(textureSize(screenTexture, 0));
    vec2 offsets[9] = vec2[](
        vec2(-texel.x,  texel.y), vec2(0.0,  texel.y), vec2(texel.x,  texel.y),
        vec2(-texel.x,  0.0),     vec2(0.0,  0.0),     vec2(texel.x,  0.0),
        vec2(-texel.x, -texel.y), vec2(0.0, -texel.y), vec2(texel.x, -texel.y)
    );
    float kernel[9] = float[](
         0.0, -1.0,  0.0,
        -1.0,  5.0, -1.0,
         0.0, -1.0,  0.0
    );

    vec3 color = vec3(0.0);
    for (int i = 0; i < 9; ++i) {
        // 每个核权重乘以对应邻域 texel,再累加得到新像素。
        color += texture(screenTexture, TexCoords + offsets[i]).rgb * kernel[i];
    }

    FragColor = vec4(color, 1.0);
}

预期结果

text
effectMode = 0:画面与离屏颜色纹理一致。
effectMode = 1:画面变为保留亮度层次的灰度图。
effectMode = 2:物体和纹理边缘更突出,整体呈锐化效果。

textureSize 让采样偏移随实际纹理分辨率变化;如果把偏移写死成 1.0 / 800.0 一类常量,窗口尺寸变化后采样就会错位。卷积核也不要求权重和一定为 1:模糊核通常保持总权重接近 1,而锐化和边缘检测会故意包含负权重。

把后处理阶段接入渲染循环

以下仍是片段示例,依赖已存在的 sceneFBO、sceneColorTexture、screenVAO 和后处理着色器。关键是先完成场景绘制,再切回默认帧缓冲并绘制屏幕四边形。

cpp
// 第一阶段:场景写入离屏帧缓冲。
glBindFramebuffer(GL_FRAMEBUFFER, sceneFBO);
glEnable(GL_DEPTH_TEST);
glClear(GL_COLOR_BUFFER_BIT | GL_DEPTH_BUFFER_BIT);
renderScene();

// 第二阶段:读取颜色纹理并写入默认帧缓冲。
glBindFramebuffer(GL_FRAMEBUFFER, 0);
glDisable(GL_DEPTH_TEST);
glClear(GL_COLOR_BUFFER_BIT);

postShader.use();
postShader.setInt("screenTexture", 0);
postShader.setInt("effectMode", 2);

glActiveTexture(GL_TEXTURE0);
glBindTexture(GL_TEXTURE_2D, sceneColorTexture);
glBindVertexArray(screenVAO);
glDrawArrays(GL_TRIANGLES, 0, 6);

预期结果

text
窗口显示经过 effectMode = 2 处理后的场景;离屏场景本身仍保存在 sceneColorTexture 中。

如果第二阶段仍绑定 sceneFBO,就可能同时读取和写入同一纹理,结果未定义;如果忘记关闭深度测试,全屏四边形还可能被旧的深度值挡住。

更换卷积核时关注边界

常见的 3×3 核可以直接替换 kernel:均值模糊可使用九个 1/9,边缘检测可使用 0 1 0 / 1 -4 1 / 0 1 0。卷积后的 RGB 可能低于 0 或高于 1,写入标准归一化颜色附件时通常会被钳制,但使用浮点颜色附件时应按后续处理需求决定是否主动 clamp。

纹理边缘的邻域采样会越过 [0,1] 范围,其实际结果取决于纹理环绕方式。屏幕后处理通常使用 GL_CLAMP_TO_EDGE,避免边缘采样绕回到画面另一侧;需要多级后处理时,也应让每一阶段读写不同附件,避免反馈环路。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

实现图像后处理

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通