纹理映射基础:让像素长在几何体上
纹理映射是 Ed Catmull 1974 年博士论文里的东西——把一张 2D 图像贴到 3D 表面上,让每个片段除了几何信息(位置、法线)之外还带一张"图"的信息。这个想法看起来平平无奇,但它是整个实时渲染工业得以运转的关键:硬件擅长贴图采样(内存访问 + 双线性插值),不擅长复杂 shader 计算,所以把材质的复杂性尽可能烘焙到纹理里,是几十年不变的策略。
本文只讲最基本的:UV 坐标怎么来、采样时如何处理边界和过滤、mipmap 为什么必要。更花哨的法线贴图、视差、IBL 见下一篇。
1. UV 坐标:从 3D 表面到 2D 纹理平面
一张纹理是 2D 网格 (约定,不是绝对——OpenGL 里原点在左下,DirectX 里在左上,是十几年来无数 bug 的源头)。3D 模型的每个顶点带一对纹理坐标 ,把顶点映射到纹理平面上的一个点。三角形内部的 UV 由三个顶点的 UV 重心坐标插值得到。
问题的本质是:如何为 3D 曲面找出一套"展开图"。这个问题一般无解——地球仪展成平面必然扭曲,数学定理(Gauss 的绝妙定理)保证了非零高斯曲率的表面无法保长度地展开。所以 UV 展开有多种策略:
| 表面 | 常用参数化 |
|---|---|
| 平面 | 直接 |
| 圆柱 | |
| 球面 | (极点处扭曲) |
| 立方体 | 六个面各自 UV(cube map 就用这个) |
| 任意网格 | LSCM、ABF 等几何处理里的展开算法 |
3D 建模软件(Blender/Maya)里"UV 展开"就是这一步。艺术家常常手动切缝(seam),控制哪些边可以被"剪开"贴到平面上。
1.1 三角形内部的 UV 插值
给定三角形三个顶点的属性 ,三角形内点 的重心坐标为 ,直接插值:
注意透 视校正。屏幕空间的线性插值在透视投影下不对应世界空间的线性插值——远处的三角形被压缩,直接按屏幕像素插 UV 会导致贴图"游动"。硬件解决方案是插值 和 ,最后除回来:
这个细节见光栅化。今天的 GPU 硬件默认做透视校正,shader 里带 noperspective 修饰符才关。
2. 采样:从 UV 到颜色
给定连续的 UV 坐标,纹理是离散的像素网格。取色的过程叫采样(sampling)。GLSL 里 texture(sampler2D, uv) 一句话背后隐藏着一大堆参数决策。
2.1 包裹模式(Wrap Mode)
UV 超出 时怎么办?四种主流策略:
u=1.3 时的行为:
REPEAT : u 变成 0.3 (瓷砖平铺)
MIRRORED : u 变成 0.7 (镜像平铺,消除接缝)
CLAMP : u 变成 1.0 (边缘颜色延伸)
BORDER : 使用指定的边缘色
REPEAT 是最常用的——一张地砖、一片草地,拉一张 256×256 的 tile 反复贴。CLAMP 用在 UI 贴图、天空盒面之间的接缝(防止渗色)。MIRRORED 用在需要 seamless 但没有真正 seamless 纹理时,靠镜像掩盖接缝。BORDER 少见,阴影贴图外的透明边界会用。
2.2 边界的坑
REPEAT 模式配上双线性过滤,在 附近会采样到 的像素和 的像素混合。如果纹理左右边缘颜色差异大(比如一张不 seamless 的纹理),接缝处会出现一条彩色线。这是"平铺纹理设计要 seamless"的技术原因之一。
CLAMP 模式如果延伸出去的像素颜色和内部差异大,边缘会出现光晕("bleeding"),特别是 mipmap 采样时——低层级 mip 的边缘像素混合了远处颜色。解决方法是使用 GL_CLAMP_TO_EDGE(用边缘像素填充)而不是 GL_CLAMP(用固定颜色填充)。
3. 过滤:从连续到离散的抗混叠
一个像素落在纹理上,严格说是覆盖一小片区域(footprint)。这片区域里可能覆盖 0.7 个纹素、也可能覆盖 100 个纹素。取颜色的方式就是过滤策略。
3.1 最近邻(Nearest)
选择离 UV 中心最近的一个纹素。用途:像素艺术、需要看清像素边界的调试贴图、色板 LUT 查表(SDF 贴图除外)。问题:放大时马赛克明显、缩小时严重混叠(闪烁)。
3.2 双线性(Bilinear)
取 UV 周围最近的 4 个纹素,先在 方向做两次线性插值得到两个中间值,再在 方向做一次线性插值:
是 UV 在纹素单元格内的小数部分。硬件专门有电路做这个,4 次纹理读取 + 少量算术,可以视为免费。
c01 ────── c11
│ ╲(a,b) │
│ ╲ │
│ ╲ │
c00 ────── c10
结果 = c00·(1-a)(1-b) + c10·a(1-b) + c01·(1-a)b + c11·ab
用途:99% 的场景都够用。问题:放大到极致时会看到"每 4 个像素一个梯度矩形"的伪影,是双线性的模糊本性(C0 连续,一阶导不连续)。想更平滑用 bicubic,但硬件不直接支持,shader 里手动实现要 16 次采样。
3.3 缩小时的混叠灾难
真正的问题不在放大,而在缩小。想象一张 4096×4096 的纹理贴到屏幕上占 16×16 像素——每个屏幕像素覆盖 个纹素,而双线性只读 4 个。这远远不够,采样定理告诉我们高频信号被欠采样会产生混叠(aliasing)— —远处的地砖会闪烁、条纹图案会呈现出莫名的摩尔纹。
治本的做法是预先在多个尺度上平均——mipmap。
4. Mipmap:预积分的层级金字塔
Lance Williams 1983 年提出 mipmap ("mip" 来自拉丁语 multum in parvo——"多在少中")。为一张 的纹理生成 层的图像金字塔:第 0 层是原图,第 层是 缩小版,每个像素等于 原图对应 区域的平均。
Level 0: 1024×1024 (原图)
Level 1: 512×512
Level 2: 256×256
Level 3: 128×128
...
Level 10: 1×1 (整张图的平均色)
存储代价:1 + 1/4 + 1/16 + ... = 4/3 倍原图大小
用法:根据这个像素在纹理上覆盖的 footprint 大小选择合适层级 :
是屏幕空间 x 方向移动 1 像素时 UV 变化多少,GPU 用quad 差分(相邻 2×2 片段的差)硬件计算。 越大选越小(越模糊)的层。
4.1 三线性过滤(Trilinear)
一般不是整数。选相邻两层 和