💻 computer science

Texel Splatting: Perspective-Stable 3D Pixel Art

이 논문은 카메라 이동 시 픽셀의 불안정성을 해결하기 위해 고정된 지점의 큐브맵 렌더링과 월드스페이스 쿼드 스플래팅을 결합하여 회전 및 병진 불변성을 갖는 3D 픽셀 아트 렌더링 기법인 '텍셀 스플래팅'을 제안합니다.

원저자: Dylan Ebert

게시일 2026-03-17

📖 3 분 읽기☕ 가벼운 읽기

CC BY 4.0

원저자: Dylan Ebert

원본 논문은 CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) 라이선스로 제공됩니다. ✨ 이것은 아래 논문에 대한 AI 생성 설명입니다. 저자가 작성하거나 승인한 것이 아닙니다. 기술적 정확성을 위해서는 원본 논문을 참조하세요. 전체 면책 조항 읽기

1. 문제점: 왜 3D 픽셀 아트는 떨릴까? (비유: 흔들리는 카메라)

일반적인 3D 게임이나 픽셀 아트 게임에서 카메라가 움직일 때, 화면의 픽셀들이 덜덜 떨리는 현상 (Shimmering) 이 발생합니다.

비유: imagine you are looking at a city through a window. If you move the window slightly, the buildings far away shift a tiny bit, but the buildings close to you shift a lot.
- 한국어 비유: 창문 밖을 바라보는데, 창문을 살짝 움직여 보세요. 멀리 있는 산은 거의 안 움직이지만, 바로 앞의 나무는 크게 움직입니다.
문제: 픽셀 아트는 "모든 픽셀이 딱딱 고정되어야 한다"는 규칙이 있습니다. 하지만 3D 공간에서는 카메라가 움직일 때 가까운 물체와 먼 물체가 화면에서 움직이는 양이 달라서, 하나의 규칙으로 모든 것을 고정할 수 없습니다. 그래서 픽셀들이 덜덜 떨리게 됩니다.

2. 해결책: 텍셀 스플래팅이란? (비유: 고정된 카메라와 투명한 스티커)

이 기술은 카메라가 움직이는 방식 자체를 바꿉니다.

A. 고정된 관측소 (Probe)

기존 방식처럼 카메라가 직접 장면을 찍는 게 아니라, 세상 한가운데에 '고정된 관측소 (Probe)'를 하나 세워둡니다.

비유: 마치 거대한 공을 세상에 던져두고, 그 공 안에서 360 도 모든 방향을 한 번에 찍어두는 겁니다. 카메라가 움직여도 이 '공 (관측소)'은 제자리에 있습니다.
효과: 카메라가 움직여도 관측소는 움직이지 않으므로, 찍힌 사진 (큐브맵) 안의 픽셀들은 절대 흔들리지 않습니다.

B. 스티커 붙이기 (Splatting)

이제 이 고정된 관측소에서 찍은 사진을 화면에 보여줄 때, 그냥 평면으로 보여주는 게 아니라 각 픽셀을 3D 공간에 딱딱 붙은 '스티커 (쿼드)'처럼 처리합니다.

비유: 벽에 붙은 스티커를 생각해보세요. 당신이 스티커가 붙은 벽을 빙글빙글 돌거나 (회전), 옆으로 걸어가도 (이동), 그 스티커는 벽에 단단히 붙어있어서 절대 떨어지거나 흔들리지 않습니다.
기술적 의미: 픽셀 하나하나가 3D 공간에 고정된 사각형으로 변환되어 화면에 그려지기 때문에, 카메라가 어떻게 움직여도 픽셀의 위치가 안정적입니다.

3. 두 가지 중요한 규칙 (비유: 자석과 격자)

이 기술이 흔들리지 않는 이유는 두 가지 규칙을 따르기 때문입니다.

회전 불변성 (Rotation Invariance):
- 관측소에서 찍은 사진은 '방향'으로 저장됩니다. 카메라가 빙글빙글 돌아도, 사진 속 픽셀들은 방향만 바뀔 뿐 위치는 그대로 유지됩니다.
- 비유: 나침반을 들고 돌아서도 북쪽은 항상 북쪽인 것과 같습니다.
이동 불변성 (Translation Invariance):
- 카메라가 움직일 때, 관측소의 위치를 세상의 격자 (Grid) 위에 딱 맞춰서 둡니다.
- 비유: 당신이 방을 돌아다닐 때, 발걸음이 1 미터 단위로만 움직이게 제한한다고 상상해보세요. 1 미터 안에서는 관측소 위치가 바뀌지 않으므로, 화면은 완전히 고정됩니다. 1 미터 경계를 넘어서면 관측소가 '뚝' 하고 다음 격자로 이동하며 화면을 부드럽게 넘겨줍니다.

4. 한계점: 보이지 않는 곳 (비유: 등산객의 시야)

이 기술에도 약점이 있습니다.

문제: 고정된 관측소는 그 자리에서 볼 수 있는 것만 찍습니다. 카메라가 관측소 위치에서 너무 멀어지면, 관측소 뒤에 숨겨진 물체 (예: 벽 뒤의 나무) 가 카메라에는 보이지만 관측소에는 안 보입니다.
해결: 이때는 카메라 바로 앞에 **'이동하는 보조 관측소 (Eye Probe)'**를 하나 더 둡니다. 이 보조 관측소는 카메라와 같이 움직여서 보이지 않는 부분을 채워줍니다.
결과: 고정된 관측소가 본 부분은 흔들리지 않고 선명하고, 보조 관측소가 본 부분은 아주 살짝 떨릴 수 있지만, 전체적으로는 매우 안정적인 픽셀 아트를 보여줍니다.

5. 요약: 왜 이 기술이 특별한가?

기존 방식: 카메라를 격자에 맞춰서 움직이게 하거나, 화면을 자꾸 수정해야 해서 복잡하고 무거웠습니다.
텍셀 스플래팅: **"세상에 고정된 카메라로 사진을 찍고, 그 사진을 3D 스티커처럼 붙여놓는다"**는 단순하지만 강력한 아이디어로, 카메라가 어떻게 움직여도 픽셀이 절대 떨리지 않는 완벽한 3D 픽셀 아트를 구현했습니다.

한 줄 결론:

"카메라가 움직일 때마다 픽셀이 덜덜 떨리는 3D 픽셀 아트의 고질병을, **'세상에 고정된 카메라로 찍은 사진을 3D 스티커처럼 붙이는 방식'**으로 완벽하게 해결한 기술입니다."

논문 요약: Texel Splatting (텍셀 스플래팅)

1. 문제 정의 (Problem)

기존의 3D 픽셀 아트 렌더링 기법은 카메라가 이동할 때 픽셀이 흔들리지 않고 안정적으로 유지되어야 한다는 요구사항을 충족하기 위해, 카메라를 격자 (Grid) 에 맞춰 스냅 (Snap) 하는 방식을 사용했습니다.

정사영 (Orthographic Projection) 의 한계: 정사영에서는 깊이와 관계없이 동일한 월드 공간 오프셋이 동일한 화면 공간 변위를 발생시킵니다. 따라서 카메라를 격자에 스냅하면 모든 픽셀이 균일하게 보정되어 픽셀이 고정됩니다.
원근법 (Perspective Projection) 의 문제: 원근법에서는 깊이에 따라 동일한 월드 공간 이동이 화면에서 다른 크기의 변위를 발생시킵니다 (가까운 물체는 더 크게, 먼 물체는 더 작게 이동). 이로 인해 단일 격자 스냅으로 모든 깊이의 픽셀을 동시에 보정할 수 없으며, "픽셀 크리프 (Pixel Creep)"나 "셔미링 (Shimmer)"이라고 불리는 픽셀의 흔들림 현상이 발생합니다. 기존 화면 공간 (Screen-space) 보정 기법으로는 이 문제를 해결할 수 없습니다.

2. 방법론 (Methodology)

저자는 "텍셀 스플래팅 (Texel Splatting)"이라는 새로운 렌더링 파이프라인을 제안합니다. 이 기법은 카메라 이동과 무관하게 픽셀이 안정적으로 유지되도록 설계되었습니다.

핵심 아이디어:
- 고정된 프로브 (Probe) 원점: 카메라가 아닌 월드 공간의 고정된 격자 점 (Probe Origin) 을 기준으로 씬을 렌더링합니다.
- 큐브맵 (Cubemap) 파라미터화: 씬 기하학을 이 고정된 원점에서 큐브맵으로 래스터화합니다. 큐브맵은 화면 위치가 아닌 '방향'으로 인덱싱되므로 **회전 불변성 (Rotation Invariance)**을 가집니다.
- 격자 스냅 원점: 프로브 원점을 월드 격자 꼭짓점에 스냅하여 **이동 불변성 (Translation Invariance)**을 확보합니다.
렌더링 파이프라인 (3 단계):
1. 큐브맵 캡처 (Cubemap Capture): 고정된 프로브 원점에서 씬 기하학 (위치, 법선, 재질, 객체 ID 등) 을 큐브맵으로 렌더링합니다.
2. 셰이딩 (Shading): 컴퓨트 패스를 통해 큐브맵의 각 텍셀 (Texel) 단위로 조명과 그림자를 계산합니다.
  - 조명 계산은 화면 공간이 아닌 큐브맵 공간에서 수행되므로 카메라에 독립적입니다.
  - OKLab 색공간을 이용한 포스터라이제이션 (Posterization) 으로 평면적인 색조 단계를 생성하고, 객체 ID 및 법선 불연속성을 감지하여 윤곽선 (Outlines) 을 추가합니다.
3. 스플래팅 (Splatting): 가시적인 큐브맵 텍셀 하나하나를 화면에 **월드 공간 쿼드 (World-space Quad)**로 투사합니다.
  - 각 텍셀은 원점으로부터의 거리 (깊이 $d$ ) 를 저장하며, 이를 기반으로 쿼드의 4 개의 꼭짓점 위치를 계산합니다.
  - 인접 텍셀 간의 간극을 메우기 위해 쿼드를 확장하되, 깊이 차이가 큰 곳에서는 자유롭게 확장하고 깊이 차이가 작은 곳에서는 Z-파이트를 방지하기 위해 확장 범위를 제한합니다.
디오클루전 (Disocclusion) 처리:
- 고정된 프로브 원점에서는 가려진 (Occluded) 기하학을 볼 수 없습니다. 카메라가 프로브에서 멀어지면 새로운 영역이 드러나는데, 이를 해결하기 위해 3 개의 프로브를 관리합니다.
  1. 그리드 프로브: 격자에 스냅된 안정된 원점 (주요 렌더링).
  2. 이전 프로브 (Previous Probe): 격자 변경 시 이전 셀의 데이터를 보유.
  3. 아이 프로브 (Eye Probe): 카메라 위치에 있는 프로브로, 그리드 프로브가 볼 수 없는 가려진 영역을 채웁니다. (이 프로브는 흔들림이 발생할 수 있으나, 가시 영역이 제한적이므로 영향이 최소화됨).
- 격자 셀 경계를 넘을 때 4x4 베이어 디더링 (Bayer dithering) 패턴을 사용하여 두 그리드 프로브 간의 교차 페이드 (Crossfade) 를 수행합니다.

3. 주요 기여 (Key Contributions)

원근법 하의 픽셀 안정성: 화면 공간 보정 없이도 원근법 투영 하에서 카메라 이동 시 픽셀이 흔들리지 않는 3D 픽셀 아트 렌더링을 최초로 구현했습니다.
회전 및 이동 불변성: 큐브맵 파라미터화와 격자 스냅된 원점 설계를 통해 카메라의 회전과 이동에 관계없이 텍셀 할당이 일관되게 유지됩니다.
효율적인 아키텍처: 카메라 독립적인 셰이딩을 통해 프레임 간 캐싱이 가능하며, 모바일 기기에서도 실시간 성능을 달성했습니다.

4. 결과 (Results)

성능: iPhone 15 (A16 GPU) 에서 40fps, RTX 4090 에서 프레임당 4ms 미만으로 렌더링되었습니다. (면당 3842 텍셀 해상도 기준).
시각적 품질: 픽셀 아트의 미학적 요구사항 (낮은 해상도, 평면적인 색조) 을 충족하면서도 3D 씬의 깊이감과 원근감을 자연스럽게 표현했습니다.
제한 사항: 고정된 프로브 원점의 시야각 제한으로 인한 **디오클루전 (Disocclusion)**이 주요 한계점입니다. 카메라가 프로브에서 멀어질수록 가려졌던 영역이 드러나는데, 이때는 불안정한 '아이 프로브'가 개입하여 일부 흔들림이 발생할 수 있습니다.

5. 의의 (Significance)

이 논문은 3D 픽셀 아트 분야에서 오랫동안 해결되지 않았던 "원근법 하의 픽셀 안정성" 문제를 근본적으로 해결했습니다. 기존에 정사영 모드에서만 가능했던 안정적인 픽셀 아트를 원근법 카메라에서도 구현 가능하게 함으로써, 3D 게임 및 인터랙티브 미디어에서 픽셀 아트 스타일의 표현 범위를 크게 확장했습니다. 또한, 큐브맵 기반의 렌더링과 월드 공간 쿼드 스플래팅을 결합한 새로운 아키텍처는 향후 저전력 모바일 환경에서의 고품질 스타일라이즈드 렌더링 기법으로 중요한 시사점을 제공합니다.