English

KNOWLEDGE

픽셀 아트 가우시안 스플랫은 어떻게 만들까?

요즘 Fable 5.2로 만들었다는 픽셀 아트 3D 장면 영상이 퍼졌다. 어떻게, 왜 만들었을까?

3D 디자인하는 방법 중 하나다. 그 특성이 AI가 다루기 용이하다. 즉, 간단하고 구조적(패턴)이다.

직접 만들어 보기

섬 위의 꽃나무 하나를 네 단계로 만든다. 단계를 넘기고, 그림을 끌거나 ← → 키로 돌려 보자.

점 1,262개

1. 점 찍기

사람
도형을 합쳐 모양을 짓고, 점 사이 간격을 정한다.
프로그램
표면에 점을 고르게 찍는다.
원리
도형이 “표면까지 거리”를 알려 주어, 점을 표면으로 당길 수 있다.

2. 원판 깔기

사람
원판 크기를 정한다.
프로그램
점마다 납작한 원판(가우시안)을 표면에 눕힌다.
원리
원판은 옆에서 보면 선이라, 부풀지 않고 틈만 메운다.

3. 빛 굽기

사람
해의 방향과 쓸 색 몇 가지를 정한다.
프로그램
빛을 마주한 원판일수록 밝은 색을 칠한다.
원리
밝은 면과 어두운 면이 생겨 입체로 보인다.

4. 픽셀로 그리기

사람
그림 크기(120 × 120 픽셀)를 정한다.
프로그램
가까운 원판부터 칠하고, 가장자리를 잘라 키운다.
원리
흐림을 잘라야 정한 색만 남는다.

출처: 원판 두께(폭의 0.3배)는 ink studio의 상자·판 표면 값, 가장자리 자르기(투명도 0.5)는 crucible 이슈 1744, 화면에 비추고 가까운 것부터 칠하기는 3DGS 논문 4·6절을 따랐다. 화면의 숫자는 이 장면을 직접 그려 잰 값이다.

폴리곤과 견주면

3D 장면은 흔히 폴리곤(메시)으로 적는다. 폴리곤 파일은 꼭짓점과 그것을 잇는 면(이 글에서는 삼각형)의 목록이다. 같은 섬 위의 꽃나무를 두 방법으로 적으면:

견줄 것폴리곤 파일이 기법
장면을 적으면약 10만 7천 자974자
더 촘촘하게 하면약 4배로 는다그대로다
꽃을 키우려면꼭짓점 643개를 옮긴다숫자 다섯을 고친다

그래서 AI는 말로 받은 주문(“섬 하나, 줄기 하나, 꽃 공 다섯”)을 짧은 코드로 옮기고, 그려 보고 고치기 쉽다.

이 장면의 코드 전부 (974자)
function sdCyl(x, y, z, cx, cy, cz, r, hh) {
  const qx = Math.hypot(x - cx, z - cz) - r, qy = Math.abs(y - cy) - hh;
  return Math.min(Math.max(qx, qy), 0) + Math.hypot(Math.max(qx, 0), Math.max(qy, 0));
}
function sdSph(x, y, z, cx, cy, cz, r) { return Math.hypot(x - cx, y - cy, z - cz) - r; }
function smin(a, b, k) { const h = Math.max(k - Math.abs(a - b), 0) / k; return Math.min(a, b) - h * h * k * 0.25; }
function sdf(x, y, z) {
  const island = sdCyl(x, y, z, 0, -0.15, 0, 1.0, 0.15);
  const trunk = sdCyl(x, y, z, 0, 0.25, 0, 0.09, 0.25);
  let can = sdSph(x, y, z, 0, 0.8, 0, 0.38);
  can = smin(can, sdSph(x, y, z, 0.3, 0.66, 0.12, 0.26), 0.14);
  can = smin(can, sdSph(x, y, z, -0.28, 0.7, -0.12, 0.28), 0.14);
  can = smin(can, sdSph(x, y, z, 0.04, 0.64, -0.3, 0.23), 0.14);
  can = smin(can, sdSph(x, y, z, -0.06, 0.62, 0.3, 0.22), 0.14);
  let d = island; MAT = 0;
  if (trunk < d) { d = trunk; MAT = 1; }
  if (can < d) { d = can; MAT = 2; }
  return d;
}

출처: “흔히 폴리곤(메시)”은 3DGS 논문 1절(“Meshes and points are the most common 3D scene representations”). 글자 수와 꼭짓점 수는 이 장면을 직접 재었다. 폴리곤 파일은 같은 간격의 격자에서 뽑은 닫힌 면이다.

자주 묻는 질문

픽셀 아트 가우시안 스플랫은 무엇인가?

코드로 지은 도형의 표면에 납작한 원판 모양의 가우시안을 깔고, 색을 미리 칠한 뒤 낮은 해상도로 그린 3D 그림이다. 사진으로 학습하지 않는다. 이 글이 읽은 도구 넷(ink studio, pixelart-gaussiansplat, SyntaxSplat, crucible)이 모두 코드로 장면을 짓는다.

가우시안 스플래팅과 무엇이 다른가?

원래의 가우시안 스플래팅(Kerbl 외, 2023)은 여러 장의 사진으로 가우시안의 위치, 모양, 색을 학습한다. 픽셀 아트 스플랫은 그리는 방법은 같지만, 가우시안을 코드로 놓고 가장자리 흐림을 잘라 정한 색만 남긴다.

왜 AI가 만들기 쉬운가?

장면이 짧은 코드이기 때문이다. 이 글의 섬 위의 꽃나무는 코드 974자이고, 같은 장면의 폴리곤 파일은 약 10만 7천 자다. 꽃을 키우려면 코드의 숫자 다섯을 고치면 된다.

가장자리 흐림은 왜 잘라 내나?

흐림을 남기면 이웃 원판의 색이 섞여 팔레트에 없는 색이 생긴다. 이 글의 장면을 120 × 120 픽셀로 그리면 흐림을 남길 때 쓰인 색이 2,147가지, 잘라 낼 때 12가지다. crucible 이슈 1744도 같은 까닭으로 투명도 0.5에서 자른다.

더 보기