Fable 5.1, 약 2시간·800만 토큰·$33으로 Three.js 기반 샌프란시스코 Union Square 디지털 트윈 생성 주장

Fable 5.1이 인터랙티브한 Union Square 3D 세계를 만들고 그 안에서 투어 영상까지 찍었음. Powell에서 Stockton까지 걸을 수 있고 실제 상점 간판, 신호 교차로, 케이블카, Apple과 Nintendo 매장 내부도 넣었더라.

OSM과 USGS 3DEP 데이터를 썼다면 나도 그런 식으로 접근했을 듯함. Fable이 OSM을 Three.js 모델로 바꾸는 코드를 쓰게 하면 시간을 많이 아낄 수 있음.

이걸 '월드 모델'이라 부르는 건 내가 예상한 의미와는 다름.

월드 모델은 이제 뜻이 너무 많음. 내 기준은 세계를 시뮬레이션할 수 있느냐임.

NPC와 차량 로직이 레일 위에서 도는 건지 궁금함. 데모치고 NPC 밀도가 꽤 높아서 2 to 3분짜리 영상으로 보여주면 좋겠음.

시간, 비용, 실패한 시도 수, 중간 개입이 있었는지 같은 정보를 더 공개했으면 함. 결과물은 인상적인데 재현성을 판단할 정보가 부족함.

이건 긴 프롬프트 하나로 나온 결과였고, 서브에이전트와 자체 QA 루프를 명확히 지시했음. 약 2시간, 총 800만 토큰, API 비용 약 $33이 들었음.

이런 기술이면 실제 지리를 바탕으로 한 오픈월드 RPG나 Pokemon Go, Ingress 같은 AR 게임을 만들 수 있을 것 같음. 예전에는 실행하기 어렵던 아이디어였음.

우리는 실제 경제와 게임 설계가 있는 오픈월드 RPG를 몇 개 만들려 하고 있음. 이런 종류의 멀티모달 코딩 작업은 현 모델을 평가하기에도 좋은 과제임.

'AI가 만들었다'는 감탄 외에 이 결과물 자체가 왜 유용한지는 아직 모르겠음. 에이전트가 만든 소프트웨어가 그 기준을 넘은 사례를 못 봤음.

이 규모의 데이터 기반 CAD 작업은 보통 수천 시간의 수작업 모델링, 배치, 검수가 필요함. 취미 개발자도 Fusion 360에 주말 전체를 쓰지 않고 아이디어를 구현할 수 있다는 점이 내게는 의미 있음.

코드로 세계를 만들면 메시 생성의 토폴로지 문제는 꽤 피할 수 있음. Three.js나 Blender 스크립트가 프리미티브, CSG, 파라메트릭 구조로 형상을 만들기 때문에 토폴로지가 처음부터 정돈됨.

RTS 게임을 만들며 비슷한 방식을 써 봤는데 Opus 5도 이 정도는 가능하고 더 저렴했음. 다만 생성 모델은 단순 형상에도 폴리곤이 많아서, 저폴리 실루엣을 만들고 Meshy 등으로 창문과 문 디테일을 구운 텍스처에 넣는 편이 게임 자산에는 더 나았음.

충실도가 '로우폴리'를 조금 넘으면 Opus는 수렴하지 못하는 경우가 있음. 식물 L-system, 물리 기반 군중 애니메이션, 현실적인 가전이 있는 집처럼 복잡해지면 Fable은 오래 걸려도 추상화 수준을 오가며 작업함.

LLM은 기본적으로 Three.js 씬에 프리미티브를 빨리 쌓는 방식을 택함. 하지만 프롬프트를 주면 매니폴드를 연결하고 메셔로 조각하며 인스턴싱하는 식의 효율적인 아트 파이프라인도 만들 수 있음. 10분 안에 끝나지는 않음.

이런 결과물은 멋져 보여도 데모나 단순 게임 밖에서 쓸 수 있을지 모르겠음. 내 경험상 토폴로지가 엉망인 경우가 많고 텍스처링도 어려움.