Figma, 디자인 편집 특화 모델 학습 공개: 25만 예시 SFT에서 강화학습으로
- Figma가 25만 개 이상 예시로 Llama 3.3 70B를 지도 미세조정(SFT)해 당시 최상위 모델과 견줄 편집 성능을 냈음
- 디자인을 Figma 네이티브 파일 포맷으로 표현해 모델이 캔버스에 되돌려 적용할 수 있는 변경을 생성하도록 학습함
- 교사 모델이 편집을 시도하면 결정론적 검증기와 비주얼 모델 판정이 후보를 걸러내고, 파이프라인이 평가 피드백으로 스스로 수정함
- SFT만으로는 일반화 손실과 샘플 비효율이 커서 Qwen, Muse Spark Open, Inkling 등 최신 베이스 모델에 강화학습(RL)을 조합하는 방식으로 옮겨감
- 평가 기준은 Figma 작업 수행, 지시 준수, 유용한 변경뿐 아니라 편집의 속도와 비용까지 포함함
Hacker News 의견들
진짜 주권 원하면 nemotron 써야지. 세일즈포스나 서비스나우처럼 세금 뜯기는 짓 그만두고.
Bitter lesson 학습했다고 3... 2... Dylan Field가 Llama 70B로 잘 해냈다더니, AI 학습판은 진짜 뱀굴임. 그래도 돈은 태울 만큼 있으니까.
Bitter lesson 잘못 이해한 듯. '프런티어 LLM이 항상 낫다'가 아니라 '컴퓨팅과 데이터로 확장되는 알고리즘이 인간 이해 기반 알고리즘을 결국 앞선다'는 얘기임. 오픈소스 LLM을 RL로 특정 과제에 파인튜닝하는 건 bitter lesson에 전혀 안 어긋남.
전 피그마 직원인데, 이 블로그가 Canva가 Brush 발표한 날 나왔음. Brush가 이 분야에선 더 앞서 보임. 피그마는 세계 최고 수준 UI 데이터셋을 갖고도 그냥 썩히고 있었음. LLM 편집 모델뿐 아니라 이미지 모델도 같이 봐야 한다고 봄.
몇 년째인데 피그마가 내놓은 최고 성과가 예정된 발표의 예고임. 다른 사람 말마따나 피그마 MCP도 형편없고.
Canva 디자이너들은 뭘 해도 과하게 익혀서 취향이 없음. 장기적으로는 피그마가 쉽게 이김. 오픈소스 Artcraft 계열(Figcraft 포함)은 UI에 1:1로 대응하는 헤드리스 명령 계층이 있어서 VPS에서 통째로 돌리고 기존 AI 구독 붙일 수 있음.
GPT나 Claude, Gemini 직접 쓰는 것보다 이걸 왜 써야 하는지 모르겠음. 텍스트 겹침 막겠다고 VLM을 통째로 학습하는 건 과함. 요즘 비전 모델은 실수도 드물고 실수해도 5분이면 고침.
프로덕트 디자이너인데, 내 주변에선 피그마 AI 제품 거의 안 씀. 내 시간 80%는 Claude Code와 Design에 쓰고 20%만 피그마에서 수동 작업함. 피그마 현재 AI 에이전트는 거의 무용하고, 이 글이 효과가 있든 없든 디자이너는 이미 다른 데로 떠났다고 봄.
피그마 MCP는 진짜 못 씀. 호출한 AI가 자바스크립트를 작성해서 디자인을 구현하게 하는 수준임.
피그마, 어도비, 캔바는 거대한 편집 모델을 기존 엔터프라이즈 고객에게 라이선스하고 있음. 토큰을 팔고 선불 대형 계약금을 받는 구조인데, 시장은 아직 SaaSpocalypse에 묶여 이 전환을 못 보고 있음. 소비자 제품은 곁다리임.
피그마 토큰 비용은 예전 회사에서도 불만이 컸음. Cursor 크레딧을 월 750달러씩 주는 회사에서도 그랬음. Claude Design과 좌석당 훨씬 싸고 BYOM이 되는 툴이 경쟁 상대라, 리드가 절감액을 보여주면 엔터프라이즈가 갈아탈 수도 있음.
기존 모델보다 좀 더 창의적일지 궁금함. Opus 5.5든 뭐든 깔끔하고 일관되지만 영혼 없는 디자인을 잘 만들어서 짜증남. 템플릿 밖으로 나가려면 반복과 준비가 엄청 필요함.
피그마에서 에이전트를 쓰려면 꼭 피그마 전용으로 학습된 에이전트여야 하고 내가 원하는 에이전트는 못 쓴다는 게 큰 약점 같음. 똑똑한 경쟁자가 파고들 만함. API 호출도 세게 조여서 통합 제품들이 골치 아파함.
피그마가 Claude Design이나 다른 LLM 기반 디자인 툴보다 2년 뒤에도 살아남을 수 있을지 의문임.
피그마는 이미 배가 떠났음. 코딩 에이전트로 직접 프로토타이핑하는 게 더 쉽고 빠르고 좋음.