[연구]IBM, 자체 디자인 언어로 발표 자료 만드는 20B 모델 'Palette' 공개
IBM 리서치가 기업 고유의 디자인 언어를 학습해 슬라이드를 제작하는 20B 크기의 소형 오픈 모델 시스템 'Palette'를 공개했습니다. 사람의 작업 방식처럼 기획을 맡는 '디자이너'와 좌표 코드를 짜는 '코더' 역할을 분리하고 합성 데이터로 LoRA 파인튜닝을 진행해 대형 모델 수준의 성능을 달성했습니다.
전문 읽기접기
무슨 일이야
상용 프론티어 모델로 슬라이드를 만들면 전형적인 'AI 스타일'로 생성되거나 기업 고유의 템플릿을 벗어나는 문제가 잦습니다. 하지만 온프레미스에서 돌릴 만한 소형 오픈 모델은 텍스트가 화면 밖으로 넘치거나 요소가 겹치는 등 기하학적 레이아웃 계산에서 잦은 오류를 냅니다.
IBM 연구진은 사람의 제작 방식에서 힌트를 얻어 20B 모델 하나에 '디자이너'와 '코더' 역할을 나누는 단일 LoRA 어댑터를 학습시켰습니다. 디자이너 역할이 전체 스토리와 슬라이드별 형식을 기획하면, 코더 역할이 각 슬라이드의 구체적인 x·y 좌표와 폰트 크기 코드를 병렬로 작성해 속도를 6~7배 끌어올렸습니다.
연구진은 IBM 디자인 언어를 따르는 약 1,000개 덱(슬라이드 약 10,000장)의 합성 데이터를 구축해 학습에 썼습니다. 특히 단순히 완성된 코드만 학습한 것이 아니라 '표 대신 차트를 쓴 이유', '줄바꿈을 막기 위해 폰트를 줄인 이유' 같은 대안 검토 과정을 데이터에 포함했습니다. 평가 벤치마크인 PresentBench에서 Palette는 측정한 3개 영역 중 2개에서 1위를 기록했습니다.
왜 중요해
사내 보안 규정 때문에 발표 자료 초안을 외부 상용 AI API에 넣지 못하던 기업들에게 실질적인 대안을 제시합니다. 20B 수준의 소형 모델로도 역할 분리와 레이아웃 검증 파이프라인만 잘 갖추면 자체 인프라에서 고유 디자인 가이드를 지키는 프레젠테이션 생성이 가능함을 보여줬습니다.
짚고 넘어갈 점
입력 데이터에 없는 사실을 지어내는 환각 문제는 프롬프트 규칙만으로는 완벽히 제어하기 어려웠으며, 프롬프트에 참조용 예시 덱을 직접 넣어주는 방식으로 해결해야 했습니다. 또한 렌더링 후 겹침이나 넘침을 잡아내는 별도의 검증용 하네스가 함께 돌아가야 결과물의 완성도를 유지할 수 있습니다.
참고: Hugging Face
댓글 0
첫 댓글을 남겨보세요.