[모델]단 한 번의 데모로 새 작업을 배우는 로봇 파운데이션 모델, GEN-1.5 공개

무슨 일이야

Generalist AI가 로봇 파운데이션 모델 GEN-1.5를 선보였습니다. 이번 모델은 3~12초 길이의 센서모터 데이터 시연 하나만 입력하면 로봇이 새로운 물리적 작업을 수행하도록 설계되었습니다.

가장 큰 특징은 파인튜닝, 가중치(그라디언트) 업데이트, 태스크 전용 프로그래밍이 전혀 필요 없다는 점입니다. 30초 컨텍스트 윈도우 안에서 원샷 인컨텍스트(In-context) 프롬프팅 방식으로 구동됩니다.

연구팀에 따르면 서로 다른 10가지 로봇 조작 태스크를 대상으로 진행한 테스트에서, 이러한 원샷 인컨텍스트 프롬프팅을 통해 평균 59%의 성공률을 기록했습니다.

왜 중요해

기존 로봇 학습은 새로운 작업을 추가할 때마다 대규모 데이터셋을 구축해 모델을 파인튜닝하거나 별도의 코드를 작성해야 했습니다. GEN-1.5처럼 짧은 시연 데이터를 프롬프트처럼 넣어 즉각 동작을 유도할 수 있다면, 현장에서 로봇을 재배치하고 새로운 작업을 지시하는 비용이 크게 줄어들 수 있습니다.

참고: MarkTechPost