Black Forest Labs의 멀티모달 AI 모델 “FLUX 3”에서 파생된, 로봇 제어용 세계 행동 모델 “FLUX 3 Action”이 공개되었습니다.
FLUX 3 Action: 로봇 제어를 위한 7B World Action 모델 | Black Forest Labs https://bfl.ai/models/flux-3-action
FLUX 3 Action을 소개합니다. 로보랩 벤치마크에서 1위를 달성한 오픈 웨이트 7B World Action 모델입니다. 이전 최고 오픈 모델 대비 6.1%P의 성능 향상을 거두면서 파라미터 사용량은 56% 감소하고 최대 3.95배 더 빠른 속도로 실행됩니다. FLUX 3 Action은… pic.twitter.com/icynarumQk
세계 행동 모델(WAM：World Action Model)은, 영상 생성 모델을 이용하여 “무언가를 수행했을 때 현실 세계가 어떻게 변화하는지”에 대한 미래 예측을 수행하고, 역동학 모델(IDM：Inverse Dynamics Model)에 의해 목표하는 결과에 도달하기 위한 움직임을 생성합니다. 일반적인 로봇이라면, 카메라로 주변의 상황을 포착하여 단계적으로 대응하는 것인데, WAM은 동작을 수행하기 전에 미래에 대한 시뮬레이션을 수행할 수 있어, 시행 착오의 비용을 줄일 수 있습니다. 로봇의 동작 제어의 벤치마크로 사용되어지는 “Robolab-120”에서는, 지금까지 닫힌 모델의 “OASIS WAMNVIDIA”가 성공률 39.0%로 1위를 차지했으며, NVIDIA가 2026년 6월에 공개한 “Cosmos 3” 패밀리의 “Cosmos3-Nano”가 성공률 36.8%로 2위였습니다. NVIDIA는 고성능 이미지 생성 모델 및 영상 생성 모델을 포함하는 물리 AI 기반 모델 그룹 “Cosmos 3”를 공개했습니다. - GIGAZINE
하지만 이번에 Black Forest Labs에서 공개한 “FLUX 3 Action”은 Robolab-120에서 성공률 42.92%를 기록하여, 양측의 점수를 상회했습니다. FLUX 3 Action의 파라미터 수는 70억이며, Cosmos3-Nano의 120억에 비해 작은 규모에서 높은 점수를 달성했습니다. 또한, FLUX 3 Action은 Cosmos3-Nano와 비교하여 최대 3.95배 고속으로 동작한다고 합니다.
100달러(약 1만 5800원) 및 10분당 3개의 추론 부하 레벨의 기대 성공 수를 OpenAI의 “Astra”만, 로봇 제어 모델 π0.5+Astra, FLUX 3 Action+Astra의 3가지 모델로 비교했을 때, 어떠한 부하에서도 FLUX 3 Action+Astra 조합이 높은 성능을 발휘했습니다.
FLUX 3 Action은 자체 데모 데이터를 사용하여 특정 로봇 또는 작업에 맞는 정책을 생성할 수 있으며, Black Forest Labs는 NVIDIA와 공동으로 Hugging Face의 오픈 소스 로봇 플랫폼 “LeRobot”에 FLUX 3 Action을 네이티브하게 통합하고, 미세 조정용 레시피와 NVIDIA Jetson 상의 엣지 배포 기능도 탑재했다고 합니다. Black Forest Labs는 FLUX 3 Action에 대해 로봇 공학 외에도 게임 및 차량 제어, 컴퓨터 작동 등 모델이 시각적인 환경을 이해한 상태에서 다음 행동을 선택해야 하는 시뮬레이션 환경에서 작업에 특화된 정책을 학습시켜 유망한 결과를 얻고 있다고 설명하고 있습니다.
원문 보기 | 출처: Gigazine