RoboBrain 1.0

이해·계획 (VLM)발표일 2025.02가중치 공개 · Apache-2.0

베이징 즈위안 인공지능연구원(BAAI)의 로봇 조작용 통합 두뇌 모델 1세대로, 과제 계획·물체 어포던스·궤적 예측을 하나의 이해·계획 (VLM) 모델로 수행한다(CVPR 2025). ShareRobot 데이터와 함께 공개됐어요.

파라미터: 8공식
제어 빈도: —값 없음 (미공개이거나 아직 확인하지 못함)
적용 로봇: —
벤치마크 결과: 3건

공식 자료프로젝트 페이지 superrobobrain.github.io 논문 arxiv.org 코드 저장소 github.com 가중치 huggingface.co

무엇인가

이해·계획 (VLM) — Vision-Language Model. 영상과 말을 함께 이해해 장면을 해석하고 할 일을 계획하는 AI.
발표일 2025-02
가중치 공개 (Apache-2.0) — 내려받아 직접 실행·추가 학습할 수 있음
수록된 벤치마크 결과 3건
연결된 학습용 데이터셋 1개

확인된 정보

사양 9개 항목 중 4개에 값이 있음
공식 공식 4개: 구조, 입력, 파라미터 (B), 학습용 데이터셋
값 확인일 2025-02 – 2025-03 · 값마다 출처는 아래 '구조와 학습' 표

확인이 필요한 정보

수록된 로봇과의 연결 기록 없음 — 쓰이지 않는다는 뜻이 아니라 공개 자료에서 찾지 못했다는 뜻이에요
수록된 벤치마크 결과 3건이 모두 자체 발표 — 자체 발표 외 평가는 아직 수록되지 않았어요

어떤 모델인가

RoboBrain 1.0은 베이징 즈위안 인공지능연구원(BAAI)이 베이징대·중국과학원 등과 함께 2025년 2월 발표한 로봇 조작용 이해·계획 (VLM) 모델로, CVPR 2025에 채택됐다. SigLIP 비전 인코더와 Qwen2.5-7B-Instruct 언어 모델을 잇는 LLaVA 구조의 계획 모델이 지시를 하위 작업으로 나눈다. 여기에 물체에서 다룰 부위(어포던스)를 박스로 예측하는 A-LoRA와 말단장치의 2D 궤적을 예측하는 T-LoRA 모듈이 덧붙는다.

연구진은 Open X-Embodiment의 23개 데이터(로봇 12종)에서 뽑은 장면에 계획·어포던스·궤적 주석을 달고 사람이 검수해 학습용 데이터셋 ShareRobot(계획 QA 약 103만 개)을 만들었고, 이를 일반 멀티모달 데이터와 섞어 여러 단계로 학습했다. 연구진은 RoboVQA 계획 과제에서 GPT-4V 등을, AGD20K 어포던스 평가에서 Qwen2-VL 등을 앞섰다고 발표했으며, 검증은 실제 로봇 구동이 아닌 벤치마크와 시각화로 이뤄졌다. 계획·어포던스·궤적 체크포인트는 Apache-2.0 라이선스로 공개됐다.

회사 공식 페이지와 논문을 바탕으로 정리했어요. 성공률·최초 같은 표현은 회사 발표예요.

구조와 학습

공식보도루머추정— 값 없음

구조	LLaVA 구조 멀티모달 LLM(SigLIP so400m 비전 인코더 + 2층 MLP 프로젝터 + Qwen2.5-7B-Instruct) + 어포던스(A-LoRA)·궤적(T-LoRA) 예측용 LoRA 모듈공식
입력	이미지·다중 이미지·영상 + 언어 지시공식
파라미터 (B)	8공식
학습용 데이터셋	ShareRobot(Open X-Embodiment 기반 계획·어포던스·궤적 주석 데이터)공식

벤치마크 결과

결과 날짜 최신순 · 같은 벤치마크라도 세부 조건이 다르면 직접 비교할 수 없어요

벤치마크	세부 조건	점수	평가 구분	결과 날짜
RoboSpatial	RoboSpatial All (RoboBrain 2.0/2.5 보고서 평가)	51.53%	자체 발표	2025-07
VSI-Bench	VSI-Bench All (RoboBrain 2.0 보고서 평가)	31.12%	자체 발표	2025-07
Where2Place	Where2Place All (RoboBrain 2.0 보고서 평가)	53.04%	자체 발표	2025-07

학습용 데이터셋

Open X-Embodiment 구글 딥마인드

출처 6건

arxiv.org [1][2][3]
superrobobrain.github.io [1]
github.com [1]
huggingface.co [1]

한눈에 읽기