로봇 움직이기 101 (3/3)
VLA·세계 모델·에이전트로 확장하는 로봇 지능
로봇 파운데이션 데이터에서 VLA·세계 모델·에이전트와 검증된 실제 적용까지 잇는 연구급 실전 안내서 — 3부 9장
First published: 2026-07-16 | Last updated: 2026-07-16
세 권을 잇는 실행 계약
자연어 의도에서 기술 제안·실행 가능성 투영·실시간 제어·독립 안전 권한까지 책임을 연결한다.
VLA에서 세계 모델·에이전트까지
데이터와 행동 표현, 적응, 언어 연결, 예측, 장기 계획과 기술 API를 같은 축으로 비교한다.
범용성보다 검증 가능성
오염·실패·지연·복구·운영 비용을 분리해 측정하고 제한된 실제 적용과 되돌리기 관문을 만든다.
제1부: 로봇 파운데이션 모델의 재료와 구조를 이해한다
상위 지능은 어디에 연결되는가 — 세 권을 잇는 과제·기술·제어 계약
S11의 셀과 S12의 실행 기반 위에서 VLA·세계 모델·에이전트가 제안할 수 있는 범위와 독립 안전 권한을 고정한다.
→ 02무엇으로 사전학습하는가 — 로봇 데이터, 서로 다른 로봇 형태와 행동 표현
로봇·영상·언어·합성 자료와 연속 행동·묶음·토큰·잠재 행동·기술 호출을 출처와 형태 변환 관점에서 비교한다.
→ 03VLA는 어떻게 행동을 만드는가 — 모델 계열, 학습 목적과 정책 머리
다중양식 결합과 행동 머리의 구조를 입력·출력·시간 지평선·폐루프 실행·실제 로봇 근거의 동일 축으로 합성한다.
→제2부: 새 로봇·새 과제·긴 지평선에 적응한다
새 로봇과 과제에 어떻게 맞추는가 — 미세조정, 행동 머리와 형태 적응
전체·부분 미세조정, 어댑터, 새 행동 머리, 증류와 검색 보완을 구분하고 되돌릴 수 있는 적응 영수증을 만든다.
→ 05언어와 장면을 행동에 연결한다 — 열린 어휘, 공간 이해와 기술 선택
지시를 과제 제약·목표 상태·기술 전제 조건으로 바꾸고 모호성·충돌·보이지 않는 상태를 거부 시험으로 다룬다.
→ 06미래를 예측해 계획하는가 — 세계 모델, 영상·행동 예측과 정책 결합
잠재 동역학·영상·행동·보상·불확실성 예측을 구분하고 모델 예측을 검증할 후보로만 승격하는 관문을 설계한다.
→제3부: 에이전트로 확장하되 검증 가능성을 잃지 않는다
로봇 에이전트는 무엇을 맡는가 — 계획, 메모리, 도구와 기술 API
장기 과제 분해·기술 호출·메모리·도구·코드 생성·사람 승인을 별도 권한으로 나누고 실패·복구 상태 기계를 만든다.
→ 08범용성을 어떻게 믿을 것인가 — 평가, 오염, 실패, 안전과 운영
일반화 범위를 분리하고 개입·안전하지 않은 제안·거부·지연·회복·분포 변화·원격 운영을 독립 평가 카드에 기록한다.
→ 09세 권을 하나의 로봇 시스템으로 완성한다 — 지시에서 검증된 실행까지
탁상형 조립에서 고전 기준선·S12 정책·VLA·선택적 세계 모델·에이전트를 고정된 실행·평가·안전 계약 아래 단계별로 비교한다.
→