direct fun, deep study

끝없이 흐르는 비디오에서 특정 이벤트를 최소 비용으로 실시간 탐지하기 위한 파이프라인 단계별 비용 절감 핵심 논문 10편(2026.07 기준)을 해부한다. ①토큰 다이어트(TimeChat-Online·Dispider) → ②기억 관리(StreamingVLM·ReKV·LiveVLM·StreamMem·Flash-VStream) → ③트리거(VideoLLM-Online·StreamMind·StreamBridge)의 3단계로 정리하고, 직교 조합한 '2단 게이트 캐스케이드'로 종합. prefill·KV cache·attention sink 기초부터 쌓는 advanced 10챕터.

다양한 형태(wheeled·quadruped·humanoid)의 로봇을 하나의 mobility 정책으로 움직이는 cross-embodiment 문제를 완전 정복한다. NVIDIA COMPASS(arXiv:2502.16372)의 3단계 파이프라인 — Imitation Learning + Residual RL + Policy Distillation — 을 뼈대로, World Model 기반 navigation(X-Mobility), covariate shift, embodiment conditioning, generative policy의 averaging 문제, Sim-to-Real, 그리고 2026년 Navigation Foundation Model(NavFoM·GR00T)까지. 데이터 스케일링 vs 구조적 분리라는 두 패러다임을 insight 중심으로 다루는 연구자용 10챕터 커리큘럼.

2026년 7월 기준 NVIDIA가 Physical AI 분야를 어떻게 하나의 스택으로 만들어가는지 전체 그림을 그린다. Omniverse·OpenUSD·Isaac Sim·Isaac Lab·Cosmos의 history와 관계성 같은 기초부터, three computers 아키텍처, 합성 데이터 파이프라인(MobilityGen·GR00T-Dreams), GR00T foundation model 계보(N1→N1.7), 로봇 정책 워크플로우(COMPASS·HOVER), autonomous driving·산업 디지털 트윈, Jetson Thor 배치, GTC 2026 최전선(Cosmos 3·Newton 1.0)까지. NVIDIA 공식 다이어그램 다수 포함, 개념·아키텍처와 insight 중심의 13챕터 지도.