Isomorphic Teleoperation(동형 원격 조작)과 HS-MoDP(휴머노이드 전문가 혼합 확산 정책)

TECH GLOSSARY & CONCEPT REPORT Tech News > 테크 용어·신조어

[테크 용어사전] "인간-로봇 기구학 차이를 일치시키고 모듈형 정책을 라우팅한다" — Isomorphic Teleoperation(동형 원격 조작)과 HS-MoDP(휴머노이드 전문가 혼합 확산 정책)

작성: Douglas Kim (시스템 아키텍트)

기준일: 2026.10.21

[Figure 1 (도표 1)] Isomorphic Teleoperation(동형 원격 조작)과 HS-MoDP(휴머노이드 전문가 혼합 확산 정책) 관련 아키텍처 개요

■ Executive Summary (용어 핵심 정의)

조종사가 착용하는 외골격 제어기의 관절 축과 링크 비율을 대상 휴머노이드 로봇의 기구학 구조와 1:1로 일치시켜 복잡한 역기구학 연산 오차를 줄이는 원격 조작 실험 방식입니다.

단일 신경망 대신 세부 조작 작업별 전문가 확산 헤드를 구성하고, 시각-언어 문맥에 따라 이를 라우팅하여 행동 궤적을 생성하는 HS-MoDP 정책 아키텍처를 결합했습니다.

2026년 10월 20일 발표된 학술 논문(arXiv:2610.26169 ↗)에서 Unitree G1 로봇의 양손 조작 실험을 위해 제안·검증된 공학적 개념입니다.

1. 인간-로봇 기구학적 차이와 단일 확산 정책의 용량 한계

개념 정의 및 등장 배경

피지컬 AI 분야에서 휴머노이드 로봇을 학습시키기 위한 시연(Demonstration) 데이터를 수집할 때, 기존에는 비접촉식 모션 캡처 장비나 VR(가상현실) 컨트롤러를 주로 활용했습니다. 그러나 인간 신체와 로봇 관절의 길이 비율 및 가동 범위 차이로 인해, 수학적인 Inverse Kinematics(역기구학) 계산 과정에서 특이점(Singularity)이 발생하거나 로봇 관절 한계를 벗어난 비정상 토크 명령이 도출되는 한계가 있었습니다.
동시에 로봇 제어 정책 학습 측면에서도 단일 Diffusion Policy(확산 정책) 신경망에 상이한 조작 작업들을 모두 학습시킬 경우, 작업 궤적 간섭으로 인한 Negative Transfer(부정적 전이)가 발생하여 정책의 성공률이 낮아지는 문제가 연구진에 의해 지적되었습니다.

2. 관절 1:1 기구학 일치와 모듈형 전문가 라우팅 메커니즘

핵심 메커니즘 및 시스템 아키텍처

해당 논문(arXiv:2610.26169 ↗)의 저자들은 이러한 제약 조건을 완화하기 위해 하드웨어 제어와 신경망 아키텍처를 결합한 두 가지 기술적 접근을 제안했습니다.

■ 1. Joint-to-Joint Isomorphic Kinematics (관절 대 관절 동형 기구학)

•

인간 조종자가 착용하는 외골격의 링크 길이와 관절 회전 축 배치를 대상 로봇(Unitree G1)의 상체 골격과 기하학적으로 일치시킵니다.

•

별도의 복잡한 좌표 변환 연산 없이 조종사의 관절 각도 변화가 로봇의 모터 액추에이터로 직접 전달되도록 구성하여, 제어 지연 시간을 줄이고 기구학적 오차로 인한 궤적 왜곡을 줄입니다.

■ 2. HS-MoDP: Semantic Routing of Expert Heads (전문가 헤드의 의미론적 라우팅)

•

단일 정책 대신 'Grasp(물체 집기)', 'Turn(회전 조작)', 'Move(궤적 이동)' 등 단위 물리 조작별로 독립된 Expert Diffusion Head(전문가 확산 헤드)들을 분할 학습합니다.

•

상위 VLM(비전-언어 모델)이 현재 작업 환경의 시각적 문맥을 해석하여, 각 시점마다 필요한 전문가 헤드에 소프트맥스 가중치를 배정하고 궤적 노이즈를 제거(Denoising)합니다.

■ 3. Modular Compositionality (모듈형 스킬 결합)

•

복합 조작 작업을 구성할 때 기존에 학습된 개별 전문가 헤드들을 라우팅 가중치 조율을 통해 순차 또는 병렬로 결합하여 다단계 행동 궤적을 도출합니다.

3. 외골격 하드웨어 의존성과 스킬 라우팅의 공학적 고려사항

유사 기술 비교 및 산업 적용 사례

해당 연구에서 제시된 개념과 실험 결과는 휴머노이드 데이터 수집 및 제어 연구에 다음과 같은 시사점과 현실적 제약을 보여줍니다.

1.

시연 데이터 수집 파이프라인의 간소화: 고가의 광학식 모션 캡처 룸 설비 없이도 대상 로봇에 맞춘 외골격을 통해 직접적인 관절 궤적 데이터를 수집할 수 있음을 실험적으로 보였습니다.

2.

하드웨어 종속성과 확장성 한계: Isomorphic(동형) 방식의 특성상 로봇의 형태나 링크 길이가 달라지면 외골격 장비 또한 해당 하드웨어 규격에 맞춰 물리적으로 재설계·제작해야 하므로 범용 제어 인터페이스로서의 한계가 존재합니다.

3.

전문가 라우팅 조율 비용: 복수의 확산 헤드를 운용함에 따라 단일 모델 대비 메모리 점유율이 늘어나며, 헤드 간 전환 시점에서 제어 명령의 급격한 변동을 방지하기 위한 추가적인 스무딩(Smoothing) 엔지니어링이 요구됩니다.

4. 아키텍트 종합 분석 및 실무 제언

시스템 아키텍트 실무 가이드 및 제언

로보틱스 연구진의 관점에서 Isomorphic Teleoperation과 HS-MoDP는 휴머노이드 로봇의 형태적 제약을 극복하기 위해 제어 장비와 신경망을 특정 로봇 플랫폼에 맞춰 최적화한 실용적 연구 접근법입니다. 업계의 공통 표준이라기보다는, 현재 로봇 조작 연구에서 빈번히 마주치는 기구학적 왜곡과 단일 정책 신경망의 용량 한계를 해결하기 위해 제안된 구체적 실험 사례로 해석하는 것이 타당합니다.

■ Reference Glossary (핵심 연계 기술 용어 참조 해설)

•

Isomorphic Teleoperation (동형 원격 조작): 제어 인터페이스(외골격)와 대상 로봇 하드웨어의 관절 배치 및 링크 기하학을 1:1로 일치시켜 복잡한 좌표 변환 연산 없이 모션을 직관적으로 복제·수집하는 로봇 제어 방식입니다.

•

HS-MoDP (Humanoid Semantic Mixture-of-Experts Diffusion Policy): 다양한 세부 물리 조작 스킬들을 복수의 전문가 확산 신경망으로 분할 학습하고, 시각-언어 문맥에 따라 최적의 전문가를 실시간 합성하여 다단계 행동을 생성하는 로봇 정책 아키텍처입니다.

•

Negative Transfer (부정적 전이): 단일 신경망 모델에 지나치게 이질적이거나 상충되는 복수의 작업 데이터를 동시에 학습시킬 때, 한 작업의 최적화 과정이 다른 작업의 성능을 방해하여 전체 성능이 저하되는 기계학습 현상입니다.

■ 참고 문헌 및 자료 출처 (Reference & Source)

원천 기술 백서: arXiv:2610.26169 / Physical AI Foundation | https://arxiv.org/abs/2610.26169 ↗