Semcam Live는 휴머노이드 로봇, 체화 지능, 모방 학습, 원격 조작, Sim2Real 연구를 위해 마커리스 인체 시범 동작 수집, Goku 강체 6DoF 추적, Active Center 로컬 동기화, 다중 형식 데이터 출력을 제공합니다. 연구팀은 같은 좌표계와 같은 타임라인에서 사람, 로봇, 도구, 소품, 실험 대상 데이터를 수집할 수 있습니다.
로봇 팀에 필요한 것은 한 번의 인체 스켈레톤 인식 결과가 아니라 안정적이고 검토 가능하며 보정되고 훈련 도구에 연결 가능한 데이터 파이프라인입니다. Semcam Live는 엣지 AI 카메라 배열로 자연스러운 인체 동작을 수집하고 로컬에서 3D 재구성, 스켈레톤 해석, 손 동작, 루트 궤적, 관절각, retarget 데이터를 출력합니다. Goku 광학 시스템은 로봇 말단, 도구, 소품, 실험 대상의 6DoF 자세를 동기 추적할 수 있습니다. 두 시스템은 Active Center에서 프로젝트, 좌표계, 타임라인을 공유해 인간 시범, 로봇 상태, 장면 객체를 장기적으로 축적 가능한 데이터 자산으로 구성합니다.
사람의 걷기, 회전, 잡기, 운반, 조립, 도구 조작, 양손 협업 등의 시범 동작을 수집하고 훈련 절차에 투입할 수 있는 인체 스켈레톤, 관절각, 손 동작, 목표 자세 데이터를 출력합니다.
실시간 마커리스 동작 데이터로 로봇, 디지털 트윈, 시뮬레이션 캐릭터를 구동해 원격 제어, 동작 리허설, 작업 재현에서 동작 체인을 빠르게 검증할 수 있습니다.
같은 공간에서 사람의 동작, 로봇 말단, 도구, 실험 대상을 기록해 협업 작업, 회피 전략, 공간 행동, 상호작용 타이밍의 정량 분석을 지원합니다.
Goku 광학 강체 추적으로 도구, 소품, 지그, 말단 실행기, 이동 플랫폼, 기타 강체 대상의 6DoF 자세를 기록해 마커리스 인체 캡처만으로 안정적으로 표현하기 어려운 물체 상태를 보완합니다.
인체 동작, 로봇 자세, 장면 객체 데이터를 MuJoCo, Isaac, ROS, Unity 또는 자체 시뮬레이션 시스템으로 가져와 좌표 변환, IK 검증, 정책 재생, 실제 실험 비교에 활용합니다.
로봇, 인공지능, 인간-컴퓨터 상호작용, 운동 제어, 디지털 트윈 수업에 적합하며 학생은 복잡한 착용 장비 없이 시범 수집, 데이터 해석, 리타게팅, 시뮬레이션 검증을 수행할 수 있습니다.
시범자는 모션 캡처 슈트나 마커 없이 걷기, 달리기, 회전, 잡기, 운반, 도구 조작, 양손 협업 등의 동작을 수행할 수 있어 수집 준비 비용과 동작 간섭을 줄입니다.
Semcam Live는 인체 동작을 캡처하고 Goku는 로봇 말단, 도구, 소품, 실험 대상 및 기타 강체 객체를 추적하여 사람, 로봇, 물체를 하나의 데이터 체인에 넣습니다.
Active Center는 Semcam Live AI 카메라와 Goku 광학 카메라를 통합 관리하여 인체 동작, 강체 자세, 외부 장치 데이터를 하나의 프로젝트에서 동기화, 보정, 기록, 재생합니다.
스켈레톤, 루트 궤적, 관절각, 손 동작, retarget 후 목표 자세, 강체 6DoF 데이터를 출력해 모방 학습, 원격 조작, 데이터셋 구축, 정책 검증 절차에 연결하기 쉽습니다.
120fps 실시간 링크는 현장 프리뷰, 수집 확인, 원격 조작 검증, 온라인 시스템 디버깅에 사용되며 HPE 고정밀 해석 확장은 캡처 후 더 높은 품질의 훈련 데이터를 생성할 수 있습니다.
동작 수집, 재구성, 기록, 프로젝트 관리, 데이터 출력을 모두 로컬에서 수행할 수 있으며 ROS, C++, Python, MATLAB, MuJoCo, Isaac 등의 인터페이스와 워크플로를 지원합니다.
로봇 데이터 수집에서 Semcam Live의 가치는 단일 영상을 오프라인으로 자세 추정하는 데 있지 않습니다. 동기화된 다중 카메라, 엣지 AI, 정밀 보정, 로컬 3D 재구성으로 안정적인 데이터 체인을 형성합니다. 카메라 단에서 복잡한 이미지 특징을 처리하고 중앙 시스템은 구조화 데이터를 받아 카메라 간 융합, 삼각측량, 스켈레톤 해석, IK, 필터링, retarget을 수행합니다. 따라서 대량의 원본 비디오 스트림을 지속적으로 서버로 보낼 필요가 없고, 더 큰 실험 공간에 다중 카메라 매트릭스를 배치하기에 적합합니다.
순수 게임패드 원격 조작, 웨어러블 장비, 전통적인 광학 마커 방식은 로봇 연구개발에서 여전히 가치가 있지만 착용 부담, 동작 제한, 마커 준비 또는 강체 객체 데이터와 인체 데이터의 분리를 가져오는 경우가 많습니다. Semcam Live는 인간 시범 수집의 장벽을 낮추고 Goku 광학 시스템으로 도구, 말단 실행기, 장면 객체의 강체 추적을 보완하여 인체 동작, 로봇 상태, 물체 궤적을 같은 좌표계와 타임라인에서 기록하고 재현할 수 있게 합니다.
장면 규모와 필요에 따라 다음 구성을 권장합니다.
고품질 모션 데이터 수집을 위한 전문 엣지 AI 모션 캡처 카메라입니다. 55 TOPS 임베디드 GPU를 탑재하고 HPE 고정밀 해석 확장을 지원합니다.
생명과학, 대학 연구실, 로봇 훈련, 애니메이션/VFX에 적합
대공간 및 다인 캡처를 위한 플래그십 엣지 AI 모션 캡처 카메라입니다. 100 TOPS 임베디드 GPU를 탑재하고 12명 캡처와 HPE 고정밀 해석을 지원합니다.
대공간 연구실, LBE, 시뮬레이션 훈련, 다인 데이터 수집에 적합
장면 크기, 인원 수, 공간 및 정확도 요구 사항에 따라 최적의 카메라 어레이 솔루션을 맞춤화하려면 기술 팀에 문의하세요.
로봇 유형, 실험 공간, 수집 인원, 도구 객체, 동기화 장비, 훈련 데이터 형식 요구사항에 따라 Semcam Live 팀이 휴머노이드 로봇과 체화 지능 연구에 적합한 카메라 배열과 데이터 워크플로를 계획합니다.
Semcam Live는 엣지 컴퓨팅 AI 마커리스 모션 캡처 시스템입니다. 대상 감지, 2D 키포인트, ReID, 추적, 분할, 자르기 및 신뢰도 계산은 카메라 측에서 완료되고 Active Center는 카메라 간 일치, 삼각측량, 3D 키포인트, 뼈대 해결, IK, 필터링, 대상 변경 및 내보내기를 로컬에서 완료합니다.
휴먼 모션 캡처에는 모션 캡처 슈트, 관성 센서 또는 반사 마커가 필요하지 않습니다. 프로젝트에서 도구, 소품, 로봇 끝, 핸들 또는 훈련 장비와 같은 강체 개체를 추적해야 하는 경우 6DoF 강체 추적에 Goku를 사용할 수 있습니다.
라이브 링크는 120fps 모션 출력과 100ms 미만의 엔드 투 엔드 대기 시간을 제공하므로 라이브 미리 보기, 라이브 드라이브, 상호 작용 및 획득 검사에 적합합니다. HPE는 더 높은 품질의 키포인트 결과가 필요한 연구, 교육 데이터 생성, 키샷 및 프로젝트에 적합한 수확 후 고정밀 처리 파이프라인입니다.
그렇습니다. Semcam Live는 표시되지 않은 인간의 움직임을 담당하고 Goku는 로봇 관절, 엔드 이펙터, 도구, 소품, 핸들, 훈련 장비, 라켓, 드론 및 카메라와 같은 강체 개체를 담당합니다. 둘 다 Active Center에서 좌표계, 타임라인 및 프로젝트를 공유합니다.
OpenSim, Visual3D, C3D, 주류 힘판, 근전도검사 및 압력 플랫폼 프로세스에 연결할 수 있으며 Semcam Biomechanics 플러그인 및 Semcam 동작 품질 평가 플러그인을 통해 지수 계산, 동작 품질 평가 및 데이터 내보내기로 확장할 수 있습니다.