Semcam Live は、ヒューマノイドロボット、身体性AI、模倣学習、遠隔操作、Sim2Real 研究向けに、マーカーレス人体デモ取得、Goku 剛体 6DoF トラッキング、Active Center のローカル同期、複数形式のデータ出力を提供します。研究チームは同じ座標系とタイムラインで、人体、ロボット、工具、プロップ、実験対象のデータを取得できます。
ロボットチームに必要なのは、一度の人体スケルトン推定結果だけではありません。安定し、再確認でき、キャリブレーションされ、学習ツールへ接続できるデータパイプラインが必要です。Semcam Live はエッジ AI カメラアレイで自然な人体動作を取得し、ローカルで 3D 再構成、スケルトン解算、手部動作、ルート軌跡、関節角、retarget データを出力します。Goku 光学システムは、ロボットエンドエフェクタ、工具、プロップ、実験対象の 6DoF 姿勢を同期追跡できます。両者は Active Center で同じプロジェクト、座標系、時間軸を共有し、人間のデモ、ロボット状態、シーン対象を長期的なデータ資産として整理できます。
歩行、方向転換、把持、運搬、組立、工具操作、両手協調などの人間デモを取得し、学習フローに投入できるスケルトン、関節角、手部動作、目標姿勢データを出力します。
リアルタイムのマーカーレス動作データでロボット、デジタルツイン、シミュレーションキャラクターを駆動し、遠隔制御、動作リハーサル、タスク再現の動作リンクをすばやく検証できます。
同じ空間で人の動作、ロボット末端、工具、実験対象を記録し、協調タスク、障害物回避、空間行動、インタラクションタイミングの定量分析を支援します。
Goku 光学剛体トラッキングで工具、プロップ、治具、エンドエフェクタ、移動台車、その他剛体対象の 6DoF 姿勢を記録し、マーカーレス人体捕捉だけでは安定表現しにくい物体状態を補います。
人体動作、ロボット姿勢、シーン対象データを MuJoCo、Isaac、ROS、Unity、または独自シミュレーションへ導入し、座標変換、IK 検証、ポリシー再生、実実験との比較に利用できます。
ロボティクス、AI、HCI、運動制御、デジタルツインの授業に適しており、学生は複雑な装着準備なしにデモ取得、データ解析、リターゲット、シミュレーション検証を行えます。
デモ実演者はモーションキャプチャスーツやマーカーなしで、歩く、走る、回る、つかむ、運ぶ、工具を操作する、両手で協調する動作を実行でき、準備コストと動作干渉を低減します。
Semcam Live が人体動作を取得し、Goku がロボット末端、工具、プロップ、実験対象、その他剛体を追跡することで、人、ロボット、物体を同じデータチェーンに入れられます。
Active Center は Semcam Live AI カメラと Goku 光学カメラを一元管理し、人体動作、剛体姿勢、外部機器データを同じプロジェクト内で同期、標定、録画、再生できます。
スケルトン、ルート軌跡、関節角、手部動作、retarget 後の目標姿勢、剛体 6DoF データを出力し、模倣学習、遠隔操作、データセット構築、ポリシー検証フローに接続できます。
120fps のリアルタイムリンクは現場プレビュー、取得確認、遠隔操作検証、オンラインシステムデバッグに使えます。HPE 高精度拡張は収録後により高品質な学習データを生成できます。
動作取得、再構成、記録、プロジェクト管理、データ出力はすべてローカルで完結でき、ROS、C++、Python、MATLAB、MuJoCo、Isaac などのインターフェースやフローに接続できます。
ロボットデータ取得における Semcam Live の価値は、単一動画から姿勢をオフライン推定することではありません。同期マルチカメラ、エッジ AI、精密標定、ローカル 3D 再構成で安定したデータチェーンを形成します。カメラ側で複雑な画像特徴を処理し、中央側は構造化データを受け取り、カメラ間融合、三角測量、スケルトン解算、IK、フィルタリング、retarget を行います。そのため大量の原始映像を継続的にサーバーへ戻す必要がなく、より大きな実験空間で多カメラマトリクスを展開しやすくなります。
ゲームパッド遠隔操作、ウェアラブル機器、従来の光学マーカー方式はロボット研究開発で今も価値がありますが、装着負担、動作制限、マーカー準備、剛体対象データと人体データの分断を招きがちです。Semcam Live は人間デモ取得のハードルを下げ、Goku 光学システムで工具、エンドエフェクタ、シーン対象の剛体追跡を補完し、人体動作、ロボット状態、物体軌跡を同じ座標系と時間軸で記録・再現できるようにします。
シーンの規模とニーズに応じて、次の構成をお勧めします。
高品質な動作データ収集向けのプロフェッショナルなエッジAIモーションキャプチャカメラ。55 TOPSの組み込みGPUを搭載し、HPE高精度解析拡張に対応します。
ライフサイエンス、大学研究室、ロボット学習、アニメーション/VFXに最適
大空間・複数人キャプチャ向けのフラッグシップエッジAIモーションキャプチャカメラ。100 TOPSの組み込みGPUを搭載し、12人キャプチャとHPE高精度解析に対応します。
大空間ラボ、LBE、シミュレーショントレーニング、複数人データ収集に最適
シーンのサイズ、人数、スペース、精度の要件に基づいて最適なカメラ アレイ ソリューションをカスタマイズするには、当社の技術チームにお問い合わせください。
ロボットの種類、実験空間、取得人数、工具対象、同期機器、学習データ形式に応じて、ヒューマノイドロボットと身体性AI研究に適したカメラアレイとデータワークフローを Semcam Live チームが計画します。
Semcam Live は、エッジ コンピューティング AI マーカーレス モーション キャプチャ システムです。ターゲット検出、2D キーポイント、ReID、トラッキング、セグメンテーション、クロッピング、信頼度計算はカメラ側で完了し、Active Center はクロスカメラ マッチング、三角測量、3D キーポイント、スケルトン ソルビング、IK、フィルタリング、リターゲット、エクスポートをローカルで完了します。
ヒューマン モーション キャプチャには、モーション キャプチャ スーツ、慣性センサー、反射マーカーは必要ありません。プロジェクトでツール、プロップ、ロボットの端、ハンドル、トレーニング機器などの剛体オブジェクトを追跡する必要がある場合は、6DoF 剛体追跡に悟空を使用できます。
ライブ リンクは、120 fps のモーション出力と 100 ミリ秒未満のエンドツーエンド レイテンシーを実現し、ライブ プレビュー、ライブ ドライブ、インタラクション、取得検査に適しています。 HPE は、研究、トレーニング データの作成、キー ショット、およびより高品質のキーポイント結果を必要とするプロジェクトに適したポストハーベスト高精度処理パイプラインです。
はい。 Semcam Live はマークのない人間の動作を担当し、悟空はロボットのジョイント、エンドエフェクター、ツール、プロップ、ハンドル、トレーニング機器、ラケット、ドローン、カメラなどの剛体オブジェクトを担当します。どちらも Active Center の座標系、タイムライン、およびプロジェクトを共有します。
OpenSim、Visual3D、C3D、主流のフォースプレート、筋電図および圧力プラットフォームのプロセスに接続でき、Semcam Biomechanics プラグインおよび Semcam アクション品質評価プラグインを介して、指数計算、アクション品質評価、およびデータエクスポートで拡張できます。