Semcam Live とは何ですか?
Semcam Live は、エッジ コンピューティング AI マーカーレス モーション キャプチャ システムです。ターゲット検出、2D キーポイント、ReID、トラッキング、セグメンテーション、クロッピング、信頼度計算はカメラ側で完了し、Active Center はクロスカメラ マッチング、三角測量、3D キーポイント、スケルトン ソルビング、IK、フィルタリング、リターゲット、エクスポートをローカルで完了します。
Active Center は Semcam Live のローカルモーションデータ中枢です。リアルタイムマーカーレスキャプチャ、HPE 高精度処理、Goku 剛体トラッキング、プラグイン拡張、マルチプロトコル出力を 1 つのワークフローに統合します。

Semcam Live AI カメラと悟空光学カメラの統合管理は、同じ座標系、同じタイムライン、同じプロジェクトでのハイブリッド アレイ構成をサポートします。
カメラから出力されたフレーム番号に合わせた構造化データを受け取り、リアルタイムの 3D キー ポイント、スケルトン計算、フィルタリング、プレビューをローカルで完了します。
PRO+ および ULTRA は、科学研究、ロボット データ セット、および主要なレンズ モーション データ向けの HPE 高精度ソリューション拡張を通じて、ポストハーベストの非リアルタイム処理に使用できます。
光学式TロッドとLロッドを使用したSemcam Live +悟空のジョイント校正をサポートしており、校正精度は最大0.1mmです。
3D キー ポイント、ボーン、ジョイント角度、IK、フィルタリング、リターゲット、パラメトリック人体モデル / 高精度人体モデル、および複数の業界スケルトン出力セットをサポートします。
ROS、C++、Python、Matlab、MuJoCo、Isaac、OpenSim、Visual3D、C3D、UE、Unity、Blender、およびその他のインターフェイスとプロセスをサポートします。
Active Centerは、光学Tロッド、Lロッド、悟空光学システムを使用した高精度ジョイントキャリブレーションをサポートします。 Semcam Live は、同じプロジェクト内で AI マーカーフリー カメラと光学カメラの役割を同時に引き受けることができるため、人体マーカーフリー キャプチャと剛体光学トラッキングを同じ座標系に入れることができます。
0.1mm はジョイント キャリブレーション精度を指し、カメラ アレイと剛体オブジェクトの空間参照を確立するために使用されます。人体の動きデータは、リアルタイム リンクまたは HPE リンクに基づいて、さまざまな精度と適時性の要件を持つワークフローに入力できます。
主流の 3D コンテンツ作成ツール、ロボット シミュレーション プラットフォーム、ライフ サイエンス プロセスおよび開発フレームワークとの直接統合をサポート
Semcam Live は、エッジ コンピューティング AI マーカーレス モーション キャプチャ システムです。ターゲット検出、2D キーポイント、ReID、トラッキング、セグメンテーション、クロッピング、信頼度計算はカメラ側で完了し、Active Center はクロスカメラ マッチング、三角測量、3D キーポイント、スケルトン ソルビング、IK、フィルタリング、リターゲット、エクスポートをローカルで完了します。
Semcam Live は、マルチカメラ、同時取得、およびオンサイト展開向けに設計されており、単一のビデオの後処理に依存しません。このシステムは、固定エッジ AI カメラ アレイを使用して、フレーム同期された構造化データを出力し、ローカルで 3D 再構築を完了するため、研究室、ロボット工学、仮想生産、LBE、および長期トレーニング シナリオにより適しています。
ライブ リンクは、120 fps のモーション出力と 100 ミリ秒未満のエンドツーエンド レイテンシーを実現し、ライブ プレビュー、ライブ ドライブ、インタラクション、取得検査に適しています。 HPE は、研究、トレーニング データの作成、キー ショット、およびより高品質のキーポイント結果を必要とするプロジェクトに適したポストハーベスト高精度処理パイプラインです。
PRO は、最大 4 人のリアルタイム キャプチャに適していますが、HPE と顔のキャプチャはサポートしていません。 PRO+ は、最大 4 人の HPE を必要とするプロフェッショナルなプロジェクトに適しています。 ULTRA は、より大きなスペースや複数人のキャプチャに適しており、最大 12 人をサポートし、HPE と顔のキャプチャをサポートしており、間もなく発売される予定です。
はい。 Semcam Live はマークのない人間の動作を担当し、悟空はロボットのジョイント、エンドエフェクター、ツール、プロップ、ハンドル、トレーニング機器、ラケット、ドローン、カメラなどの剛体オブジェクトを担当します。どちらも Active Center の座標系、タイムライン、およびプロジェクトを共有します。