デジタル・スタンダードは4日、カメラや動画から全身の関節の3次元座標を推定しバーチャルキャラクターを操作できるiPhone用アプリ「TDPT」をiOSへリリースしたことを発表した。これは、Windows10向けのUSBカメラモーションキャプチャーアプリ「ThreeDPoseTracker」のスマホ版となる。
「TDPT」は、同社の独自開発する画像認識AI技術で、人物の関節の動きをリアルタイムで3次元的に推定している。PC向けアプリ同様、カメラや動画ファイルを読み込むことで、フルボディトラッキングが可能だ。奥行きや振り向き、後ろ姿なども検出するため、ダンスなど複雑な動きにも対応している。
無料版では、標準モデルの「ぽてて りゅん」を用意しているが、一部買い切り課金で利用できる「プレミアムメニュー」を利用することで、「VRoidHub」と連携しアバターを変更できる。
また、「プレミアムメニュー」では、「VMC Protcol」を使用しリアルタイムにモーションデータを送信する機能や、「Replay Kit」や「RTMP」を使用したライブ配信、モーションデータのVMD、BVH形式での書き出しなどの機能を利用できる。
（TEXT by アシュトン）