スマホカメラで3Dキャラクターに反映できるアプリ「ミチコン」リリース
ネクストシステムは、スマートフォンで全身のリアルタイムモーションキャプチャを行い、動きを未確認仮想広報担当ミチコ(3Dキャラクター)に反映するアプリをApp Storeにて公開した。
同アプリでは、「VisionPose Single3D(以下 Single3D)」が体験可能。
Single3Dは同社が提供するVisionPoseシリーズの1つで、深度センサに依存せずAIの技術要素であるディープラーニング(深層学習)を使うことで、骨格の3D座標の検出をカメラ1台のみで可能にしたシステムだという。
同アプリの概要は、以下のとおりである。
スマホだけで全身モーションキャプチャが可能
スマホカメラに映した人の動きを、同社のバーチャル広報担当である「未確認仮想広報担当ミチコ」にリアルタイムで反映。
通常、モーションキャプチャを行う際はカメラを複数台用意し、対象にデバイスを装着する必要があるが、同アプリではカメラ1台で3D座標を取得可能。特別なデバイスを体には一切装着せず、手軽なモーションキャプチャが楽しめるという。
グリーンバック機能搭載
ライブ配信や、動画編集にも利用しやすいよう、背景をグリーンバックに変更する機能を搭載。別途ライブ配信ソフトや、動画編集ソフト等を利用することで、クロマキー合成も可能だという。
同社は今後、Single3D、並びに同アプリの有用性を広げるため、以下の機能拡張を検討中としている。
- キャラクターを変更・作成できる機能
- 背景を変更できる機能
- 動画撮影時にモーションデータをCSVで保存する機能
- 全身だけではなく上半身のみでもモーショントラッキングできる機能