株式会社ネクストシステムは、スマートフォン1台で全身のモーションキャプチャを行い、リアルタイムで3Dキャラクターに反映するアプリ『ミチコン-VisionPose Single3D-』をAppStoreにて公開しました。
本アプリは開発中の「VisionPose Single3D(以下 Single3D)」の利用例として今年3月にデモアプリを公開した際に多くの反響を受けた為、この度正式アプリとしてAppStoreにて公開。推奨端末は最新のプロセッサを積んだiPhone XR、iPhoneXS /XS MAXとなっています。
関連記事：スマホで全身モーションキャプチャできる「VisionPose Single3D」がデモ映像を公開 2019年6月に販売予定
目次
■スマホだけで全身モーションキャプチャが可能！
スマホカメラに映した人の動きを、当社バーチャル広報担当の「未確認仮想広報担当ミチコ」にリアルタイムで反映できます。通常、モーションキャプチャを行う際はカメラを複数台用意し、対象にデバイスを装着する必要がありますが、当アプリではカメラ1台で３D座標を取得可能なため、特別なデバイスを体には一切装着せず、従来より手軽なモーションキャプチャをお楽しみいただけます。
■グリーンバック機能搭載！動画配信の小ネタにも
ライブ配信や、動画編集にもご利用しやすいよう、背景をグリーンバックに変更する機能を搭載しました。別途ライブ配信ソフトや、動画編集ソフト等を利用することで、クロマキー合成も可能です。
■ミチコンに搭載！VisionPose Single3Dと今後の展開について
Single3Dは当社が提供するVisionPoseシリーズの１つであり、深度センサに依存せずAIの技術要素であるディープラーニング（深層学習）を使うことで、骨格の３D座標の検出をカメラ1台のみで可能にしたシステムです。同シリーズのステレオカメラ版VisionPoseと比べると、カメラ１つで３D座標の検出が可能なため、より手軽な利用が可能です。カメラが１台しか用意できないケースや、スマートフォンへの搭載時などにオススメです。
<提供方法>
PC版とiOS版をそれぞれSDKとして提供します。
PC版→C#/C++向けのライブラリ
iOS版→Swift向けのライブラリ
※Unityサンプルコードあり
また、現在当アプリは当社バーチャル広報担当のミチコに動きを反映できるのみとなりますが、Single3D、並びに当アプリの有用性を広げるため、今後は次のような機能拡張を検討しています。
・背景を変更できる機能
・動画撮影時にモーションデータをCSVで保存する機能
・全身だけではなく上半身のみでもモーショントラッキングできる機能
■「未確認仮想広報担当ミチコ」とは？
未来からネクストシステム の歴史を学ぶ研修生として、2019年3月末ネクストシステムの広報担当に着任した。その体が3DCGであることを生かした広報活動を行う。
■「ミチコン-VisionPose Single3D-」製品概要
アプリ名 ： ミチコン-VisionPose Single3D-
カテゴリ ： エンターテイメント
価格 ： 無料
推奨端末 ：iPhone XR、iPhoneXS /XS MAX
■関連リンク
株式会社ネクストシステム
https://www.next-system.com/