動画からのモーションキャプチャが可能に。全身リアルタイムモーションキャプチャアプリ「ミチコンPlus」がアップデート







株式会社ネクストシステムは、スマートフォンのカメラでモーションキャプチャやデータ書き出しが可能な全身リアルタイムモーションキャプチャアプリ「ミチコンPlus」のアップデートを11月1日に実施し、新たに動画読み込み機能や縦ブレ軽減などを追加したことを発表しました。

本アップデートでは、端末に保存された動画ファイルを取り込むことで、最大15秒のモーションキャプチャが可能となりました。
詳しくは下記のリリースをご覧ください。

■ミチコンPlusとは?

ミチコンPlusとは、スマートフォンのカメラに写した人物の動きを、人工知能エンジン「VisionPose(R)(※2)」で捉えて3DCGキャラクターに反映する全身リアルタイムモーションキャプチャアプリです。キャラクターの変更、モーションデータの書き出し等にも対応しています。スマホカメラに映した人の動きを、3DCGキャラクターにリアルタイムで反映できます。通常、モーションキャプチャを行う際はカメラを複数台用意し、対象にデバイスを装着する必要がありますが、当アプリではカメラ1台で3D座標を取得可能なため、特別なデバイスを体に一切装着せず、従来よりも手軽なモーションキャプチャをお楽しみいただけます。また、本アプリではVRoid Hubと連携することで、VRoid Hub上に投稿された任意のキャラクターに変更して遊べます。(※3)

※1 当社調べ
※2 VisionPose、及びVisionPoseロゴは、NEXT-SYSTEM co.,Ltd.の登録商標です。
※3 ご利用にはPRO版へのアップグレードが必要となります。課金体系は自動更新ではなく、非更新型のサブスクリプションです。

ミチコンPlus利用風景

■推奨端末外でも利用しやすい!既存動画からモーションキャプチャが可能に

従来のミチコンPlusでは、カメラ映像からリアルタイムでのモーションキャプチャに対応しておりましたが、本リリースでは端末に保存された動画ファイルを取り込むことで簡単にモーションキャプチャが可能になりました(最大15秒)。例えば、ダンスが苦手な方でも当機能を利用することで、自分では難しかったダンス動作をキャラクターに反映させることができるようになります。

また、端末により、リアルタイムでのモーションキャプチャが難しかった場合でも、あらかじめ動画で撮影したものを当アプリに取り込むことで、推奨端末外でもモーションキャプチャをご利用いただくことが可能になります。

動画配信素材としてや、CSVでの書き出し(PRO版機能)も可能であるため、簡易的なモーションキャプチャツールとしてもご利用いただけます。

※端末によっては、読み込みに時間がかかる場合がございます。
※全身が写っている動画をご利用ください。

ミチコンPlus動画読込イメージ

■縦ブレを軽減し、より綺麗なモーションキャプチャをご提供

Twitter等でご意見をいただいておりました、“撮影時に、キャラクターが縦方向へ小刻みに揺れる現象”につきまして、本リリースで改善に取り組みました。

立ち姿勢時の安定性を優先して調整を行ったことで、より自然で安定したモーションキャプチャの提供が可能になりました。

今後も当社ではユーザーの皆様のご意見を迅速に反映し、使いやすいアプリとしてご利用いただけるよう精進してまいります。

■AR機能を近日リリース予定!

実際の風景に、お気に入りのキャラクターをモーションキャプチャしながら重ねて表示できる『AR機能(※)』を近日リリース予定です。
アウトカメラで実際の風景を背景に映し、インカメラでモーションキャプチャを行うことで実現いたします。

AR機能を近日公開

また、その他今後のリリース項目として下記を予定しています。

・表情の反映
・UI変更
・ハンドサインの追加
・カメラレンズの指定(※)

※一部端末に制限がございます。

関連記事:スマホだけで3D骨格検出。iOS向けSDK『VisionPose Single3D for iOS』が販売開始

■「ミチコンPlus」製品概要

アプリ名   : ミチコンPlus
カテゴリ   : 仕事効率化
価格     : 無料(有料コンテンツあり)
App Store URL: https://itunes.apple.com/jp/app/id1468862870
WEBサイトURL : https://www.next-system.com/michico

<主な機能>
・キャラセレクト    :キャラクターを選択できます。
VRoid Hub上に投稿されたキャラクターの追加が
可能です。(連携が必要です)
・動画読み込み機能   :端末に保存された動画を読み込み、
モーションキャプチャが可能です。
・リップシンク切り替え :キャラクターの口を動かすかどうか選択できます。
・プレビュー切り替え  :カメラ映像のON/OFFを選択できます。
・カメラ切り替え    :前面カメラ、もしくは背面カメラを選択できます。
・録画書き出し機能   :モーション録画しCSVで書き出しできます。
・グリーンバック切り替え:グリーンバックの表示ができます。

<推奨端末>
iPhone 11/11Pro/11ProMAX、iPhone XR、iPhone XS/XS Max、
iPad Air(第3世代)、iPad mini(第5世代)、iPad Pro(第3世代)

※A12以上のプロセッサが搭載された端末を推奨いたします。

■関連リンク

株式会社ネクストシステム

参考株式会社ネクストシステム プレスリリース