業界一手軽な全身モーキャプアプリ「ミチコンPlus」が11月1日にアップデート! 既存動画からの動作トレースも可能に。

株式会社ネクストシステム(本社:福岡県福岡市、代表取締役:藤田 義生)は、スマートフォンのカメラに写した人物の動きを、人工知能エンジン「VisionPose®」で捉えて3DCGキャラクターに反映し、キャラクターの変更、モーションデータの書き出し等に対応した全身リアルタイムモーションキャプチャアプリ「ミチコンPlus」を11月1日よりアップデートしました。

リリース項目は以下となります。
・動画読み込み機能を追加
・縦ブレ軽減

VTuber 等の演出や、手軽なモーションキャプチャアプリとしてご活用いただけます。

▼アプリはこちらからDLできます。
https://itunes.apple.com/jp/app/id1468862870

■スマホだけでモーキャプやデータ書き出しも可能なミチコンPlusとは?

ミチコンPlusとは、スマートフォンのカメラに写した人物の動きを、人工知能エンジン「VisionPose®(※1)」で捉えて3DCGキャラクターに反映する全身リアルタイムモーションキャプチャアプリです。キャラクターの変更、モーションデータの書き出し等にも対応しています。通常、モーションキャプチャを行う際はカメラを複数台用意し、対象にデバイスを装着する必要がありますが、当アプリではカメラ1台で3D座標を取得可能なため、特別なデバイスを体に一切装着せず、従来よりも手軽なモーションキャプチャをお楽しみいただけます。また、本アプリではVRoid Hubと連携することで、VRoid Hub 上に投稿された任意のキャラクターに変更して遊べます。(※2)

※1 VisionPose、及びVisionPoseロゴは、NEXT-SYSTEM co.,Ltd.の登録商標です。
※2 ご利用にはPRO版へのアップグレードが必要となります。課金体系は自動更新ではなく、非更新型のサブスクリプションです。

■推奨端末外でも利用しやすい!既存動画からモーションキャプチャが可能に

従来のミチコンPlusでは、カメラ映像からリアルタイムでのモーションキャプチャに対応しておりましたが、本リリースでは端末に保存された動画ファイルを取り込むことで簡単にモーションキャプチャが可能になりました(最大 15 秒)。例えば、ダンスが苦手な方でも当機能を利用することで、自分では難しかったダンス動作をキャラクターに反映させることができるようになります。

また、端末により、リアルタイムでのモーションキャプチャが難しかった場合でも、あらかじめ動画で撮影したものを当アプリに取り込むことで、推奨端末外でもモーションキャプチャをご利用いただくことが可能になります。

動画配信素材としてや、CSVでの書き出し(PRO 版機能)も可能であるため、簡易的なモーションキャプチャツールとしてもご利用いただけます。

※端末によっては、読み込みに時間がかかる場合がございます。
※全身が写っている動画をご利用ください。

■縦ブレを軽減し、より綺麗なモーションキャプチャをご提供

Twitter等でご意見をいただいておりました、”撮影時に、キャラクターが縦方向へ小刻みに揺れる現象”につきまして、本リリースで改善に取り組みました。

立ち姿勢時の安定性を優先して調整を行ったことで、より自然で安定したモーションキャプチャの提供が可能になりました。

今後も当社ではユーザーの皆様のご意見を迅速に反映し、使いやすいアプリとしてご利用いただけるよう精進してまいります。

■AR 機能を近日リリース予定!

実際の風景に、お気に入りのキャラクターをモーションキャプチャしながら重ねて表示できる『AR機能(※)』を近日リリース予定です。
アウトカメラで実際の風景を背景に映し、インカメラでモーションキャプチャを行うことで実現いたします。

また、その他今後のリリース項目として下記を予定しています。
・表情の反映
・UI変更
・ハンドサインの追加
・カメラレンズの指定(※)
※一部端末に制限がございます。

■ミチコンPlusに利用している技術「VisionPose®」について

当社では、カメラのみで複数人の骨格の深度情報を検出可能なAIエンジンを含む、国内唯一のSDKパッケージ製品である「VisionPose®」を提供しています。リハビリテーション支援用ロボットの姿勢確認機能などに利用されるほか、スポーツのフォームチェックアプリへの利用、工場や店舗での人の流れや動作の確認、医療、エンタメなど、幅広い分野で導入実績を築いています。

ミチコンPlusでは、VisionPoseシリーズの1つであり、カメラ1台だけで骨格を検出できる「VisionPose Single3D for iOS」を利用してモーションキャプチャを可能にしています。

また、最近ではVisionPoseを時系列に対応させて特定の動作を検出させるなど、骨格の位置情報を検出するだけではなく、さらに発展させたソリューションをご提案させていただいています。

■「ミチコンPlus」製品概要

アプリ名　　 ： ミチコンPlus
カテゴリ　　 ： 仕事効率化
価格 　　 ：無料(有料コンテンツあり)
AppStore URL:https://itunes.apple.com/jp/app/id1468862870
WEBサイト URL:https://www.next-system.com/michico

その他参考動画 ：
▼VisionPose Single3Dプロモーションビデオ

< 主な機能 >
・キャラセレクト:キャラクターを選択できます。VRoid Hub 上に投稿されたキャラクターの 追加が可能です。(連携が必要です)
・動画読み込み機能:端末に保存された動画を読み込み、モーションキャプチャが可能です。
・リップシンク切り替え:キャラクターの口を動かすかどうか選択できます。
・プレビュー切り替え:カメラ映像の ON/OFF を選択できます。
・カメラ切り替え:前面カメラ、もしくは背面カメラを選択できます。
・録画書き出し機能:モーション録画し CSV で書き出しできます。
・グリーンバック切り替え:グリーンバックの表示ができます。

< 推奨端末 >
iPhone 11/11Pro/11ProMAX
iPhone XR
iPhone XS/XS Max
iPad Air(第 3 世代)
iPad mini(第 5 世代)
iPad Pro(第 3 世代)
※A12 以上のプロセッサが搭載された端末を推奨いたします。

■会社概要

商号　　 ： 株式会社ネクストシステム
代表者　 ： 代表取締役　藤田 義生
所在地　 ： 〒811-1302　福岡市南区井尻3-12-33 アンビエント井尻2F
設立　　 ： 2002年8月
事業内容 ： 情報通信業、情報サービス業、ソフトウェア業
資本金　 ： 8,075万円
WEBサイト ： https://www.next-system.com/
Facebook ： https://www.facebook.com/nextsystemcom/
Twitter　 ： @NEXT_SYSTEM_Co

■本件に関するお問合せ先
株式会社ネクストシステム　広報担当：田中