2019年11月21日 リリース

スマホでフルトラッキングVTuberになれるアプリ「ミチコンPlus」が11月21日にアップデート! 新機能”ARモード”でキャラクターをより身近に!

ミチコンPlus ARモード
 

スマホでフルトラッキングVTuberになれるアプリ
「ミチコンPlus」が11月21日にアップデート!
新機能”ARモード”でキャラクターをより身近に!

〜マーカレスで全身モーションキャプチャ〜

 

株式会社ネクストシステム(本社:福岡県福岡市、代表取締役:藤田 義生)は、スマートフォンだけで全身をモーションキャプチャし、任意のキャラクターに反映して動かすことが可能なiOSアプリ「ミチコンPlus」に新たにARモードを搭載した新バージョンを11月21日(木)にリリースしました。このARモードは、背景をカメラ映像にすることでお気に入りのキャラクターがまるで現実空間にいるかのような演出が可能になります。VTuber配信用途や、手軽なモーションキャプチャアプリとしてご活用いただけます。今後はUI面など含め、より使いやすいアプリとなるよう開発を進めてまいります。

▼アプリはこちらからDLできます。
https://itunes.apple.com/jp/app/id1468862870

■フルトラッキングのVTuberに簡単になれる「ミチコンPlus」とは?

ミチコンPlusとは、人物の全身の動きを当社開発の人工知能エンジン「VisionPose®(※1)」で捉えて3DCGキャラクターに反映する、最新技術を利用したモーションキャプチャアプリです。モーションデータの書き出し、VRoid Hubと連携することでVRoid Hub上に投稿された任意のキャラクターへの変更等にも対応しています。(※2)
通常、モーションキャプチャを行う際はカメラを複数台用意し、対象にマーカー等のデバイスを装着する必要がありますが、当アプリではスマートフォン・タブレットのカメラに全身を映すだけでマーカレスの全身モーションキャプチャが完結できます。

また、リアルタイムでのモーションキャプチャだけでなく、端末に保存された動画ファイルからモーションを読み込み、キャラクターに反映する方法もご用意しています。(※3)
動画読み込み機能を利用することで、端末によりリアルタイムでのモーションキャプチャが難しかった場合でも、ご利用いただくことが可能です。(最大15秒)

※1 VisionPose、及びVisionPoseロゴは、NEXT-SYSTEM co.,Ltd.の登録商標です。
※2キャラクター変更、モーションデータ書き出し機能の利用にはアップグレード(370円/月)が必要となります。課金体系は自動更新ではなく、非更新型のサブスクリプションです。
※3端末によっては、読み込みに時間がかかる場合がございます。全身が写っている動画ファイルをご利用ください。

ミチコンPlus利用風景

 

■ARモード追加でキャラクターをより身近に

本アップデートでは、キャラクターの背景を背面カメラの映像にできる、ARモードを搭載しました。本機能を利用すると、キャラクターがまるで現実空間にいるかのような体験が可能になります。(※4)

ミチコンPlusでは、前面カメラの映像、または動画ファイルから、人間の動きをモーションキャプチャし、背面カメラに映った映像をキャラクターの背景として描写することでARモードを実現しています。

※4 ARモードの利用には端末に制限がございます。利用できる端末は、iPhone 11/11Pro/ 11ProMAX、iPhone XR、iPhone XS/XS Max、iPad Pro(第3世代)です。

▼ミチコンPlusのARモード図説

ARモード図説

▼ミチコンPlusのARモード切り替え方法

ARモード切り替え操作

■ミチコンPlusに利用している技術「VisionPose®」について

当社では、カメラのみで複数人の骨格の深度情報を検出可能なAIエンジンを含む、国内唯一のSDKパッケージ製品である「VisionPose®」を提供しています。リハビリ支援用ロボットの姿勢確認機能などに利用されるほか、スポーツのフォームチェックアプリへの利用、工場や店舗での人の流れや動作の確認、医療、エンタメなど、幅広い分野で導入実績を築いています。

ミチコンPlusでは、VisionPoseシリーズの1つであり、カメラ1台だけで骨格を検出できる「VisionPose Single3D for iOS」を利用してモーションキャプチャを可能にしています。

また最近では、VisionPoseシリーズから、より手軽に骨格情報を検出できるオールインワンパッケージとして「VisionPose Nano」をハードウェア込み98,000円にて発売を開始しました。姿勢推定技術を利用するハードルを下げることで、さらなる技術の発展を促し、基幹技術の1つとして社会に貢献していきたいと考えています。

▼VisionPose Single3Dプロモーションビデオ

 

■「ミチコンPlus」製品概要

ミチコンPlus アプリアイコン
アプリ名   : ミチコンPlus
カテゴリ   : 仕事効率化
価格    :無料(有料コンテンツあり)
AppStore URL:https://itunes.apple.com/jp/app/id1468862870
WEBサイト URL:https://www.next-system.com/michico

< 主な機能 >
・キャラセレクト:キャラクターを選択できます。VRoid Hub 上に投稿されたキャラクターの 追加が可能です。(連携が必要です)
・動画読み込み機能:端末に保存された動画を読み込み、モーションキャプチャが可能です。
・リップシンク切り替え:キャラクターの口を動かすかどうか選択できます。
・プレビュー切り替え:カメラ映像の ON/OFF を選択できます。
・カメラ切り替え:前面カメラ、もしくは背面カメラを選択できます。
・録画書き出し機能:モーション録画し CSV で書き出しできます。
・背景切り替え:デフォルト背景、グリーンバック、カメラ映像に切り替えできます。

< リアルタイムモーションキャプチャ推奨端末 >
iPhone 11/11Pro/11ProMAX
iPhone XR
iPhone XS/XS Max
iPad Air(第 3 世代)
iPad mini(第 5 世代)
iPad Pro(第 3 世代)
※A12 以上のプロセッサが搭載された端末を推奨いたします。

<ARモード対応端末 >
iPhone 11/11Pro/11ProMAX
iPhone XR
iPhone XS/XS Max
iPad Pro(第 3 世代)
※iOS13以上の端末でご利用ください。

 

■会社概要

商号   : 株式会社ネクストシステム
代表者  : 代表取締役 藤田 義生
所在地  : 〒811-1302 福岡市南区井尻3-12-33 アンビエント井尻2F
設立   : 2002年8月
事業内容 : 情報通信業、情報サービス業、ソフトウェア業
資本金  : 8,075万円
WEBサイト : https://www.next-system.com/
Facebook : https://www.facebook.com/nextsystemcom/
Twitter  :@NEXT_SYSTEM_Co

 

■本件に関するお問合せ先
株式会社ネクストシステム 広報担当:田中

開発・応用事例はこちら