株式会社ネクストシステム(本社：福岡県福岡市、代表取締役：藤田 義生)は、スマートフォンのカメラに写した人物の動きを、人工知能エンジン「VisionPose(R)」で捉えて3DCGキャラクターに反映し、キャラクターの変更、モーションデータの書き出し等に対応した全身リアルタイムモーションキャプチャアプリ「ミチコンPlus」を11月1日よりアップデートしました。

ミチコンPlusアイキャッチ

リリース項目は以下となります。

・動画読み込み機能を追加

・縦ブレ軽減

VTuber等の演出や、手軽なモーションキャプチャアプリとしてご活用いただけます。

▼アプリはこちらからDLできます。

https://itunes.apple.com/jp/app/id1468862870

■スマホだけでモーキャプやデータ書き出しも可能なミチコンPlusとは？

ミチコンPlusとは、スマートフォンのカメラに写した人物の動きを、人工知能エンジン「VisionPose(R)(※2)」で捉えて3DCGキャラクターに反映する全身リアルタイムモーションキャプチャアプリです。キャラクターの変更、モーションデータの書き出し等にも対応しています。スマホカメラに映した人の動きを、3DCGキャラクターにリアルタイムで反映できます。通常、モーションキャプチャを行う際はカメラを複数台用意し、対象にデバイスを装着する必要がありますが、当アプリではカメラ1台で3D座標を取得可能なため、特別なデバイスを体に一切装着せず、従来よりも手軽なモーションキャプチャをお楽しみいただけます。また、本アプリではVRoid Hubと連携することで、VRoid Hub上に投稿された任意のキャラクターに変更して遊べます。(※3)

※1 当社調べ

※2 VisionPose、及びVisionPoseロゴは、NEXT-SYSTEM co.,Ltd.の登録商標です。

※3 ご利用にはPRO版へのアップグレードが必要となります。課金体系は自動更新ではなく、非更新型のサブスクリプションです。

ミチコンPlus利用風景

■推奨端末外でも利用しやすい！既存動画からモーションキャプチャが可能に

従来のミチコンPlusでは、カメラ映像からリアルタイムでのモーションキャプチャに対応しておりましたが、本リリースでは端末に保存された動画ファイルを取り込むことで簡単にモーションキャプチャが可能になりました(最大15秒)。例えば、ダンスが苦手な方でも当機能を利用することで、自分では難しかったダンス動作をキャラクターに反映させることができるようになります。

また、端末により、リアルタイムでのモーションキャプチャが難しかった場合でも、あらかじめ動画で撮影したものを当アプリに取り込むことで、推奨端末外でもモーションキャプチャをご利用いただくことが可能になります。

動画配信素材としてや、CSVでの書き出し(PRO版機能)も可能であるため、簡易的なモーションキャプチャツールとしてもご利用いただけます。

※端末によっては、読み込みに時間がかかる場合がございます。

※全身が写っている動画をご利用ください。

ミチコンPlus動画読込イメージ

■縦ブレを軽減し、より綺麗なモーションキャプチャをご提供

Twitter等でご意見をいただいておりました、“撮影時に、キャラクターが縦方向へ小刻みに揺れる現象”につきまして、本リリースで改善に取り組みました。

立ち姿勢時の安定性を優先して調整を行ったことで、より自然で安定したモーションキャプチャの提供が可能になりました。

今後も当社ではユーザーの皆様のご意見を迅速に反映し、使いやすいアプリとしてご利用いただけるよう精進してまいります。

■AR機能を近日リリース予定！

実際の風景に、お気に入りのキャラクターをモーションキャプチャしながら重ねて表示できる『AR機能(※)』を近日リリース予定です。

アウトカメラで実際の風景を背景に映し、インカメラでモーションキャプチャを行うことで実現いたします。

AR機能を近日公開

また、その他今後のリリース項目として下記を予定しています。

・表情の反映

・UI変更

・ハンドサインの追加

・カメラレンズの指定(※)

※一部端末に制限がございます。

■ミチコンPlusに利用している技術「VisionPose(R)」について

当社では、カメラのみで複数人の骨格の深度情報を検出可能なAIエンジンを含む、国内唯一のSDKパッケージ製品である「VisionPose(R)」を提供しています。リハビリテーション支援用ロボットの姿勢確認機能などに利用されるほか、スポーツのフォームチェックアプリへの利用、工場や店舗での人の流れや動作の確認、医療、エンタメなど、幅広い分野で導入実績を築いています。

ミチコンPlusでは、VisionPoseシリーズの1つであり、カメラ1台だけで骨格を検出できる「VisionPose Single3D for iOS」を利用してモーションキャプチャを可能にしています。

また、最近ではVisionPoseを時系列に対応させて特定の動作を検出させるなど、骨格の位置情報を検出するだけではなく、さらに発展させたソリューションをご提案させていただいています。

VisionPose骨格解析イメージ(野球)

VisionPose骨格解析イメージ(ダンス)

■「ミチコンPlus」製品概要

アプリ名　　 ： ミチコンPlus

カテゴリ　　 ： 仕事効率化

価格　　　　 ： 無料(有料コンテンツあり)

App Store URL： https://itunes.apple.com/jp/app/id1468862870

WEBサイトURL ： https://www.next-system.com/michico

参考動画　　 ： ・「ミチコンPlus」プロモーション用動画

　　　　　　　　　( https://youtu.be/8Vpo3dZUanc )

　　　　　　　　・VisionPose Single3D プロモーションビデオ

　　　　　　　　　( https://youtu.be/KVlBEFNr54w )

＜主な機能＞

・キャラセレクト　　　　：キャラクターを選択できます。

　　　　　　　　　　　　　VRoid Hub上に投稿されたキャラクターの追加が

　　　　　　　　　　　　　可能です。(連携が必要です)

・動画読み込み機能　　　：端末に保存された動画を読み込み、

　　　　　　　　　　　　　モーションキャプチャが可能です。

・リップシンク切り替え　：キャラクターの口を動かすかどうか選択できます。

・プレビュー切り替え　　：カメラ映像のON／OFFを選択できます。

・カメラ切り替え　　　　：前面カメラ、もしくは背面カメラを選択できます。

・録画書き出し機能　　　：モーション録画しCSVで書き出しできます。

・グリーンバック切り替え：グリーンバックの表示ができます。

＜推奨端末＞

iPhone 11／11Pro／11ProMAX、iPhone XR、iPhone XS／XS Max、

iPad Air(第3世代)、iPad mini(第5世代)、iPad Pro(第3世代)

※A12以上のプロセッサが搭載された端末を推奨いたします。

■会社概要

商号　　 ： 株式会社ネクストシステム

代表者　 ： 代表取締役　藤田 義生

所在地　 ： 〒811-1302　福岡市南区井尻3-12-33 アンビエント井尻2F

設立　　 ： 2002年8月

事業内容 ： 情報通信業、情報サービス業、ソフトウェア業

資本金　 ： 8,075万円

WEBサイト： https://www.next-system.com/

Facebook ： https://www.facebook.com/nextsystemcom/

Twitter　： @next_kinesys

【本製品に関するお客様からのお問い合わせ先】

株式会社ネクストシステム

お問い合わせ： https://www.next-system.com/contact