【2/15更新箇所あり】
【3/30更新箇所あり】
【4/17更新箇所あり】
【8/27更新箇所あり】
【10/26更新箇所あり】
【11/19更新箇所あり】
11月19日より製品版を法人のお客様向けに販売開始いたしました！
詳しくはこちらからご確認ください。
みなさまこんにちは。
ネクストシステムの広報担当田中です。
昨年10月にKinectの販売中止が決まり、
こちらを使用した開発をしていらっしゃる方々におかれましては、
『燃え尽きたよ・・・真っ白にな・・・・・・』
というレベルで重めの打撃をもらってしまったのではないかと思います。
Kinectの販売中止を知ったユーザーのイメージ
さて、人ごとのように話していますが、実は弊社でも例外ではないのです。
進化型ARサイネージ『Kinesys（キネシス）』という製品でバリバリ利用させていただいてます。
もちろん販売停止が発表された時点で、リスク分散のため在庫集めに奔走しました。
めちゃくちゃ頑張りました。
が、それだけではいつかガタがきてしまいますよね。
そう、深度センサ付きカメラに頼らず骨格を検知したい！！
心の底から！
というわけで代替品となりそうなものを検討しました。
上記の記事の中で特にDeepLearning（深層学習）を使った骨格検知システムに焦点をあて、実際に試してみたりと色々検討を重ねた結果、
『Kinect販売中止になったし、類似製品はちょっとお高めだし作るか！！』
ということで、Kinectの代替品を作ることになったわけでした。
弊社では、すでにDeepLearning（深層学習）を使った画像認識のノウハウがあったという点も理由の一つですね。
そして現在開発中のWEBカメラとDeepLearning使った骨格検出システムの名前が『VisionPose(R)』です。
アイコンできたよ
※以下、現在開発中のため、変更となる場合があります。
VisionPoseとは？
深度センサ付きカメラに頼らず、DeepLearning（深層学習）を使用し、WEBカメラだけで人間の骨格を検出することができるシステムです。
野球やテニス、ヨガなどの複雑な動きもほぼリアルタイムでボーントラッキングが可能です。
※類似製品とはニューラルネットワークの構造や関節のつながりを検出する仕組み等が異なります。
VisionPoseの良いところは？
①リアルタイムで骨格を検出できる。
リアルタイム計測て゛かつ、2D と 3D(深度測定)の骨格検出に対応しています。
WEBカメラのみて゛骨格情報の抽出か゛可能て゛あるため、深度センサに依存しません。
②複数人の骨格検出か゛可能(
1人た゛けて゛なく複数人て゛もリアルタイムて゛トラッキンク゛し、人物の骨格を検出て゛きます。
③測定箇所30箇所を網羅。
体の各部位の関節(25箇所)と顔ハ゜ーツ(5箇所)を検出て゛きます。
こ゛相談次第て゛は新たに測定箇所の追加も可能て゛す。
④使いやすさ抜群!用途制限なくC#のSDKとしてこ゛提供。
VisionPoseはC#のSDKとしてこ゛提供いたします。そのためアフ゜リケーションへの組込か゛容易て゛す。また、用途制限はなく買い切りて゛こ゛提供いたします。
※Unityからのこ゛利用は近日提供予定て゛す。
⑤画像からの解析が可能。
リアルタイム版に加え、過去に撮影したお手持ちの静止画像を利用して骨格検出をすることも可能て゛す。今まて゛研究用に撮影した画像テ゛ータなと゛『骨格検出にリアルタイム性か゛必要なく、より精度か゛高いテ゛ータか゛欲しい場合』に特にオススメの機能て゛す。
※静止画から検出か゛可能な座標は2次元座標のみて゛す。
※動画からの解析はアフ゜リとして近日提供予定て゛す。
⑥マルチデバイスへの対応。
将来的には Cloud 上やスマートフォン上て゛も利用か゛可能になることを目指しています。スマートフォンなと゛スヘ゜ックの低いハート゛ウェアて゛も動作て゛きるよう現在モテ゛ルの軽量化・ 高速化を進めています。
⑦精度に優れた唯一の国産製品。
国産製品て゛あるため、さまさ゛まなこ゛相談に対応いたします。お気軽にお問い合わせくた゛さいませ。
VisionPoseの販売目処は？
【2018年11月19日更新情報】
11月19日より製品版を法人のお客様向けに販売開始いたしました！
詳しくはこちらからご確認ください。
【2018年4月17日更新情報】
現在、α版を先行的に提供させていただいた企業様から受けたご要望等のフィードバック対応を行っており、恐れ入りますが、企業様の対応を優先しております。
個人様向けには、Kinectのようなカメラ付パッケージとして、より使いやすい形での提供を考えておりますので、今暫くお時間を頂ければと思います。
準備が出来次第、弊社WEBサイトやSNS等でお声がけさせて頂けましたら幸いです。
引き続き開発を進めて参りますので何卒宜しくお願いいたします。
http://www.next-system.com/blog/2018/03/30/post-1427/
【2018年3月30日更新情報】
2018年4月2日よりα版の提供を順次開始します。
詳しくは下記リリースをご確認ください。
※お申し込みが多い場合、対応にお時間がかかる可能性がございます。ご了承くださいませ。
※今後の参考のために会社名や使用用途・目的などもご教示いただける範囲でご記載いただけますと大変嬉しく存じます。
よくある質問
VisionPoseの優位性は？
<赤外線センサ付きカメラによくある下記のデメリットを解消。>
・正面からのホ゛ーンしかとれないため、正面から背面へ切り替わる真横からの視点て゛ホ゛ーンか゛乱れる。(左右の逆転か゛起こるため)
・赤外線による Depth マッフ゜のみの認識(カラーを使わない)て゛あり、障害物と人との区別か゛つきつ゛らいため、体の一部か゛隠れたりモノを持つ動作に弱い。
・赤外線のため屋外の認識か゛難しい。
・赤外線を吸収する服装なと゛に弱い。
学習を重ね、精度も上がってきたので
既存の深度センサ付きカメラとリアルタイムで骨格検出して比較してみました。
<利用しやすい柔軟な販売形態。>
従来の深層学習を利用した類似サーヒ゛スて゛は特定分野て゛の用途制限や、商用利用の場合に 年こ゛とに支払う金額か゛高価て゛あったりと、気軽に利用しにくい状況か゛ありました。
「VisionPose」て゛はよりお気軽にこ゛利用いたた゛くため、用途制限なして゛商用利用か゛可能て゛ かつ買い切り価格て゛のこ゛提供をいたします。
また、VisionPose 製品版をこ゛購入いたた゛きますと、
・開発用フ゜ロタ゛クトキー :2つ
のフ゜ロタ゛クトキーか゛発行されます。
開発時には開発用フ゜ロタ゛クトキーをこ゛利用いたた゛き、リリース時にリリース用フ゜ロタ゛クト キーをこ゛利用いたた゛けます。また製品に組み込むケースを想定し、リリース用ホ゛リュームラ イセンスのこ゛提供をいたします。
ます゛はお問い合わせいたた゛きたいと考えてます。
例えばどんな使い方？
工場現場、医療、スポーツなどさまざまな分野で研究目的やKinectの代替としてなどお問い合わせをいただいていますが、最近だとVtuberやMMD、映画、アニメ用にモーションキャプチャとして使いたいというご相談も多いですね。
スホ゜ーツ:フォームチェックや審判材料として
医療:リハヒ゛リやヘルスケア分野の姿勢評価、研究開発なと゛
組込:スマートフォンや IT 機器への組込に
エンタメ:ハ゛ーチャル YouTuber(Vtuber)、MMD 制作なと゛
世の中の反応は・・・？
楽しみにしてます。ライブラリ販売までこぎ着けてほしいです
早稲田治慶＠IPD58.5 (@waseda_fablab) 2017年12月22日
スゴい！
これ使ってVRの全身トラッキングできるんじゃない？#VR #VisionPose https://t.co/p8Mx3jJnCUてん👍 (@ten_pla) 2017年12月27日
服を着て動いている人体の骨格を検出するシステム。バレエの技術習得に応用できればかなり画期的。さまざまなメソッドの違いを把握するのにも有効か。→【Deep Learning】骨格検出システム『VisionPose』を開発しました。 https://t.co/mOrYdMFLw8
門 行人 (@y_cadeau) 2017年12月28日
VisionPose開発したのあのカメラアプリリリースしたとこか
まじ頑張ってほしい https://t.co/3XBZCuCVhi小林@ARおじさん (@AR_Ojisan) 2017年12月25日
全身トラッキングのハードル下がりそう
【Deep Learning】骨格検出システム『VisionPose』を開発しました。 https://t.co/3A3TqPS46N @YouTubeさんからふしめろ@バーチャルYouTuber (@hushinomiya) 2017年12月23日
めっちゃ期待されてるーーー！！！（大興奮）
弊社・・・弊社・・・頑張ります！！
おまけという名のご褒美
元チェッカーズのベーシスト『大土井裕二』さんにも、VisionPoseのデモを体験してもらいました。
大土井さん、何してるんですか！！（大歓喜）
VisionPoseの仕様上、お顔が隠れてるため大土井さんかどうか判別し辛いのが玉にキズですが、お茶目さが垣間みえて控えめにいって最高です。ごちそうさまです。
こんな無茶ぶりにも快く引き受けていただき、誠にありがとうございます。
ちなみに金髪もじゃもじゃの人は弊社のゼネラルマネージャ兼チーフプロデューサとなっております。
【8/27日更新】アノテーションツールについて
「骨格の検出精度が悪かったらどうするの？」
そんな時に備えてVisionPose が追加学習できるようになったので、できるだけわかりやすくまとめてみました。
VisionPoseは汎用的にお使いいただくため、日常生活でよくする動作を中心に学習させています。そのためあまり日常生活ですることがない動作については精度が落ちる傾向があります。
しかし、弊社ではアノテーションツールをはじめとした学習環境を準備しておりますので、追加学習をさせることで精度を調整し、さらに磨きをかけることができます。
詳細は下記リンクからどうぞ！
※アノテーションツールはオプションとなっております。
まとめ
現状の開発情報をまとめてみました。
引き続き最新情報についてはTwitterなどで更新していくつもりです。
続報をお楽しみに 0^^
▼VisionPose WEBサイト
■ピンチをチャンスに変えがちなネクストシステムへのお問い合わせはこちら。
