【現在開発中】Kinectを使わない！WEBカメラとDeepLearningを使った骨格検出システム『VisionPose』とは？

【2/15更新箇所あり】

【3/30更新箇所あり】

【4/17更新箇所あり】

みなさまこんにちは。

ネクストシステムの広報担当田中です。

昨年10月にKinectの販売中止が決まり、

こちらを使用した開発をしていらっしゃる方々におかれましては、

『燃え尽きたよ・・・真っ白にな・・・・・・』

というレベルで重めの打撃をもらってしまったのではないかと思います。

Kinectの販売中止を知ったユーザーのイメージ

さて、人ごとのように話していますが、実は弊社でも例外ではないのです。

進化型ARサイネージ『Kinesys』という製品でバリバリ使用してます。

立ち止まらずにはいられない！進化型ARサイネージ『Kinesys』とは？

こんなお悩みをお持ちではないでしょうか？「ブランドイメージをUPしたい」「多くのお客様の目を引きたい」「アトラクションスペースを盛り上げたい」「地域・地元の魅力を最大限に発信したい」「発信情報の効果を確かめたい」「ビッグデータを収集、最大限に活かしたい」企画担当者様の頭を悩ませることの１つが、ズバリ『集客』。

www.next-system.com

2017-08-04 18:24

もちろん販売停止が発表された時点で、リスク分散のため在庫集めに奔走しました。

めちゃくちゃ頑張りました。

が、それだけではいつかガタがきてしまいますよね。

そう、Kinectに頼らず骨格を検知したい！！

心の底から！

というわけで代替品となりそうなものを検討しました。

【悲報】Kinect（キネクト）が販売終了！Kinect以外に代替案として使えそうな案を考えてみた。

【2018年3月19日追記あり】先日、モーションキャプチャー系の開発会社にとって衝撃的なニュースが舞い込みましたね。そう、Kinectの販売停止！！どこも在庫が一瞬でなくなりましたよね。恐ろしい。しかしなくなってしまったものはしょうがない！そんなわけで、Kinectの次に使えそうな代替案を考えてみました〜！

www.next-system.com

2017-10-27 18:39

上記の記事の中で特にDeepLearning（深層学習）を使った骨格検知システムに焦点をあて、実際に試してみたりと色々検討を重ねた結果、

『Kinect販売中止になったし、類似製品はちょっとお高めだし作るか！！』

ということで、Kinectの代替品を作ることになったわけでした。

弊社では、すでにDeepLearning（深層学習）を使った画像認識のノウハウがあったという点も理由の一つですね。

【最新情報】AI（人工知能）研究・開発事例をまとめてみた

最近ネクストシステムでは、AI（人工知能）方面の研究・開発が活発化しています。特に物体認識や行動認識の分野を中心に研究していますが、ここ３ヶ月ほどでデモ開発したものをまとめてみました。

www.next-system.com

2017-11-01 13:48

そして現在開発中のWEBカメラとDeepLearning使った骨格検出システムの名前が『VisionPose』です。

アイコンできたよ

※以下、現在開発中のため、変更となる場合があります。

VisionPoseとは？

Kinectに頼らず、DeepLearning（深層学習）を使用し、WEBカメラだけで人間の骨格を検出することができるシステムです。

野球やテニス、ヨガなどの複雑な動きもほぼリアルタイムでボーントラッキングが可能です。

※類似製品とはニューラルネットワークの構造や関節のつながりを検出する仕組み等が異なります。

VisionPoseの良いところは？

①深度センサーなしで人の骨格情報を捉えることができる

WEBカメラのみで骨格情報を抽出可能ため、従来よりお手軽に骨格検出を行うことができます。

②複数人の骨格抽出に長けている

一回の処理で複数人まとめて、骨格の検出が可能なため、人が増えても処理時間が一定です。

弊社エンジニアによると有名な類似製品よりも複数人の骨格抽出にかけては処理時間が上回るとのこと。

③深度測定にも対応

現在ステレオカメラ（WEBカメラ２台）を使用して深度を測定する方法検討・開発中です。

④用途制限なく、できるだけお求めやすい価格で提供予定。

買い切りで且つ、できるだけ求めやすくご提供させていただく想定です。

⑤SDKとして提供予定なため、使いやすい。

インターフェースもできるだけわかりやすく作りたいと考えてます。
KinectSDKに近いインターフェースにする予定ですので、Kinectを使っている方にとっても、
プログラムが作りやすいかもです。

⑥赤外線を使用しないため、屋外での使用がしやすい。

反対に光量が少ない（暗いところ）では使用は難しくなりますが、屋外で使いやすい方が使う幅が広がりそうですよね。

⑦一度に骨格を抽出できるMAX人数の制限がない。（Kinectは6人まで）

カメラに映る範囲は抽出できそうです。

VisionPoseの販売目処は？

2018年3月を目処に開発を進めてます。お楽しみに^^

【2018年3月30日更新情報】

2018年4月2日よりα版の提供を順次開始します。

詳しくは下記リリースをご確認ください。

※お申し込みが多い場合、対応にお時間がかかる可能性がございます。ご了承くださいませ。

※今後の参考のために会社名や使用用途・目的などもご教示いただける範囲でご記載いただけますと大変嬉しく存じます。

【2018年4月17日更新情報】
現在、α版を先行的に提供させていただいた企業様から受けたご要望等のフィードバック対応を行っており、恐れ入りますが、企業様の対応を優先しております。
個人様向けには、Kinectのようなカメラ付パッケージとして、より使いやすい形での提供を考えておりますので、今暫くお時間を頂ければと思います。
準備が出来次第、弊社WEBサイトやSNS等でお声がけさせて頂けましたら幸いです。
引き続き開発を進めて参りますので何卒宜しくお願いいたします。

『VisionPose（ビジョンポーズ）』α版を2018年4月2日（月）より順次提供開始いたします

株式会社ネクストシステム（本社：福岡県福岡市　代表取締役：藤田義生）は、深度センサーを使わない、高精度AI骨格検出システムとして開発中の『VisionPose（ビジョンポーズ）』をα版として2018年4月2日（月）より順次配布を開始していくことを決定いたしました。

www.next-system.com

2018-03-30 11:52

よくある質問

類似製品とは何が違うの？

・別のアルゴリズムを使用しているため、ニューラルネットワークの構造が違います。
・関節のつながりを検出する仕組みが違います。
・用途制限なく、お求めやすい価格で提供予定。
・複数人の骨格抽出に長けています。
・深度測定に対応します。（現在開発中）
→ちなみにベータ版ですがOpenPoseも深度測定機能が入ってるみたいです。
https://github.com/CMU-Perceptual-Computing-Lab/openpose/blob/master/doc/openpose_3d_reconstruction_demo.md

世の中の反応は・・・？

楽しみにしてます。ライブラリ販売までこぎ着けてほしいです

— 早稲田治慶＠IPD58.5 (@waseda_fablab) 2017年12月22日

スゴい！
これ使ってVRの全身トラッキングできるんじゃない？#VR #VisionPose https://t.co/p8Mx3jJnCU

— てん👍 (@ten_pla) 2017年12月27日

服を着て動いている人体の骨格を検出するシステム。バレエの技術習得に応用できればかなり画期的。さまざまなメソッドの違いを把握するのにも有効か。→【Deep Learning】骨格検出システム『VisionPose』を開発しました。 https://t.co/mOrYdMFLw8

— 門　行人 (@y_cadeau) 2017年12月28日