事例とチャレンジ

開発の背景・課題

これまでも3D骨格検出システムという技術は世の中に存在していました。ですがそれら既存のシステムは3Dセンサーに依存するものが多く、センサーが発売中止やバージョンアップを迎えた際、骨格検出システムが使用できなくなるというリスクがありました。また、3Dセンサーに用いられることの多い赤外線カメラは、屋外で使用できない・人と障害物の区別ができない・正面以外の骨格取得ができないといった弱点も。さらには、骨格検出精度を高めるための機械学習にはGPUカードを搭載した高性能なコンピュータが必要でコストが非常に高額になるという欠点もありました。そこで、専用の3Dセンサーではなく一般的なWebカメラで3D骨格検出を行え、なおかつ家庭で使われているような性能のパソコンでも動作する仕組みを生み出せないかという話が社内で持ち上がりました。

POINT

ソリューション

新しい3D骨格検出システムのため、私たちはCPU内で機械学習を行えるIntel社のOpenVino™ というプラットフォームの活用を思いつき、開発に着手。そして生まれた新しい3D骨格検出システムでは、家庭で使われる一般的なWebカメラ2台とパソコンさえあれば、高速・高精度な骨格検出が可能にしています。

コストパフォーマンスは圧倒的で、仮に同じことを従来型でやろうとすれば数倍〜数十倍の費用がかかるでしょう。また、屋外での使用ができない・人と障害物の区別ができないといった従来型赤外線カメラの弱点もすべて克服。例えばイベント会場のような特殊な場所でも使用できます。

私たちはこの3D骨格検出技術を確立させた際、広く認知してもらうべきだと考えました。低コスト・高速・高精度な骨格検出技術は、医療やスポーツ・フィットネス、生産現場、レジャーなど様々な分野に大いに貢献する可能性に溢れているからです。

そして手始めにと手がけたのがサムライ体験コンテンツの企画・開発でした。世界的に人気の高いサムライをモチーフにすることで、広く世界に知ってもらえるはずと考えたのです。そして3D骨格検知技術をUnity３Dというゲーム開発プラットフォームにプラグインで提供。Unity３Dにて、「サムライ抜刀体験アプリケーション」を開発しました。このアプリは、サムライになりきって抜刀を気軽に楽しむことができる体験型のコンテンツ。アプリユーザーの骨格の動きと熟練者の骨格の動きとを比較することで、抜刀技術を学ぶこともできます。

「サムライ抜刀体験アプリケーション」は、そのオリジナリティと低コスト×高精度を評価され、インテル主催の「第2回OpenVINO™ ツールキットによる開発コンテスト」で最優秀賞を受賞。アプリを通じて、各方面から私たちの骨格検出技術に注目もいただいており、すでに技術を応用した他社との協働プロジェクトも始まろうとしています。

成果・今後の展望

3D骨格検出技術の可能性は無限だと考えています。例えばコロナ禍で家庭用フィットネス器具が売れていると聞きますが、3D骨格検出を用いれば正しい身体の動かし方を各家庭で手軽にチェックすることも容易です。野球やゴルフのスイングの科学的チェックも安価に行えますから、プロに限らず少年野球や部活動などで活用いただけることもできるでしょう。そうした様々なコンテンツが今後生まれていくと期待しています。