devsumi 2014[14-c-5]
DESCRIPTION
Developers Summit 2014 [14-C-5] 「モーションセンサーの現状と2014年の予測」TRANSCRIPT
モーションセンサーの現状と2014年の予測
中村薫2014/2/14 目黒雅叙園
デベロッパーズサミット2014 [14-C-5]
自己紹介
中村 薫フリーランスで主にDepthセンサー系の仕事をしています
アプリケーション開発
講演、ハンズオンセミナー
執筆など
Microsoft MVP for Visual Studio ALM
Copyright © 2014 Natural Software.jp All rights reserved.
なぜセンサー?
Copyright © 2014 Natural Software.jp All rights reserved.
登場するセンサー
Copyright © 2014 Natural Software.jp All rights reserved.
Kinect Xtion/Carmine Creative Senze3D
Leap MotionKinect v2
なぜセンサー?
• センサー価格の低下
• Web、モバイルに続く価値
Copyright © 2014 Natural Software.jp All rights reserved.
モーションセンサー界隈の現状
Copyright © 2014 Natural Software.jp All rights reserved.
センサーを使った事例
• さまざまなセンサーを使った事例が数多く出てきました。
• センサーのコミュニティもできました。
Copyright © 2014 Natural Software.jp All rights reserved.
Tokyo MotionControl Network
Copyright © 2014 Natural Software.jp All rights reserved.
https://www.facebook.com/TokyoMotionControlNetwork
Copyright © 2014 Natural Software.jp All rights reserved.
Copyright © 2014 Natural Software.jp All rights reserved.
サイネージ
Copyright © 2014 Natural Software.jp All rights reserved.
空中ディスプレイKinect, Leap Motion, Intel PerC
Copyright © 2014 Natural Software.jp All rights reserved.
現実世界へのインタラクション階段+マッピング+Kinect
http://www.youtube.com/watch?v=h8wZnY_jWF8
Copyright © 2014 Natural Software.jp All rights reserved.
Photo by Ben Lorph
Kinect x 8台
Copyright © 2014 Natural Software.jp All rights reserved.
舞踊+マッピング+Kinect
Copyright © 2014 Natural Software.jp All rights reserved.
https://www.youtube.com/watch?v=rxNJMij-nKU
さまざまなセンサー
Copyright © 2014 Natural Software.jp All rights reserved.
利用できるセンサー
Copyright © 2014 Natural Software.jp All rights reserved.
Kinect Xtion/Carmine Creative Senze3D
Leap MotionKinect v2
利用できるセンサー
Copyright © 2014 Natural Software.jp All rights reserved.
Kinect Xtion/Carmine Creative Senze3D
Leap MotionKinect v2
全身 手指
Kinect
• NUIのさきがけ
• Xbox用のほかにWindows用のセンサーがある
Copyright © 2014 Natural Software.jp All rights reserved.
http://www.xbox.com/ja-JP/xbox360
Kinect for Windows SDK
Color Stream Depth Stream
Player Tracking Skeleton Tracking
Audio Stream
Copyright © 2014 Natural Software.jp All rights reserved.
Kinect v2
• Xbox One に同梱された新しいKinect
• Kinect for Windows v2 Developer Preview の配布が始まっている
Copyright © 2014 Natural Software.jp All rights reserved.
http://www.xbox.com/ja-JP/xbox-one/meet-xbox-one
Kinect for Windows v2
• Xbox Oneに付属のKinectと同等
• 2014年夏にリリース予定
• Kinect for Windows v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。
Copyright © 2014 Natural Software.jp All rights reserved.
Kinect for Windows SDK v2
Color Stream Depth Stream Skeleton Tracking
Copyright © 2014 Natural Software.jp All rights reserved.
Carmine/Xtion
• Kinect互換センサー
• Mac OSなどWindows以外でも利用可能
• 開発元のPrimeSense社がApple社に買収されたため、今度の動向に注目
Copyright © 2014 Natural Software.jp All rights reserved.
OpenNI 2.x and NiTE 2.x
Color Stream Depth Stream Gesture
User Tracking Skeleton Tracking Hand Tracking
Copyright © 2014 Natural Software.jp All rights reserved.
Creative Senze3D
• 手指を認識できるセンサー
• Intel Perceptual Computing SDK を利用する
• コンピューターへの内蔵化を予定
Copyright © 2014 Natural Software.jp All rights reserved.
Intel Perceptual Computing SDK
Color Stream Hand and Finger Tracking Gesture and Pose
Facial Analysis Speech Recognition Voice Synthesis
"Nothing to say?"
Copyright © 2014 Natural Software.jp All rights reserved.
Intel Perceptual Computing Challenge
Copyright © 2014 Natural Software.jp All rights reserved.
インテルRealSenseテクノロジー
Copyright © 2014 Natural Software.jp All rights reserved.
http://www.intel.com/content/www/us/en/architecture-and-technology/realsense-overview.html
Leap Motion
• 指先を高精度で検出
• 使いやすいソフトウェア
• ハードウェアの内蔵化が進んでいる
Copyright © 2014 Natural Software.jp All rights reserved.
https://www.leapmotion.com/
Leap Motion SDK
Hand and Finger Tracking Gesture
http://www.buildinsider.net/small/leapmotionfirstimp/01
Touch
Copyright © 2014 Natural Software.jp All rights reserved.
センサーの仕様比較
Copyright © 2014 Natural Software.jp All rights reserved.
Kinect Kinect v2 Carmine Senze3D Leap
用途 中距離 中距離 中距離 近距離 近距離
センシング Light Coding TOF Light Coding TOF ステレオカメラ
Color画像 ○ ○ ○ ○ ×
Depth画像 ○ ○ ○ ○ ×
全身骨格検出 ○ ○ ○ × ×
手指検出 × △(一部) × ○ ○
ジェスチャー △(入力支援) × ○ ○ ○
音声入力 ○ △(未実装) × ○ ×
Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。
KINECT V2について
Copyright © 2014 Natural Software.jp All rights reserved.
Kinect for Windows v2の要求仕様
対応OS Windows 8, Windows 8.1
開発環境 Visual Studio 2012(C++, C#)
CPU Core i7 2.5GHz以上 64bit CPU
メモリ 4GB以上
USB USB 3.0
グラフィック DirectX 11 対応のグラフィックカード
Copyright © 2014 Natural Software.jp All rights reserved.
Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。
Kinect for Windows v2の仕様
Colorカメラ解像度 1920 x 1080
Depthカメラ解像度
512 x 424
Depthセンシング TOF(Tome of Fright)
Depth範囲 0.5m~4.5m
スケルトン認識 6人まで
Copyright © 2014 Natural Software.jp All rights reserved.
Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。
KINECT V2 DEMO
Copyright © 2014 Natural Software.jp All rights reserved.
2014年の予測
Copyright © 2014 Natural Software.jp All rights reserved.
新しいデバイス
Copyright © 2014 Natural Software.jp All rights reserved.
http://makezine.com/2014/01/12/make-editors-highlights-and-picks-from-ces-2014/
http://mobilesyrup.com/2014/01/09/thalmic-labs-shoots-to-kill-with-ces-demo-first-look/
内蔵化
センサーの内蔵化が進むでしょう。
• Leap Motion
• Intel Perceptual Computing SDK対応センサー
Copyright © 2014 Natural Software.jp All rights reserved.
https://www.leapmotion.com/
インテルRealSenseテクノロジー
Copyright © 2014 Natural Software.jp All rights reserved.
SoftKinetick社
Copyright © 2014 Natural Software.jp All rights reserved.
SoftKinetick社
Copyright © 2014 Natural Software.jp All rights reserved.
その先へ
Copyright © 2014 Natural Software.jp All rights reserved.
モバイル
• iOSやAndroid対応のセンサーが発売され、モバイルでのセンサー利用が可能になるでしょう。
Copyright © 2014 Natural Software.jp All rights reserved.
http://makezine.com/2014/01/12/make-editors-highlights-and-picks-from-ces-2014/
Web
• センサーSDKのブラウザ対応が進んでいます。Webやクラウドとセンサーの連携が進んでいくでしょう。
Copyright © 2014 Natural Software.jp All rights reserved.
ウェアラブル
http://blogs.independent.co.uk/2013/01/03/tech-battlegrounds-in-2013/Copyright © 2014 Natural Software.jp All rights reserved.
センサー,モバイル,ウェアラブルの融合
http://www.kickstarter.com/projects/551975293/meta-the-most-advanced-augmented-reality-interfaceCopyright © 2014 Natural Software.jp All rights reserved.
Meta Pro
Copyright © 2014 Natural Software.jp All rights reserved.
http://www.redorbit.com/news/technology/1113032110/metapro-augmented-reality-glasses-121913/
Oculus Rift(オキュラス・リフト)
http://www.oculusvr.com/Copyright © 2014 Natural Software.jp All rights reserved.
出力装置の進化
Copyright © 2014 Natural Software.jp All rights reserved.
ディスプレイを越えて
Copyright © 2014 Natural Software.jp All rights reserved.
http://www.youtube.com/watch?v=h8wZnY_jWF8Copyright © 2014 Natural Software.jp All rights reserved.
Oculus Rift(オキュラス・リフト)
http://www.oculusvr.com/Copyright © 2014 Natural Software.jp All rights reserved.
Copyright © 2014 Natural Software.jp All rights reserved.
Copyright © 2014 Natural Software.jp All rights reserved.
OCULUS RIFT DEMO
Copyright © 2014 Natural Software.jp All rights reserved.
触覚を得る
Copyright © 2014 Natural Software.jp All rights reserved.
http://www.youtube.com/watch?v=xaFBjUJj00M
Copyright © 2014 Natural Software.jp All rights reserved.
http://www.youtube.com/watch?v=CE4WsYncNa4
Copyright © 2014 Natural Software.jp All rights reserved.
謝辞
• 機材提供
–東京エレクトロンデバイス 茂出木さん
• OculusJump
– Unity 伊藤さん
• OculusTheta
– @MobileHackerzさん
Copyright © 2014 Natural Software.jp All rights reserved.
既存技術と新規技術の組み合わせの先に
新しい何かが生まれる
Copyright © 2014 Natural Software.jp All rights reserved.