2013/12/06 ViEW2013 特別企画セッション「新たなセンサと画像認識の融合」 SS-01 画像センサと応用事例の紹介 http://view.itlab.org/2013/

1. ViEW2013 SS-01
画像センサと応用事例の紹介
Tsukasa SUGIURA
http://unanancyowen.com

2. Marketing
Kinect for Windows SDK プログラミングガイド
Kinect for Windows SDK 実践プログラミング
http://www.kohgakusha.co.jp/books/detail/978-4-7775-17268
http://www.kohgakusha.co.jp/books/detail/978-4-7775-18005

3. Natural User Interface
自然で直感的に操作することのできる
ユーザーインターフェース
NUIを実現するためのTechnology
– Gesture Recognition
– Speech Recognition
CLI
・Codified
・Strict
GUI
・Metaphor
・
Exploratory
NUI
・Direct
・Intuitive

4. Image Sensor
Far Field
Near Field
Microsoft
Kinect for Windows
Leap Motion
ASUS
Xtion PRO LIVE
Creative
Interactive Gesture
Camera

6. Kinect for Windows
• Kinect for WindowsはColorカメラ、Depthセンサ、
Microphoneアレイなどを搭載した複合センサデバイス
3D DEPTH SENSORS
RGB CAMERA
MULTI-ARRAY MIC
MOTORIZED TILT

7. Kinect for Windows
• Kinectで取得できる情報
–
–
–
–
–
Color
Depth
Player
Skeleton
Audio ( Speech Recognition, Beamforming )

8. Kinect for Windows

9. Application Case
手術室向け非接触型画像操作システム Opect (オペクト) - 株式会社ニチイ学館
http://www.nichiigakkan.co.jp/service/medical/category/hospital/opect.html

11. Leap Motion
• Leap Motionは手、指、ツールを
高精度かつ高フレームレートで検出・追跡できるデバイス
– 精度は1/100mm、フレームレートは290fps
– 有効範囲はデバイスの上方25-600mm、150°の逆ピラミッド状

12. Leap Motion
• Leap Motionで取得できる情報
–
–
–
–
–
位置
移動速度
回転角度
方向
曲率
などの様々な情報が取得可能
掌の方向
指先の方向

13. Leap Motion
• 様々なGestureを認識可能
Swipe
Circle
Key Tap
Screen Tap

14. Leap Motion
Demonstration – LeapMotion Visualizer
http://youtu.be/cxlpjSUrOa0

15. Application Case
Dr. Guillermo Rosa on Touchless Contral Dring Surgery – Leap Motion Developer Labs
http://labs.leapmotion.com/post/62905896710/dr-guillermo-rosa-on-touchless-control-during-surgery

16. Next Generation Kinect for Windows
"This is preliminary software and/or hardware and APIs
are preliminary and subject to change."

17. "This is preliminary software and/or hardware and APIs are preliminary and subject to

18. Kinect for Windows v2
Specification of Kinect for Windows
Kinect for Windows v1
Kinect for Windows v2
Color Resolution
640 × 480
1920 × 1080
Depth Resolution
320 × 240
512 × 424
Depth Sensor
Light Coding
TOF
Skeleton and Joint
2 persons tracking
20 joint / person
6 persons tracking
25 joint / person
Range of Detection
0.8 ～ 4.0 m
0.5 ～ 4.5 m
Angle of View
57 , 43 degree
70 , 60 degree
( Horizontal , Vertical )
(Time of Flight)
"This is preliminary software and/or hardware and APIs are preliminary and subject to

19. Kinect for Windows v2
"This is preliminary software and/or hardware and APIs are preliminary and subject to

20. Summary
• NUIを実現するための画像センサとその応用事例を
いくつかピックアップして紹介しました
– Kinect for Windows
– Leap Motion
– Kinect for Windows v2
• 特徴を理解して適切な画像センサを用いることで
問題を解決することができる…かもしれません

21. Application Case
スマートハウスの実証実験 - 三井ホーム
http://www.mitsuifudosan.co.jp/kashiwanoha/

22. Application Case
Kinect Sign Language Translator Expands Communication Possibilities – Microsoft
Research
http://research.microsoft.com/en-us/collaboration/stories/kinect-sign-language-translator.aspx