第5回業開中心会議

センサーやデバイスの最新事情と
業務系アプリへの応用
中村薫
第5回業開中心会議

自己紹介
中村薫
フリーランスで主にDepthセンサー系の仕事をしています
アプリケーション開発
講演、ハンズオンセミナー
執筆など
Microsoft MVP for Visual Studio ALM
kaorun55@naturalsoftware.jp
Copyright © 2013 Natural Software.jp All rights reserved.

Tokyo MotionControl Network
https://www.facebook.com/TokyoMotioncontrolNetwork

連絡
このスライドは後で公開します
スライドのメモは不要です

なんでセンサー・デバイス？
• Windowsで動くものが多いから
– もともとWindowsアプリをやってた
• 楽しいから

Windowsで動くものが多いから
• USB接続系は特に
– Kinect for Windows(Windowsのみ)
– Creative Senze3D(Windowsのみ)
– Leap Motion(Windows,OSX,Linux)
– Oculus Rift(Windows,OSX)
– Eye Tribe(Windowsのみ)

ちょっと残念
KinectはWindowsアプリケーション開発者
が頭角をあらわすチャンスだった。
コミュニティでは
Kinectが出たてのころは8,9割がMacの人
今は感覚的にWeb,モバイルを主戦場にし
ている人が多い

新しいものを作るのではなく
今のアプリにちょっとうれしい機能を

さまざまなセンサー&デバイス

利用できるセンサー&デバイス
Kinect
Kinect v2
Creative Camera
Leap Motion
Eye Tribe
THETA
Oculus Rift
Structure Sensor

Kinect
• NUIのさきがけ
• Xbox用のほかにWindows用のセンサーが
ある
http://www.xbox.com/ja-JP/xbox360

Kinect for Windows SDK
Color Stream Depth Stream
Player Tracking Skeleton Tracking
Audio Stream

Toolkit
Kinect Studio
Kinect Background RemovalKinect Fusion
Face TrackingVoice Command
Kinect Interaction

Kinect v2
• Xbox One に同梱された新しいKinect
• Kinect for Windows v2 Developer
Preview の配布が始まっている
http://www.xbox.com/ja-JP/xbox-one/meet-xbox-one

Kinect for Windows v2
• Xbox Oneに付属のKinectと同等
• 2014年夏にリリース予定
• Kinect for Windows v2のソフトウェアや
ハードウェア、APIは暫定的なものであり
正式版では変更される可能性があります。

Kinect for Windows SDK v2
Color Stream Depth Stream Skeleton Tracking

Creative Senz3D
• 手指を認識できるセンサー
• Intel Perceptual Computing SDK を利
用する
• コンピューターへの内蔵化を予定

Intel Perceptual Computing SDK
Color Stream Hand and Finger Tracking Gesture and Pose
Facial Analysis Speech Recognition Voice Synthesis
"Nothing to say?"

Intel Perceptual Computing SDK入門
http://www.buildinsider.net/small/perc

インテルRealSenseテクノロジー

Leap Motion
• 指先を高精度で検出
• 使いやすいソフトウェア
• ハードウェアの内蔵化が進んでいる
https://www.leapmotion.com/

Leap Motion SDK
Hand and Finger Tracking Gesture
http://www.buildinsider.net/small/leapmotionfirstimp/01
Touch

Leap Motion開発入門(C++/C#)
http://www.buildinsider.net/small/leapmotioncs
http://www.buildinsider.net/small/leapmotioncpp

Structure Sensor
• Kinect v1とほぼ同じセンサー
• iOS対応
• 発売は...

ViewerおよびScaner

THETA
• 魚眼レンズを裏表につけて、1回で360度
の全天球が撮影できるカメラ
• APIはないがPTP/IPというプロトコルで
制御が可能

Oculus Rift
• 非透過型のヘッドマウントディスプレイ
• 両目の視差を利用した立体視を体験できる
• 現在、開発者プレビュー段階

Senz3D+Oculus Rift

The Eye Tribe
• 赤外線を利用して視線を検出することが
できるデバイス
• 開発プレビューが発売

The Eye Tribe

モバイルへ
iOS + Structure Sensor
https://www.google.com/atap/projecttango/
Google Tango(Android)
http://structure.io/

大きな流れ・1

大きな流れ・1
Microsoft Intel
Apple Google

大きな流れ・2
Intel RealSense Leap Motion

センサー&デバイスの、業務アプリへの応用

事例

医療
http://www.youtube.com/watch?v=624N3-nIieI

サイネージ

空中ディスプレイ
Kinect, Leap Motion, Intel PerC

現実世界へのインタラクション
階段＋マッピング＋Kinect
http://www.youtube.com/watch?v=h8wZnY_jWF8

Photo by Ben Lorph
Kinect x 8台

例えば

Kinectで顔認証
https://www.youtube.com/watch?v=XtmypsZtfRM

Kinectで顔認証
• 画像処理による顔認証→静止画が通る
• 瞬きなどによる顔認証→動画が通る
• Kinect→どちらも×

Kinectで顔認証
• Kinectで顔の検出はできるが認識、認証
はできない
– 画像処理の顔認識、顔認証ソフトウェアを併用
既存の技術と組み合わせる

Kinectで議事録
• Kinectで音の方向を取得する
• 音の方向とマッチする人を検出する
• 音声認識で発言をテキスト化する
• 音、テキスト、発言者が時系列に並ぶ

Kinectで動線調査

非接触バイタルセンシング
http://monoist.atmarkit.co.jp/mn/articles/1310/02/news063.html

高齢者遠隔運動指導・管理モデルRehAct
http://monoist.atmarkit.co.jp/mn/articles/1310/02/news063_2.html

Senz3D+Oculus Riftで行動誘導

行動誘導の研究
https://www.youtube.com/watch?v=ldEyGeSw4M8

視線でヒートマップ
• どこを見ているか
– 画面から視線が外れたらアラート
– 広告効果
– ユーザビリティ調査

視線でヒートマップ
https://www.facebook.com/photo.php?v=10201704071458515

Structure Sensorを使った試作

iBeaconで入退室
• Bluetoothベースの近距離無線通信
• 距離および方向を正確に検出できる
• iOS7に搭載

iBeaconで入退室
入室
退室

作って楽しく、誰かの役に立つ
アプリケーションをつくりませんか？

第5回業開中心会議

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Viewers also liked

Viewers also liked (20)

Similar to 第5回業開中心会議

Similar to 第5回業開中心会議 (20)

More from Kaoru NAKAMURA

More from Kaoru NAKAMURA (17)

Recently uploaded

Recently uploaded (9)

第5回業開中心会議