Recommandé
Contenu connexe
Tendances
Tendances (20)
En vedette
En vedette (20)
Similaire à xR Tech Tokyo 登壇資料 Mixed Realityではじまるコラボレーティブ・コンピューティング
Similaire à xR Tech Tokyo 登壇資料 Mixed Realityではじまるコラボレーティブ・コンピューティング (20)
xR Tech Tokyo 登壇資料 Mixed Realityではじまるコラボレーティブ・コンピューティング
- 2. 自己紹介 デコ・シ(@Ash_Yin) 氏名: 立原 愼也 所属: 株式会社ホロラボ 役職: プログラマ/リサーチャー 経歴 2017/04 大手電機メーカー(SE) 入社 2017/05 Unite2017で逆ナンされる 2017/06 大手電機メーカー(SE) 退職/ホロラボ入社 自己紹介
- 3. 個人の活動 FolloMap スマホからGPS情報を送信し、 HoloLensでマップを見る Buy FolloMap - Microsoft Store FolloMap - YouTube (ストア) (使い方) 素材はパワポでつくった
- 4. HoloLab Inc.
- 6. 創業メンバー
- 7. 社員 & 仲間 外部研究員 たるこす @tarukosu 平社員 デコ・シ @Ash_Yin 代表社員 アキヒロ @akihiro01051 CTO/寿司職人 ゆーじ @yuujii CADエンジニア デザイナー アルバイト JackMasaki @JackMasaki 会計 社長夫人
- 8. 業務内容
- 9. よくわかるホロラボ
- 11. Mixed Realityとは？ - 終わらない定義論争 - Microsoft Mixed reality is the result of blending the physical world with the digital world. https://developer.microsoft.com/en- us/windows/mixed-reality/mixed_reality https://youtu.be/_xpI0JosYUk
- 12. HoloLens おさらい
- 14. HoloLensのスペック -HoloLensおさらい- 項目 OS Windows 10 プロセッサ Intel Atom 32bit Microsoft Holographic Processing Unit (HPU 1.0) ストレージ 64GB メモリ 2GB 重量 579g スペックはスマホ相当 https://www.microsoft.com/ja-jp/hololens/buy
- 16. HoloLensの強い弱い -HoloLensおさらい- ここが強い ここが弱い •安定した位置追跡 •ケーブルレス、スタンドアロン - 装着コストが低い - 機動力が高い • 視野角が狭い - モデルの大きさや見せ方に工夫が必要 •CPU、GPU性能が低い - モデルの作りに工夫が必要 •値段が高い
- 17. HoloLensのある生活 -HoloLensおさらい- ← お手本 空間に自由にワークアプリを配置して作業できる ダメな例 → 空間に自由にtwitter、動画(アニメ)を配置できる
- 18. HoloLensの活用例 -HoloLensおさらい- Point ・既存の車への重畳表示 (カラーリング・フォルムなど) ・角度のシミュレーション (センサがどう働くか) ・音声アノテーション (技術者やデザイナーの空間ログ機能) ・サイドミラーシミュレーション Ford(自動車デザイン) https://www.youtube.com/watch?v=WZQ_DQD7F3U
- 19. HoloLensの活用例 -HoloLensおさらい- Point ・事前シミュレーション ・現場での情報および保守項目リスト ・遠隔支援および第3者による確認 ThyssenKrupp (保守・管理) https://www.youtube.com/watch?v=8OWhGiyR4Ns
- 20. HoloLensの活用例 -HoloLensおさらい- Point ・実寸大での表示 ・構造の理解 JAL (航空) https://www.youtube.com/watch?v=GjZgI2oDcwM
- 21. HoloLensの活用例 -HoloLensおさらい- Point ・Deep Learningを用いた顧客の好み抽出 ・家具配置シミュレーション ・行動解析(見ていた場所のヒートマップなど) LOWE’S (家具 キッチン) https://www.youtube.com/watch?v=gC_4JxF0e_k
- 22. HoloLensの活用例 -HoloLensおさらい- Point ・CTデータの閲覧 ロンドン大学 (医療) https://www.youtube.com/watch?v=TylDjQ1udZg
- 23. HoloLensの活用例 -HoloLensおさらい- Point ・建設するモデルを3Dで表示(空間共有) ・工程管理 ・文書や画像をHoloLens内に保存 小柳建設 (建設) https://www.youtube.com/watch?v=dW1amJLDwuQ
- 24. HoloLensの活用例 -HoloLensおさらい- Point ・建物完成イメージの視覚的理解 ネクストスケープ (不動産) https://www.nextscape.net/news/2017/05/20170523
- 26. Immersive おさらい
- 28. HoloLensとImmersiveの機能比較 -Immersiveおさらい- 機能 HoloLens Immersive headset 入力 Gaze ✓ ✓ Gestures ✓ Voice ✓ ✓ Gamepad ✓ ✓ Motion controllers ✓ 空間認識機能 ワールド座標 ✓ ✓ 空間音響 ✓ ✓ Spatial Mapping ✓ https://developer.microsoft.com/en- us/windows/mixed-reality/development_overview
- 29. Mixed Reality Headsetの種類 -Immersiveおさらい- https://www.microsoft.com/en-us/store/collections/vrandmixedrealityheadsets 項目 解像度 2880 x 1600 視野角 110度 ディスプレイ 有機EL ヘッドフォン+デュアルマイクロフォンアレイ IPD調整機構付き $499.00
- 33. 超簡単セットアップ -Immersiveおさらい- 難しいんじゃないの？ - ケーブルを挿すだけ。だいたい10分で終わる。 コントローラがないんだけど - Xboxコントローラでも大丈夫。なんならマウスとキーボードでも操作できる。 外部センサーは？ - いらなーい
- 36. Window Mixed Reality for SteamVR -Immersiveおさらい-
- 40. コラボレーティブ・コンピューティングとは - de:code - https://youtu.be/JxCUyhjwHW0?t=9m40sThe World of Hololens in 24 Months 透過型HMD PC 没入型HMD
- 42. Immersive & HoloLensの活用例 Cirque du Soleil (演劇) Point ・HoloLens/Immersiveデバイスそれぞれのユーザーで一つのステージを作り上げる https://www.youtube.com/watch?v=vNz5Rw6TwCw
- 43. Immersive & HoloLensの活用例 Mixed Reality 250 Windows Mixed Reality - Acer and HoloLens Side-By-Side - YouTube Point ・HoloLens/Immersiveデバイスを使った協調作業のサンプルプロジェクト
- 46. マイクロソフト Mixed Reality パートナープログラム Microsoft Mixed Reality Partner Program／複合現実パートナープログラムは、 HoloLensやImmersiveヘッドマウントディスプレイ(以下Immersive HMD)他、 Mixed Reality(以下MR)技術によるシステムやソリューションを展開する優れた企業 に対してMicrosoft社から提供される認定制度 https://www.microsoft.com/ja-jp/hololens/commercial-build#agency-buckets 要するに
- 47. 稲波脊椎・関節病院 × HoloLab 稲波脊椎・関節病院について 稲波脊椎・関節病院は、国内トップの年間1,590件(2015年実績)の脊 椎内視鏡下手術実績を持つ岩井グループが、2015年7月に2院目とし て品川区東品川に開院した腰・膝の専門病院です。 「高度で、かつ 身体への負担が少なく、安心を与えられる医療」を実践することを目 的とし、最新技術導入へも積極的に取り組んでいます。その一環とし てHoloLens／Mixed Realityの手術トレーニング環境への導入をホロ ラボと共同で検証しています。 •URL: http://www.iwai.com/inanami-sekitsui/ •Facebook Page : https://www.facebook.com/inanami.hospital/ • 手術室にあるモニターを極力減らしたい。 - モニターの設置コストを下げたり、広い場所がとれない手術室でも活用できる • 研修医を受け入れており研修が終わってからのサポートが課題。初期からHoloLensでトレー ニングを行い、遠隔でもサポートできるようにしたい。 課題
- 48. 稲波脊椎・関節病院 × HoloLab - 開発環境 - https://www.slideshare.net/decode2017/mr04- unity-hololens/29 HoloLens側 Unity 2017.1.2 Visual Studio 2015 update 3 Immersive側 Unity 2017.2 MRTP3 Visual Studio 2017.15.3 60FPSのための指針
- 49. 稲波脊椎・関節病院 × HoloLab – Mixed Reality - Mixed Reality Toolkitは、Microsoft HoloLensとWindows Mixed Reality headset を対象としたアプリケーションの 開発を加速するためのスクリプトとコン ポーネントの集まりです。このプロジェ クトは、複合現実感アプリケーションを 作成するための参入障壁を削減し、皆が 成長できるようコミュニティに貢献する ことを目的としています。 MixedRealityToolkit – Unityは MixedRealityToolkitをベースとしたコード を使用しており、Unityでの利用を容易に します。 統一感のあるUIのために
- 50. 稲波脊椎・関節病院 × HoloLab – Mixed Reality - HoloLensでもImmersiveでも同じような動きが作れる
- 51. 稲波脊椎・関節病院 × HoloLab – Mixed Reality - とりあえずこれを入れよう、3種のコンポーネント MixedRealityCameraParent: CameraとBoundary Managers: Gesture, GamePad, HandControllerの入力を扱うコンポーネント Cursor: Gazeカーソル HTKを直接いじるような実装をしていなければ、これらPrefabを入れ替える だけでMRTK2017.2の環境に移植できます (ハズです) 今回もHoloLensベースで開発してImmerisveに移植した
- 52. 稲波脊椎・関節病院 × HoloLab - HoloLens側 - ・電子カルテをHoloLens画面内に表示 - モニターがなくなる ・トレーニング - 3Dオブジェクトの操作 (Bounding Box) - Sharing機能で同じ場所で同じモデルを見なが らコミュニケーションを行える Point 使用時間が長いアプリには、バッテリーと時間が分 かるようにしておくと便利 バッテリー残量は、 SystemInfo.batteryLevel でとれる
- 54. 稲波脊椎・関節病院 × HoloLab ・ビデオチャット (WebRTC) HoloLensのMixed Reality Capture(MRC)映像とマイクか らの音声をWebRTCで遠隔地のコンピューターに送信 (ThyssenKrupp社の事例にあるものを独自実装)
- 57. 稲波脊椎・関節病院 × HoloLab – まとめ - ・業界に依存しない、汎用的な仕組みづくりができた ・MRTKを使うと統一感のあるUIづくりができる ・でもツラミはいっぱい！
- 58. 頭募集中