20200326 jetson edge comuputing digital seminar 1 final
•
0 j'aime•337 vues
Presentation by Masanori Ooka at NVIDIA Jetson Edge Computing Digital Seminar Vol.1. March 26, 2020
Recommandé
Recommandé
Contenu connexe
Tendances
Tendances (19)
Similaire à 20200326 jetson edge comuputing digital seminar 1 final
Similaire à 20200326 jetson edge comuputing digital seminar 1 final (20)
Plus de NVIDIA Japan
Plus de NVIDIA Japan (20)
Dernier
Dernier (7)
20200326 jetson edge comuputing digital seminar 1 final
- 1. NVIDIA JAPAN & Macnica, Inc. NVIDIA JETSON EGDE COMPUTING DIGITAL SEMINAR VOL. 1 ～17:00 よりスタートします～
- 2. 2 アジェンダとご連絡 • 音声はミュートさせて頂きます。ご質問などあればWebexのチャットでお願いします。 • 但し、Jetson Xavier NX 開発キットに関しては本日時点でお出しできる情報がありません。 • 本日のセミナーは録画し、後で資料とともにシェアできるようにいたします。 • 不慣れな点などあるかと思いますが、どうか温かい心をもって参加御願いします。 • Jetson エッジ AI コンピューティング プラットフォーム • エヌビディア合同会社 大岡正憲 • Jetson ソリューション紹介 • 株式会社マクニカ クラビスカンパニー 田中 翔志也
- 4. 広がるインテリジェントマシン 倉庫 デリバリー 農業 産業小売り
- 5. 5 スマート化する世界 オールウェイズ・オン | 瞬間的なセンシングー推論ー行動 | 遠隔 | 膨大なデータ
- 7. 7 NVIDIA JETSON ソフトウェア デファインド AI エッジコンピューティングプラットフォーム センサーフュージョン & 演算性能 専門知識、タイムトゥマーケット JETSON COMPUTER エコシステムソフトウェアデファインド Jetpack SDK ∙ CUDA ∙ TensorRT ∙ TensorFlow ∙ ONMX ∙ ROS 人工知能 コンピュータービジョン アクセラレーテッドコンピューティング マルチメディア ジェスチャー認識 物体検出パスプラニング planning 深度推定 姿勢推定 言語認識 SDK、デザインツール、ライブラリー、GEMs 動作 センシング 解釈 エッジでのAI
- 8. 8 JETSON ファミリー エッジでのAIから自律動作システムまで 同じソフトウェア 詳細の製品仕様はホームページにて https://developer.nvidia.com/embedded-computing * TX2i: 10-20W 7.5 – 15W* 50mm x 87mm JETSON TX2 series 1.3 TFLOPS (FP16) 5 - 10W 45mm x 70mm JETSON NANO 0.5 TFLOPS (FP16) 10 – 30W 100mm x 87mm JETSON AGX XAVIER Series 11 TFLOPS (FP16) 32 TOPS (INT8) 10 - 15W 45mm x 70mm JETSON Xavier NX 6 TFLOPS (FP16) 21 TOPS (INT8) エッジでのAI 完全自律動作マシン
- 9. 9 JETSON ソフトウェア NsightDeveloperTools Jetson DeepStream & Isaac SDKs Modules Depth estimation Path planning Object detection Gesture recognition Ecosystem modules Pose estimation … CUDA • Linux • RTOS libargus Video API Multimedia VisionWorks OpenCV Computer Vision TensorRT cuDNN Deep Learning Sensors Drivers Ecosystem JetPackSDK Accelerated Computing cuBLAS cuFFT Jetson software: https://developer.nvidia.com/embedded/develop/software CUDA-X
- 11. 11 JETSON COMMUNITY PROJECT tf-Pose-Estimationとは単眼カメラで人間の骨格検出を行う ソフトウェア CMUで開発されたOpenPoseに改良を加えたもの （商業利用には別途ライセンスが必要） Raspberry Piカメラに対応するソフトウェアを使用 Jetson Nanoへの実装で、7-8 fpsの速度を達成 https://qiita.com/karaage0703/items/1f6f4f19e6231 02715bb https://github.com/karaage0703/jetson-nano-tools tf-Pose-Estimation の Jetson Nanoへの実装
- 12. 12 「JETSON NANO 超入門」 Jetson Japan User Group の皆様の著書 https://www.facebook.com/groups/jsjug/ https://jsjug.connpass.com/event/159548/ Jetson Japan User Group の情報
- 13. 13 JETBOT • NVIDIAがGitHubで作り方、サンプルコード、BOMリストなどすべての情 報を公開 https://github.com/NVIDIA-AI-IOT/jetbot • ロボティクスとディープラーニングの習得に最適 • Jupiter Notebookで実行 • 衝突回避、物体追従、白線追従 • 世界中の多くのパートナー企業が独自のJetBotキットを販売 • https://www.nvidia.com/ja-jp/autonomous-machines/embedded- systems/jetbot-ai-robot-kit/ • 日本ではFabo, ALGYAN, ヴィストンから購入可能 https://fabo.store/collections/frontpage/products/jetbot-kit https://jetbot.algyan.biz/ https://www.vstone.co.jp/robotshop/index.php?main_page=product _info&products_id=5267 https://www.vstone.co.jp/robotshop/index.php?main_page=product _info&products_id=5282 • 世界中のユーザーが独自のJetBotを作ってSNSで公開
- 14. 14 JETSON NANO DLI NVIDIAが提供するDeep Learning Institute (DLI) コンテンツ https://www.nvidia.com/ja-jp/deep-learning-ai/education/ • このコースで学べる内容 • Jetson Nano とカメラの設定 • 分類モデル構築のための画像データ収集 • 収集した画像データのアノテーション • 自分で収集してアノテーションしたデータを用いてニューラル ネットワークのトレーニングを 行い、独自のモデルを作成 • 作成したモデルをJetson Nano にデプロイして推論を実行 • 概要 • 受講条件: Python の知識 (必須ではありませんが役立ちます) • ツール、ライブラリ、フレームワーク: PyTorch、Jetson Nano • 時間: 8 時間 • 言語: 英語 / 日本語 • 価格: 無料 • 証明書: 修了認定あり
- 15. 15 DEEP LEARNING INSTITUTE(DLI) https://courses.nvidia.com/courses/course-v1:DLI+C-RX-02+V1-JA/about
- 16. 16NVIDIA CONFIDENTIAL. DO NOT DISTRIBUTE. GTC DIGITAL コンテンツ - 無料で公開 コンテンツ一覧 https://www.nvidia.com/en-us/gtc/session-catalog-details/?search=#/ 米国時間2020年3月26日に公開、毎週木曜ごとに新しいセッションが追加されます。 [S22410] NVIDIA Webinar: NVIDIA Jetson: Enabling AI-Powered Autonomous Machines at Scale [S21389] NVIDIA Webinar: Designing Products for Jetson Nano [S22676] NVIDIA Webinar: Developing Real-Time Neural Networks for Jetson [S21118] Microsoft: Productionizing GPU Accelerated IoT Workloads at the Edge [S21182] BMW: Leveraging NVIDIA’s Technology for the Ultimate Industrial Autonomous Transport Robot [S22396] RidgeRun: How to Build a Multi-Camera Media Server for AI Processing on Jetson [S21945] NVIDIA Webinar: Isaac Sim 2020 Deep Dive [S21918] MiR: AI in Autonomous Mobile Robots [S22100] NVIDIA Webinar: NVIDIA Tools to Train, Build, and Deploy Intelligent Vision Applications at the Edge [S21905] AiFi: Building Autonomous Store Platform for Everyone [S22110] Wistron: Smart Factory: How AI Enables Smart Manufacturing [S21792] Signatrix: Improving Asset Protection Using Embedded Deep Learning at Scale in Supermarkets
- 18. 2 0 1 9 年 3 月 2 6 日 株 式 会 社 マ ク ニ カ ク ラ ビ ス カ ン パ ニー プ ロ ダ ク ト セ ー ルス 第1 部 第 1 課 ： 田 中 翔 志 也 Jetsonソリューション紹介
- 19. 19 AGENDA マクニカ会社概要 Jetson Box 関連ソリューション • 外観検査パッケージ（Halcon） • ITD-Labの３D検知システム Jetson 向けSDK & OS • 骨格検知（VisionPose） • RTOS（RedHawk） Jetson ハンズオン事例 • JetBot / JetRacer • 外観検査（MATLAB） Jetsonシリーズの選び方 19
- 20. 20 マクニカ会社概要 最先端サイバーセキュ リティソリューション IoT / AIを中心とした DX推進 1,000名 を超える 多様な技術に精通したエンジニアが 最新技術の導入をサポート 24ヵ国・地域 81拠点 に社員を擁し 全世界に展開 2018年度売上 5,242億円 2018年4月~2019年3月期 海外最先端技術 H/W・S/Wの導入支援 事業領域 Confidential
- 21. 21 マクニカ会社概要 2Confidential 1,000名 を超える 多様な技術に精通したエンジニアが 最新技術の導入をサポート 24ヵ国・地域 81拠点 に社員を擁し 全世界に展開 2018年度売上 5,242億円 2018年4月~2019年3月期 海外最先端技術H/W・ S/Wの導入支援 最先端サイバーセキュ リティソリューション 事業領域 IoT / AIを中心とした DX推進
- 22. 22 HPC & Cloud データセンター GEFORCE TITAN SHIELD QUADRO TESLA GRID JETSON DRIVE インテリジェントマシン DGX *GEFORCE/TITAN 搭載ボックスはご用意可能です ゲーミング エンタープライズ グラフィックス マクニカ取扱い領域 事業領域
- 24. 24 外観検査パッケージ 製品概要 下記3点をまとめた検証済みキッティングセット • 画像処理ライブラリ：HALCON • Baslar社のカメラ、レンズ他 • NVIDIA Jetson™搭載のエッジ端末 活用事例 採血管の良否判定 ナンバープレート認識 https://www.macnica.co.jp/business/semiconductor/articles/nvidia/133764/ Jetson TX2版 Jetson AGX Xavier版
- 25. 25 ３D物体検知パッケージ ISC ステレオカメラ ３D物体情報 位置情報 物体検知 AI 2D画像認識 ※ISC：Intelligent Stereo Camera ITD Labステレオカメラ ＋ 障害物検知ソフト ソフト実装先例： Connect Tech Inc.製 GPU Box NVIDIA JETSON TX2内蔵 ※その他Jetson内蔵機器への実装も可能です。 物体検知ソリューション 構成例 ３D情報とAI画像認識を1システムに統合 AIによる画像認識にステレオカメラの３D情報をリアルタイムに統合 未学習の物体も障害物として検出可能 単眼カメラ＋Lidar方式で必要な座標計算が不要 https://www.macnica.co.jp/business/maas/products/604/
- 26. Jetson 向けSDK & OS
- 27. NEXT-SYSTEM
- 28. 28 VisionPose • VisionPoseとは？ • Kinect や赤外線などによる深度センサ付きカメラに頼らず、Deep Learning を活用し、 汎用的なWebカメラのみで人間の骨格や深度情報を検出する AI システムです。 • 精度に優れた唯一の国産製品 • 従来の製品よりも精度が高く、複数人のボーン検出に秀でています。 国内生産・国内製品であるため、お客様のご要望に対し迅速に対応する事が可能です。 • 赤外線センサ付きカメラの課題 ① 正面の骨格しか取れず、背面を認識すると正面として誤認識... ② 正面から背面へ切り替わるタイミングで左右の逆転が起こる... ③ 真上から骨格が取れない... ④ 赤外線のため屋外の認識が難しい... ⑤ 赤外線を吸収してしまう服装に弱い... ⑥ 赤外線によるDepthマップのみの認識（カラー不使用）であるため、 障害物と人の区別が付き辛く、体の一部が隠れたりモノを持つ動作に弱い...
- 31. 31
- 32. 32 Jetson & Realtime OS RedHawk for Jetson – JetPack – L4T 業界標準のリアルタイム性を持ち、タイムク リティカルなハードリアルタイム環境を提供。 モデリング、シミュレーション、データ収集、 産業制御、イメージングシステム等 幅広い決定論的アプリに最適 RedHawk • 複雑なマルチプロセッササーバ構成から組込み向け シングルボードコンピュータまで、幅広いアプリ ケーション向けに設計されたリアルタイムOSです。
- 33. ハンズオン事例
- 34. 34 JetBot / JetRacerハンズオンセミナー https://www.macnica.co.jp/business/semiconductor/articles/nvidia/133968 / セミナー開催目的 ・企業や学校のAI導入を支援する ・座学ではなく手を動かす事で理解を深める 学べる事 ・学習から推論までのディープラーニングの基礎 学習：データセット作成とPyTorchを使った学習 推論：生成した学習モデルを使った自立走行 JetBot JetRacer イベントレポート
- 36. 36 Jetsonシリーズ&開発キットの選び方 https://www.macnica.co.jp/business/semiconductor/articles/nvidia/133162/ 選ぶポイント ・価格 ・処理能力 ・消費電力 開発キットの購入方法 ・弊社へお問い合わせ ・スイッチサイエンス社(Nano、Xavier) 採用アーキテクチャの違い Jetsonシリーズ比較ページ
- 37. 37
- 38. 38 最後に • 資料はCONNPASSにアップロード致します。 https://nvidia.connpass.com/event/171723/ • 次回は4月7日（火）17:00-17:40 で開催します。 • CUDAの基礎をお話しする予定です。 • 本日は御視聴ありがとうございました!!!