20200326 jetson edge comuputing digital seminar 2
•
1 gefällt mir•393 views
Presentation by Masanori Ooka on March 26, 2020 at Jetson edge comuputing digital seminar, online event.
Empfohlen
Empfohlen
Weitere ähnliche Inhalte
Was ist angesagt?
Was ist angesagt? (20)
Ähnlich wie 20200326 jetson edge comuputing digital seminar 2
Ähnlich wie 20200326 jetson edge comuputing digital seminar 2 (20)
Mehr von NVIDIA Japan
Mehr von NVIDIA Japan (20)
Kürzlich hochgeladen
Kürzlich hochgeladen (7)
20200326 jetson edge comuputing digital seminar 2
- 1. NVIDIA JAPAN & Macnica, Inc. NVIDIA JETSON EGDE COMPUTING DIGITAL SEMINAR VOL. 1 ～17:00 よりスタートします～
- 2. 2 アジェンダとご連絡 • 音声はミュートさせて頂きます。ご質問などあればWebexのチャットでお願いします。 • 但し、Jetson Xavier NX 開発キットに関しては本日時点でお出しできる情報がありません。 • 本日のセミナーは録画し、後で資料とともにシェアできるようにいたします。 • 不慣れな点などあるかと思いますが、どうか温かい心をもって参加御願いします。 • Jetson エッジ AI コンピューティング プラットフォーム • エヌビディア合同会社 大岡正憲 • Jetson ソリューション紹介 • 株式会社マクニカ クラビスカンパニー 田中 翔志也
- 3. 2020/3/26 エヌビディア合同会社 インダストリー事業部 ビジネスデベロップメントマネージャー 大岡正憲 JETSON エッジ AI コンピューティング プラットフォーム
- 4. 広がるインテリジェントマシン 倉庫 デリバリー 農業 産業小売り
- 5. 5 スマート化する世界 オールウェイズ・オン | 瞬間的なセンシングー推論ー行動 | 遠隔 | 膨大なデータ
- 7. 7 NVIDIA JETSON ソフトウェア デファインド AIエッジコンピューティングプラットフォーム センサーフュージョン & 演算性能 専門知識、タイムトゥマーケット JETSON COMPUTER エコシステムソフトウェアデファインド Jetpack SDK ∙ CUDA ∙ TensorRT ∙ TensorFlow ∙ ONMX ∙ ROS 人工知能 コンピュータービジョン アクセラレーテッドコンピューティング マルチメディア ジェスチャー認識 物体検出パスプラニング planning 深度推定 姿勢推定 言語認識 SDK、デザインツール、ライブラリー、GEMs 動作 センシング 解釈 エッジでのAI
- 8. 8 JETSON ファミリー エッジでのAIから自律動作システムまで 同じソフトウェア 詳細の製品仕様はホームページにて https://developer.nvidia.com/embedded-computing * TX2i: 10-20W 7.5 – 15W* 50mm x 87mm JETSON TX2 series 1.3 TFLOPS (FP16) 5 - 10W 45mm x 70mm JETSON NANO 0.5 TFLOPS (FP16) 10 – 30W 100mm x 87mm JETSON AGX XAVIER Series 11 TFLOPS (FP16) 32 TOPS (INT8) 10 - 15W 45mm x 70mm JETSON Xavier NX 6 TFLOPS (FP16) 21 TOPS (INT8) エッジでのAI 完全自律動作マシン
- 9. 9 JETSON ソフトウェア NsightDeveloperTools Jetson DeepStream & Isaac SDKs Modules Depth estimation Path planning Object detection Gesture recognition Ecosystem modules Pose estimation … CUDA • Linux • RTOS libargus Video API Multimedia VisionWorks OpenCV Computer Vision TensorRT cuDNN Deep Learning Sensors Drivers Ecosystem JetPackSDK Accelerated Computing cuBLAS cuFFT Jetson software: https://developer.nvidia.com/embedded/develop/software CUDA-X
- 11. 11 JETSON COMMUNITY PROJECT tf-Pose-Estimationとは単眼カメラで人間の骨格検出を行う ソフトウェア CMUで開発されたOpenPoseに改良を加えたもの （商業利用には別途ライセンスが必要） Raspberry Piカメラに対応するソフトウェアを使用 Jetson Nanoへの実装で、7-8 fpsの速度を達成 https://qiita.com/karaage0703/items/1f6f4f19e6231 02715bb https://github.com/karaage0703/jetson-nano-tools tf-Pose-Estimation の Jetson Nanoへの実装
- 12. 12 「JETSON NANO 超入門」 Jetson Japan User Group の皆様の著書 https://www.facebook.com/groups/jsjug/ https://jsjug.connpass.com/event/159548/ Jetson Japan User Group の情報
- 13. 13 JETBOT • NVIDIAがGitHubで作り方、サンプルコード、BOMリストなどすべての情 報を公開 https://github.com/NVIDIA-AI-IOT/jetbot • ロボティクスとディープラーニングの習得に最適 • Jupiter Notebookで実行 • 衝突回避、物体追従、白線追従 • 世界中の多くのパートナー企業が独自のJetBotキットを販売 • https://www.nvidia.com/ja-jp/autonomous-machines/embedded- systems/jetbot-ai-robot-kit/ • 日本ではFabo, ALGYAN, ヴィストンから購入可能 https://fabo.store/collections/frontpage/products/jetbot-kit https://jetbot.algyan.biz/ https://www.vstone.co.jp/robotshop/index.php?main_page=product _info&products_id=5267 https://www.vstone.co.jp/robotshop/index.php?main_page=product _info&products_id=5282 • 世界中のユーザーが独自のJetBotを作ってSNSで公開
- 14. 14 JETSON NANO DLI NVIDIAが提供するDeep Learning Institute (DLI) コンテンツ https://www.nvidia.com/ja-jp/deep-learning-ai/education/ • このコースで学べる内容 • Jetson Nano とカメラの設定 • 分類モデル構築のための画像データ収集 • 収集した画像データのアノテーション • 自分で収集してアノテーションしたデータを用いてニューラル ネットワークのトレーニングを 行い、独自のモデルを作成 • 作成したモデルをJetson Nano にデプロイして推論を実行 • 概要 • 受講条件: Python の知識 (必須ではありませんが役立ちます) • ツール、ライブラリ、フレームワーク: PyTorch、Jetson Nano • 時間: 8 時間 • 言語: 英語 / 日本語 • 価格: 無料 • 証明書: 修了認定あり
- 15. 15 DEEP LEARNING INSTITUTE(DLI) https://courses.nvidia.com/courses/course-v1:DLI+C-RX-02+V1-JA/about
- 16. 16NVIDIA CONFIDENTIAL. DO NOT DISTRIBUTE. GTC DIGITAL コンテンツ - 無料で公開 コンテンツ一覧 https://www.nvidia.com/en-us/gtc/session-catalog-details/?search=#/ 米国時間2020年3月26日にオンデマンドで公開、毎週木曜事に新しいセッションが追加されます。 [S22410] NVIDIA Webinar: NVIDIA Jetson: Enabling AI-Powered Autonomous Machines at Scale [S21389] NVIDIA Webinar: Designing Products for Jetson Nano [S22676] NVIDIA Webinar: Developing Real-Time Neural Networks for Jetson [S21118] Microsoft: Productionizing GPU Accelerated IoT Workloads at the Edge [S21182] BMW: Leveraging NVIDIA’s Technology for the Ultimate Industrial Autonomous Transport Robot [S22396] RidgeRun: How to Build a Multi-Camera Media Server for AI Processing on Jetson [S21945] NVIDIA Webinar: Isaac Sim 2020 Deep Dive [S21918] MiR: AI in Autonomous Mobile Robots [S22100] NVIDIA Webinar: NVIDIA Tools to Train, Build, and Deploy Intelligent Vision Applications at the Edge [S21905] AiFi: Building Autonomous Store Platform for Everyone [S22110] Wistron: Smart Factory: How AI Enables Smart Manufacturing [S21792] Signatrix: Improving Asset Protection Using Embedded Deep Learning at Scale in Supermarkets
- 18. 2 0 2 0 年 3 月 2 6 日 株 式 会 社 マ ク ニ カ ク ラ ビ ス カ ン パ ニー プ ロ ダ ク ト セ ー ルス 第1 部 第 1 課 ： 田 中 翔 志 也 Jetsonソリューション紹介
- 19. 19 AGENDA マクニカ会社概要 Jetson Box 関連ソリューション • 外観検査パッケージ（Halcon） • ITD-Labの３D検知システム Jetson 向けSDK & OS • 骨格検知（VisionPose） • RTOS（RedHawk） Jetson ハンズオン事例 • JetBot / JetRacer • 外観検査（MATLAB） Jetsonシリーズの選び方 19
- 20. 20 マクニカ会社概要 2 最先端サイバーセキュ リティソリューション IoT / AIを中心とした DX推進 1,000名 を超える 多様な技術に精通したエンジニアが 最新技術の導入をサポート 24ヵ国・地域 81拠点 に社員を擁し 全世界に展開 2018年度売上 5,242億円 2018年4月~2019年3月期 海外最先端技術 H/W・S/Wの導入支援 事業領域 Confidential
- 22. 22 HPC & Cloud データセンター GEFORCE TITAN SHIELD QUADRO TESLA GRID JETSON DRIVE インテリジェントマシン DGX *GEFORCE/TITAN 搭載ボックスはご用意可能です ゲーミング エンタープライズ グラフィックス マクニカ取扱い領域 事業領域
- 24. 24 外観検査パッケージ 製品概要 下記3点をまとめた検証済みキッティングセット • 画像処理ライブラリ：HALCON • Baslar社のカメラ、レンズ他 • NVIDIA Jetson™搭載のエッジ端末 活用事例 採血管の良否判定 ナンバープレート認識 https://www.macnica.co.jp/business/semiconductor/articles/nvidia/133764/ Jetson TX2版 Jetson AGX Xavier版
- 25. 25 ３D物体検知パッケージ ISC ステレオカメラ ３D物体情報 位置情報 物体検知 AI 2D画像認識 ※ISC：Intelligent Stereo Camera ITD Labステレオカメラ ＋ 障害物検知ソフト ソフト実装先例： Connect Tech Inc.製 GPU Box NVIDIA JETSON TX2内蔵 ※その他Jetson内臓機器への実装も可能です。 物体検知ソリューション 構成例 ３D情報とAI画像認識を1システムに統合 AIによる画像認識にステレオカメラの３D情報をリアルタイムに統合 未学習の物体も障害物として検出可能 単眼カメラ＋Lidar方式で必要な座標計算が不要 https://www.macnica.co.jp/business/maas/products/604/
- 26. Jetson 向けSDK & OS
- 27. NEXT-SYSTEM
- 28. 28 VisionPose • VisionPoseとは？ • Kinect や赤外線などによる深度センサ付きカメラに頼らず、Deep Learning を活用し、 汎用的なWebカメラのみで人間の骨格や深度情報を検出する AI システムです。 • 精度に優れた唯一の国産製品 • 従来の製品よりも精度が高く、複数人のボーン検出に秀でています。 国内生産・国内製品であるため、お客様のご要望に対し迅速に対応する事が可能です。 • 赤外線センサ付きカメラの課題 ① 正面の骨格しか取れず、背面を認識すると正面として誤認識... ② 正面から背面へ切り替わるタイミングで左右の逆転が起こる... ③ 真上から骨格が取れない... ④ 赤外線のため屋外の認識が難しい... ⑤ 赤外線を吸収してしまう服装に弱い... ⑥ 赤外線によるDepthマップのみの認識（カラー不使用）であるため、 障害物と人の区別が付き辛く、体の一部が隠れたりモノを持つ動作に弱い...
- 31. 31
- 32. 32 Jetson & Realtime OS RedHawk for Jetson – JetPack – L4T 業界標準のリアルタイム性を持ち、タイムク リティカルなハードリアルタイム環境を提供。 モデリング、シミュレーション、データ収集、 産業制御、イメージングシステム等 幅広い決定論的アプリに最適 RedHawk • 複雑なマルチプロセッササーバ構成から組込み向け シングルボードコンピュータまで、幅広いアプリ ケーション向けに設計されたリアルタイムOSです。
- 33. ハンズオン事例
- 34. 34 JetBot / JetRacerハンズオンセミナー https://www.macnica.co.jp/business/semiconductor/articles/nvidia/133968 / セミナー開催目的 ・企業や学校のAI導入を支援する ・座学ではなく手を動かす事で理解を深める 学べる事 ・学習から推論までのディープラーニングの基礎 学習：データセット作成とPyTorchを使った学習 推論：生成した学習モデルを使った自立走行 JetBot JetRacer イベントレポート
- 36. 36 Jetsonシリーズ&開発キットの選び方 https://www.macnica.co.jp/business/semiconductor/articles/nvidia/133162/ 選ぶポイント ・価格 ・処理能力 ・消費電力 開発キットの購入方法 ・弊社へお問い合わせ ・スイッチサイエンス社(Nano、Xavier) 採用アーキテクチャの違い Jetsonシリーズ比較ページ
- 37. 37
- 38. 38 最後に • 資料はCONNPASSにアップロード致します。 https://nvidia.connpass.com/event/171723/ • 次回は4月7日（火）17:00-17:40 で開催します。 • CUDAの基礎をお話しする予定です。 • 本日は御視聴ありがとうございました!!!