ABEJAの映像解析を支える仕組みとRancher - Japan Container Days v18.12
•
3 gefällt mir•17,839 views
12/4に発表させていただきました
Empfohlen
Empfohlen
Weitere ähnliche Inhalte
Was ist angesagt?
Was ist angesagt? (20)
Ähnlich wie ABEJAの映像解析を支える仕組みとRancher - Japan Container Days v18.12
Ähnlich wie ABEJAの映像解析を支える仕組みとRancher - Japan Container Days v18.12 (20)
ABEJAの映像解析を支える仕組みとRancher - Japan Container Days v18.12
- 1. ABEJAの映像解析を⽀える仕組みと Rancher Japan Container Days v18.12 1C4 スポンサーセッション ABEJA Inc. Development Division ⼤⽥黒 紘之
- 2. 大田黒 紘之 @xecus ABEJA, Inc. Development Division Engineer 2015年新卒入社 • Device Development • Infrastructure • Video Analysis Application • DeepLearning
- 5. AGENDA ・会社・サービス紹介 (5min) ・バックエンドのご紹介 (5min) ・ABEJAにおけるRancher活⽤ (10min) ・導⼊の背景・活⽤状況 ・導⼊して良かったコト 今困っているコト ・今後の展望
- 6. ゆたかな世界を、実装する ― Implement a Fruitful World ― 社名 株式会社ABEJA (ABEJA Inc.) 本社 東京都港区⽩⾦1-17-3 NBFプラチナタワー 代表者 代表取締役社⻑CEO 岡⽥ 陽介 設⽴ 2012年9⽉10⽇ Vision イノベーションで世界を変える 出資企業 NVIDIA 三菱UFJキャピタル株式会社 株式会社産業⾰新機構 みずほキャピタル株式会社 伊藤忠商事株式会社 株式会社インスパイア 東芝テック株式会社 ダイキン⼯業株式会社 株式会社セールスフォース・ドットコム 株式会社トプコン 株式会社NTTドコモベンチャーズ 武蔵精密⼯業株式会社 代表取締役社⻑ CEO 兼 CTO 岡⽥ 陽介 取締役 CRO（最⾼研究責任者） 緒⽅ 貴紀 取締役 COO 兼 CFO 外⽊ 直樹 取締役 ファウンダー 富松 圭介
- 8. 2012
- 9. ABEJA Platform 取得 蓄積 学習 デプロイ 推論・再学習
- 11. IaaS Cloud PaaS Processor On-premise Data Center API
- 13. Copyright © 2018 ABEJA, Inc. All rights reserved.
- 14. Copyright © 2018 ABEJA, Inc. All rights reserved.
- 16. Insight for Retail 導入規模の変化 0 500 1000 1500 2000 2015年 2016年 2017年 100台 (10社50店舗) 800台 (30社200店舗) 1900台 (100社480店舗) 導入デバイス数
- 17. 導入企業様
- 18. サービス規模 Video Traffic 10TB / Day Containers 7,000+
- 22. ⾃社開発カメラ (+LiDAR) 汎⽤ネットワーク カメラ POS・IoTデバイス 映像録画 システム ダッシュボード システム メール配信 システムデータ変換システム 可視化＆配信系 各種運⽤ツール群（監視系、管理ツール等) 映像解析システム Powered By Support Members ABEJA Insight For Retail サービス基盤全体像
- 27. Rancher導⼊背景 ・Prod利⽤開始: 2017年11⽉頃 (ちょうど1年たちました🎉) ・今年の頭にDocker Swarmから移⾏ ⇨ 2016年初旬に構築した録画基盤でいくつか課題があり、基盤を 改修するタイミングがあった ⇨さくさくと検証が進み、試験的なProd投⼊を決意。 問題なかった為、全てRancher移⾏を完了 (2018年1⽉)
- 28. Rancher導⼊規模 ・導⼊規模 ・Rancher ノード数 +300台 ・数千コンテナを運⽤中 ・トラフィック +10TB/Day ・コンテナベースの録画基盤 のBEに利⽤
- 29. 旧録画基盤 (~2018/1) Node Node Node Node Node Node ・・・ ・・・ Node Node Node Node Node Node ・・・ ・・・ Node Node Node Node Node Node ・・・ ・・・ DockerSwarm Master KVS Cluster(ETCD) Configuration Manager Router Router Router
- 30. 旧録画基盤 (~2018/1) サブネット増設 コスト 構成管理Master の⾼負荷 OSが古くなってきた MasterServer⾼負荷 & SPOF Node Node Node Node Node Node ・・・ ・・・ Node Node Node Node Node Node ・・・ ・・・ Node Node Node Node Node Node ・・・ ・・・ DockerSwarm Master KVS Cluster(ETCD) Configuration Manager Router Router Router CLIベースのオペレーション
- 36. API Server & DeployWorker 社内ツール フロント ログ基盤 KVS (ステート管理⽤) 録画⽤ Rancherクラスタ 論理リージョン(A) 録画⽤ Rancherクラスタ 論理リージョン(B) 録画⽤ Rancherクラスタ 論理リージョン(C) プライベート コンテナリポジトリ コンテナ・VMイメージ ⽣成パイプライン 物理リージョン
- 38. リージョンの構成 L2 Switch VPC Router ・ V R R P MySQL with HA Cluster Rancher Master Node Clusters Monitoring (Others) L2 Switch VPC Router ・ V R R P MySQL with HA Cluster Rancher Master Node Clusters Monitoring (Others) L2 Switch VPC Router ・ V R R P MySQL with HA Cluster Rancher Master Node Clusters Monitoring (Others) ※独⽴したRancherクラスタ1単位
- 43. (余談) DS基盤としての利⽤
- 44. Master Control Plane Node Node 1 (SuperMachine) Rancher 2.0 Dask Scheduler (label) DASK Worker x N Node N (SuperMachine)・・・ Logic A Logic B Logic C
- 47. Thank you !!