SlideShare ist ein Scribd-Unternehmen logo
1 von 21
Downloaden Sie, um offline zu lesen
Databricks触ってみた
@re:Invent2022
クラスメソッド株式会社
アライアンス統括部
エンジニアグループ
マネージャ
兼本 侑始
3
自己紹介
兼本侑始(かねもとゆうじ)
クラスメソッド株式会社
アライアンス統括部 テクニカルグループ
マネージャ&プリセールススペシャリスト
兼 Modern Data Stack BizDev担当
● 入社:2018年8月
● 妻、長男(中1)、次男(黒猫・2歳)、長女(さび猫・2歳)
● Re:Invent 2019に参加して、今回3年ぶり2回目の参加です
クラスメソッドについて
オープンな発想と高い技術力によりすべての人々の創造活動に貢献し続ける
代表者
設 立
本 社
拠 点
資本金
従業員
認定
横田 聡
2004年7月7日
東京都千代田区神田佐久間町1丁目11番地
産報佐久間ビル8階
東京、札幌、新潟、大阪、 名古屋、岡山、福岡、沖縄、
ベルリン、バンクーバー、インド、タイ
100,000,000円
700名(2022年3月時点/グループ全体 )
事業内容
関連会社
その他
• クラウド(AWS)に関するコンサルティング、設計、構築、運用
• ビッグデータ分析基盤に関するコンサルティング、設計、構築、運用
• モバイルアプリケーションに関する企画、デザイン、開発、運営
• マーケティング・システム構築のためのサービス
「カスタマーストーリー」の企画、開発、運用
• 音声認識(Amazon Alexa)技術に関するコンサルティング
• サーバーレスアーキテクチャに関するコンサルティング、構築、運用
• アノテーション株式会社( http://an.classmethod.jp/)
• アンダースコア株式会社( http://us.classmethod.jp/ )
• プリズマティクス株式会社( https://prismatix.jp/ )
• 東京都BCP策定支援事業(東京発 チーム事業継続)
• 短時間正社員制度導入支援事業(厚生労働省支援)
• ワーク・ライフ・バランス推進宣言企業(新宿区支援)
• 平成23年度男性の育児・介護サポート企業認定(新宿区支援)
• 平成23年度ワーク・ライフ・”ベスト”バランス賞受賞(新宿区)
• 平成24年度東京ワークライフバランス認定企業(東京都)
• Fun to Share(気候変動キャンペーン)賛同登録企業(環境省)
• ISMS委員会
• 安全衛生委員会
4
主要サービス
CX
(Customer Experience)
AWS
(Amazon Web Services)
DA
(Data Analytics)
AWS総合支援サー
ビス
モバイルアプリ開発
IoT/Serverless
LINE
Developers.IO Cafe
● 請求代行
● コンサル
● 構築
● 運用保守
データ分析基盤構築
Machine Learning
(SageMaker)
SaaS製品
(Alliance Service)
内製化支援
MDS(Modern Data Stack )
DevOps
Security
Jamstack
databricksについてサクッと知りたい
データブリックス クイックスタートガイド
1章 Databricks(データブリックス)とは?
2章 データブリックスのセットアップ
3章 データブリックスを使ってみる
4章 ユースケース別ガイド
5章 ツール連携
6章 MLOpsの実現に向けて
Amazonで99円(Kindle版)で購入できます
https://www.amazon.co.jp/gp/product/B09V1YXFVQ
Qiitaに日本語記事あります
https://qiita.com/tags/databricks
やってみた
アカウント作成
● アカウント作成までの流れは非常
にシンプル
● 使用しているクラウドに依存せず、
同じUI、機能を利用できるのはあ
りがたい
(AWSの場合)CloudFormationのテンプレートから構築
日本語のUIも用意されています
サンプルデータも用意されています
ラスベガスのUFO目撃情報がわかる?!
…かもしれないんですが、
今回は時間の都合上、スキップします
Delta Live Tablesデータ(サンプル)のスキーマ作成
データパイプラインの実行
パイプライン実行状態の確認
データ可視化(の準備)
データ可視化(実行結果)
まとめ
● databricksなら…
○ パブリッククラウドで使い勝手が同じ
○ インフラレイヤーのことを考えなくていい
○ sparkなんもわからんでも大丈夫そう
○ データを扱うならsqlの原則?にのった運用ができる
● クラスメソッドなら…
○ AWSマーケットプレイスからdatabricksを利用可能なので、メ
ンバーズ加入済みであれば請求を纏められます
○ 構築やコンサルティングについては個別にご相談ください
※未承諾広告
Modern Data Stack(MDS)アーキテクチャ
ご清聴ありがとうございました

Weitere ähnliche Inhalte

Ähnlich wie Databricks触ってみた.pdf

Ähnlich wie Databricks触ってみた.pdf (20)

グローバル企業の中で「変化」を仕掛ける楽天技術研究所 Rakuten Institute of Technology の挑戦
グローバル企業の中で「変化」を仕掛ける楽天技術研究所 Rakuten Institute of Technology の挑戦グローバル企業の中で「変化」を仕掛ける楽天技術研究所 Rakuten Institute of Technology の挑戦
グローバル企業の中で「変化」を仕掛ける楽天技術研究所 Rakuten Institute of Technology の挑戦
 
大手ユーザー企業に入ってマネジメントでやってみたこと
大手ユーザー企業に入ってマネジメントでやってみたこと大手ユーザー企業に入ってマネジメントでやってみたこと
大手ユーザー企業に入ってマネジメントでやってみたこと
 
AI活用におけるビジネス力とは何か?
AI活用におけるビジネス力とは何か?AI活用におけるビジネス力とは何か?
AI活用におけるビジネス力とは何か?
 
NLPソリューション開発の最前線_DLLAB_自然言語処理ナイト_200702
NLPソリューション開発の最前線_DLLAB_自然言語処理ナイト_200702NLPソリューション開発の最前線_DLLAB_自然言語処理ナイト_200702
NLPソリューション開発の最前線_DLLAB_自然言語処理ナイト_200702
 
NLPソリューション開発の最前線
NLPソリューション開発の最前線NLPソリューション開発の最前線
NLPソリューション開発の最前線
 
ITコミュニティと情報発信に共通する成長と貢献の要素
ITコミュニティと情報発信に共通する成長と貢献の要素ITコミュニティと情報発信に共通する成長と貢献の要素
ITコミュニティと情報発信に共通する成長と貢献の要素
 
CMC Meetup Vol.9 LT Igarashi
CMC Meetup Vol.9 LT IgarashiCMC Meetup Vol.9 LT Igarashi
CMC Meetup Vol.9 LT Igarashi
 
オープンソースがエンドユーザーイニシアティブをもたらす!? — 「シラサギ」使ったらこんなこともあんなことも —
オープンソースがエンドユーザーイニシアティブをもたらす!? — 「シラサギ」使ったらこんなこともあんなことも —オープンソースがエンドユーザーイニシアティブをもたらす!? — 「シラサギ」使ったらこんなこともあんなことも —
オープンソースがエンドユーザーイニシアティブをもたらす!? — 「シラサギ」使ったらこんなこともあんなことも —
 
IBM WatsonでInnovationを
IBM WatsonでInnovationをIBM WatsonでInnovationを
IBM WatsonでInnovationを
 
スマートエスイー: 超スマート社会&DX時代のAI・IoT×ビジネスの人材育成と調査研究
スマートエスイー: 超スマート社会&DX時代のAI・IoT×ビジネスの人材育成と調査研究スマートエスイー: 超スマート社会&DX時代のAI・IoT×ビジネスの人材育成と調査研究
スマートエスイー: 超スマート社会&DX時代のAI・IoT×ビジネスの人材育成と調査研究
 
戦略思考 〜考えろ、さすれば道は開かれん〜
戦略思考 〜考えろ、さすれば道は開かれん〜戦略思考 〜考えろ、さすれば道は開かれん〜
戦略思考 〜考えろ、さすれば道は開かれん〜
 
Tech Japan採用資料202308.pptx
 Tech Japan採用資料202308.pptx Tech Japan採用資料202308.pptx
Tech Japan採用資料202308.pptx
 
TDSE_xR_AI_20180327
TDSE_xR_AI_20180327TDSE_xR_AI_20180327
TDSE_xR_AI_20180327
 
エンジニアのキャリアを考える
エンジニアのキャリアを考えるエンジニアのキャリアを考える
エンジニアのキャリアを考える
 
株式会社リブセンス会社説明資料(転職エージェント企業様向け)
株式会社リブセンス会社説明資料(転職エージェント企業様向け)株式会社リブセンス会社説明資料(転職エージェント企業様向け)
株式会社リブセンス会社説明資料(転職エージェント企業様向け)
 
[DojoCon Japan 2018]自分にできる貢献のしかたを見つけよう by CoderDojo光
[DojoCon Japan 2018]自分にできる貢献のしかたを見つけよう by CoderDojo光[DojoCon Japan 2018]自分にできる貢献のしかたを見つけよう by CoderDojo光
[DojoCon Japan 2018]自分にできる貢献のしかたを見つけよう by CoderDojo光
 
プラチナ社会研究センター 自治体分科会 地方発ITベンチャーの挑戦
プラチナ社会研究センター 自治体分科会 地方発ITベンチャーの挑戦プラチナ社会研究センター 自治体分科会 地方発ITベンチャーの挑戦
プラチナ社会研究センター 自治体分科会 地方発ITベンチャーの挑戦
 
Chainerで知るdeep learning進化の歴史
Chainerで知るdeep learning進化の歴史Chainerで知るdeep learning進化の歴史
Chainerで知るdeep learning進化の歴史
 
Yakocloud(pre deliv) 20181215
Yakocloud(pre deliv) 20181215Yakocloud(pre deliv) 20181215
Yakocloud(pre deliv) 20181215
 
Ryogoku performance meeting4
Ryogoku performance meeting4Ryogoku performance meeting4
Ryogoku performance meeting4
 

Databricks触ってみた.pdf