Suche senden
Hochladen
ログ解析を支えるNoSQLの技術
•
34 gefällt mir
•
6,688 views
Drecom Co., Ltd.
Folgen
Technologie
Business
Diashow-Anzeige
Melden
Teilen
Diashow-Anzeige
Melden
Teilen
1 von 44
Empfohlen
ソーシャルゲームのためのデータベース設計
ソーシャルゲームのためのデータベース設計
Yoshinori Matsunobu
Redisの特徴と活用方法について
Redisの特徴と活用方法について
Yuji Otani
マイクロサービス 4つの分割アプローチ
マイクロサービス 4つの分割アプローチ
増田 亨
Marp Tutorial
Marp Tutorial
Rui Watanabe
インフラエンジニアの綺麗で優しい手順書の書き方
インフラエンジニアの綺麗で優しい手順書の書き方
Shohei Koyama
エンジニアの個人ブランディングと技術組織
エンジニアの個人ブランディングと技術組織
Takafumi ONAKA
イミュータブルデータモデル(入門編)
イミュータブルデータモデル(入門編)
Yoshitaka Kawashima
Java ORマッパー選定のポイント #jsug
Java ORマッパー選定のポイント #jsug
Masatoshi Tada
Empfohlen
ソーシャルゲームのためのデータベース設計
ソーシャルゲームのためのデータベース設計
Yoshinori Matsunobu
Redisの特徴と活用方法について
Redisの特徴と活用方法について
Yuji Otani
マイクロサービス 4つの分割アプローチ
マイクロサービス 4つの分割アプローチ
増田 亨
Marp Tutorial
Marp Tutorial
Rui Watanabe
インフラエンジニアの綺麗で優しい手順書の書き方
インフラエンジニアの綺麗で優しい手順書の書き方
Shohei Koyama
エンジニアの個人ブランディングと技術組織
エンジニアの個人ブランディングと技術組織
Takafumi ONAKA
イミュータブルデータモデル(入門編)
イミュータブルデータモデル(入門編)
Yoshitaka Kawashima
Java ORマッパー選定のポイント #jsug
Java ORマッパー選定のポイント #jsug
Masatoshi Tada
イベント駆動プログラミングとI/O多重化
イベント駆動プログラミングとI/O多重化
Gosuke Miyashita
DBスキーマもバージョン管理したい!
DBスキーマもバージョン管理したい!
kwatch
例外設計における大罪
例外設計における大罪
Takuto Wada
マイクロにしすぎた結果がこれだよ!
マイクロにしすぎた結果がこれだよ!
mosa siru
なぜ、いま リレーショナルモデルなのか(理論から学ぶデータベース実践入門読書会スペシャル)
なぜ、いま リレーショナルモデルなのか(理論から学ぶデータベース実践入門読書会スペシャル)
Mikiya Okuno
ドメイン駆動設計サンプルコードの徹底解説
ドメイン駆動設計サンプルコードの徹底解説
増田 亨
がっつりMongoDB事例紹介
がっつりMongoDB事例紹介
Tetsutaro Watanabe
大規模ソーシャルゲームを支える技術~PHP+MySQLを使った高負荷対策~
大規模ソーシャルゲームを支える技術~PHP+MySQLを使った高負荷対策~
infinite_loop
テストコードの DRY と DAMP
テストコードの DRY と DAMP
Yusuke Kagata
新たなgitのブランチモデル「Git Feature Flow」!Git Flow,Git Hub Flow,Git Lab Flowを超えれるか?
新たなgitのブランチモデル「Git Feature Flow」!Git Flow,Git Hub Flow,Git Lab Flowを超えれるか?
naoki koyama
ストリーム処理を支えるキューイングシステムの選び方
ストリーム処理を支えるキューイングシステムの選び方
Yoshiyasu SAEKI
ぼくとJenkinsおじさんの360日戦争
ぼくとJenkinsおじさんの360日戦争
goccy
初心者向けMongoDBのキホン!
初心者向けMongoDBのキホン!
Tetsutaro Watanabe
大規模ソーシャルゲーム開発から学んだPHP&MySQL実践テクニック
大規模ソーシャルゲーム開発から学んだPHP&MySQL実践テクニック
infinite_loop
関数型プログラミングのデザインパターンひとめぐり
関数型プログラミングのデザインパターンひとめぐり
Kazuyuki TAKASE
新入社員のための大規模ゲーム開発入門 サーバサイド編
新入社員のための大規模ゲーム開発入門 サーバサイド編
infinite_loop
Pythonによる黒魔術入門
Pythonによる黒魔術入門
大樹 小倉
PHPからgoへの移行で分かったこと
PHPからgoへの移行で分かったこと
gree_tech
Javaのログ出力: 道具と考え方
Javaのログ出力: 道具と考え方
Taku Miyakawa
ビッグデータ処理データベースの全体像と使い分け
ビッグデータ処理データベースの全体像と使い分け
Recruit Technologies
ソーシャルアプリを分析してみた
ソーシャルアプリを分析してみた
Drecom Co., Ltd.
CEDEC 2015 Cocos2d-x と社内基盤の付き合い方 〜アップストリームファーストを目指して〜
CEDEC 2015 Cocos2d-x と社内基盤の付き合い方 〜アップストリームファーストを目指して〜
Drecom Co., Ltd.
Weitere ähnliche Inhalte
Was ist angesagt?
イベント駆動プログラミングとI/O多重化
イベント駆動プログラミングとI/O多重化
Gosuke Miyashita
DBスキーマもバージョン管理したい!
DBスキーマもバージョン管理したい!
kwatch
例外設計における大罪
例外設計における大罪
Takuto Wada
マイクロにしすぎた結果がこれだよ!
マイクロにしすぎた結果がこれだよ!
mosa siru
なぜ、いま リレーショナルモデルなのか(理論から学ぶデータベース実践入門読書会スペシャル)
なぜ、いま リレーショナルモデルなのか(理論から学ぶデータベース実践入門読書会スペシャル)
Mikiya Okuno
ドメイン駆動設計サンプルコードの徹底解説
ドメイン駆動設計サンプルコードの徹底解説
増田 亨
がっつりMongoDB事例紹介
がっつりMongoDB事例紹介
Tetsutaro Watanabe
大規模ソーシャルゲームを支える技術~PHP+MySQLを使った高負荷対策~
大規模ソーシャルゲームを支える技術~PHP+MySQLを使った高負荷対策~
infinite_loop
テストコードの DRY と DAMP
テストコードの DRY と DAMP
Yusuke Kagata
新たなgitのブランチモデル「Git Feature Flow」!Git Flow,Git Hub Flow,Git Lab Flowを超えれるか?
新たなgitのブランチモデル「Git Feature Flow」!Git Flow,Git Hub Flow,Git Lab Flowを超えれるか?
naoki koyama
ストリーム処理を支えるキューイングシステムの選び方
ストリーム処理を支えるキューイングシステムの選び方
Yoshiyasu SAEKI
ぼくとJenkinsおじさんの360日戦争
ぼくとJenkinsおじさんの360日戦争
goccy
初心者向けMongoDBのキホン!
初心者向けMongoDBのキホン!
Tetsutaro Watanabe
大規模ソーシャルゲーム開発から学んだPHP&MySQL実践テクニック
大規模ソーシャルゲーム開発から学んだPHP&MySQL実践テクニック
infinite_loop
関数型プログラミングのデザインパターンひとめぐり
関数型プログラミングのデザインパターンひとめぐり
Kazuyuki TAKASE
新入社員のための大規模ゲーム開発入門 サーバサイド編
新入社員のための大規模ゲーム開発入門 サーバサイド編
infinite_loop
Pythonによる黒魔術入門
Pythonによる黒魔術入門
大樹 小倉
PHPからgoへの移行で分かったこと
PHPからgoへの移行で分かったこと
gree_tech
Javaのログ出力: 道具と考え方
Javaのログ出力: 道具と考え方
Taku Miyakawa
ビッグデータ処理データベースの全体像と使い分け
ビッグデータ処理データベースの全体像と使い分け
Recruit Technologies
Was ist angesagt?
(20)
イベント駆動プログラミングとI/O多重化
イベント駆動プログラミングとI/O多重化
DBスキーマもバージョン管理したい!
DBスキーマもバージョン管理したい!
例外設計における大罪
例外設計における大罪
マイクロにしすぎた結果がこれだよ!
マイクロにしすぎた結果がこれだよ!
なぜ、いま リレーショナルモデルなのか(理論から学ぶデータベース実践入門読書会スペシャル)
なぜ、いま リレーショナルモデルなのか(理論から学ぶデータベース実践入門読書会スペシャル)
ドメイン駆動設計サンプルコードの徹底解説
ドメイン駆動設計サンプルコードの徹底解説
がっつりMongoDB事例紹介
がっつりMongoDB事例紹介
大規模ソーシャルゲームを支える技術~PHP+MySQLを使った高負荷対策~
大規模ソーシャルゲームを支える技術~PHP+MySQLを使った高負荷対策~
テストコードの DRY と DAMP
テストコードの DRY と DAMP
新たなgitのブランチモデル「Git Feature Flow」!Git Flow,Git Hub Flow,Git Lab Flowを超えれるか?
新たなgitのブランチモデル「Git Feature Flow」!Git Flow,Git Hub Flow,Git Lab Flowを超えれるか?
ストリーム処理を支えるキューイングシステムの選び方
ストリーム処理を支えるキューイングシステムの選び方
ぼくとJenkinsおじさんの360日戦争
ぼくとJenkinsおじさんの360日戦争
初心者向けMongoDBのキホン!
初心者向けMongoDBのキホン!
大規模ソーシャルゲーム開発から学んだPHP&MySQL実践テクニック
大規模ソーシャルゲーム開発から学んだPHP&MySQL実践テクニック
関数型プログラミングのデザインパターンひとめぐり
関数型プログラミングのデザインパターンひとめぐり
新入社員のための大規模ゲーム開発入門 サーバサイド編
新入社員のための大規模ゲーム開発入門 サーバサイド編
Pythonによる黒魔術入門
Pythonによる黒魔術入門
PHPからgoへの移行で分かったこと
PHPからgoへの移行で分かったこと
Javaのログ出力: 道具と考え方
Javaのログ出力: 道具と考え方
ビッグデータ処理データベースの全体像と使い分け
ビッグデータ処理データベースの全体像と使い分け
Andere mochten auch
ソーシャルアプリを分析してみた
ソーシャルアプリを分析してみた
Drecom Co., Ltd.
CEDEC 2015 Cocos2d-x と社内基盤の付き合い方 〜アップストリームファーストを目指して〜
CEDEC 2015 Cocos2d-x と社内基盤の付き合い方 〜アップストリームファーストを目指して〜
Drecom Co., Ltd.
5年後のデータサイエンティスト
5年後のデータサイエンティスト
Drecom Co., Ltd.
CEDEC 2016 Metal と Vulkan を用いた水彩画レンダリング技法の紹介
CEDEC 2016 Metal と Vulkan を用いた水彩画レンダリング技法の紹介
Drecom Co., Ltd.
エンジニア生存戦略
エンジニア生存戦略
Drecom Co., Ltd.
[CEDEC2014]モバイルゲームにおける社内基盤開発と“実録”
[CEDEC2014]モバイルゲームにおける社内基盤開発と“実録”
Drecom Co., Ltd.
フライングゲットガチャ セミナー資料
フライングゲットガチャ セミナー資料
Drecom Co., Ltd.
ソーシャルゲームスケールアウトの歴史
ソーシャルゲームスケールアウトの歴史
Drecom Co., Ltd.
実録!Railsのはまりポイント10選
実録!Railsのはまりポイント10選
Drecom Co., Ltd.
CEDEC 2015 IoT向け汎用protocol MQTTのリアルタイムゲーム通信利用と実装、そして未来へ…
CEDEC 2015 IoT向け汎用protocol MQTTのリアルタイムゲーム通信利用と実装、そして未来へ…
Drecom Co., Ltd.
Railsによるワイルドなソフトウェア開発
Railsによるワイルドなソフトウェア開発
Drecom Co., Ltd.
サービス改善はログデータ分析から
サービス改善はログデータ分析から
Kenta Suzuki
Rubyの会社でPythonistaが三ヶ月生き延びた話
Rubyの会社でPythonistaが三ヶ月生き延びた話
Drecom Co., Ltd.
activerecord-turntable
activerecord-turntable
Drecom Co., Ltd.
地獄Spec
地獄Spec
Drecom Co., Ltd.
スマホマーケットの概要と、マーケティングの失敗例と改善 (アナリティクス アソシエーション 特別セミナー)
スマホマーケットの概要と、マーケティングの失敗例と改善 (アナリティクス アソシエーション 特別セミナー)
Tokoroten Nakayama
PHP開発者のためのNoSQL入門
PHP開発者のためのNoSQL入門
じゅん なかざ
広告費用に頼らない!外部施策を用いた集客・売上向上の実績
広告費用に頼らない!外部施策を用いた集客・売上向上の実績
Drecom Co., Ltd.
ログ解析の次にあるもの(リレーションシップリターゲティング)
ログ解析の次にあるもの(リレーションシップリターゲティング)
Shinya Nakazawa
Sinatraの紹介
Sinatraの紹介
longkey1
Andere mochten auch
(20)
ソーシャルアプリを分析してみた
ソーシャルアプリを分析してみた
CEDEC 2015 Cocos2d-x と社内基盤の付き合い方 〜アップストリームファーストを目指して〜
CEDEC 2015 Cocos2d-x と社内基盤の付き合い方 〜アップストリームファーストを目指して〜
5年後のデータサイエンティスト
5年後のデータサイエンティスト
CEDEC 2016 Metal と Vulkan を用いた水彩画レンダリング技法の紹介
CEDEC 2016 Metal と Vulkan を用いた水彩画レンダリング技法の紹介
エンジニア生存戦略
エンジニア生存戦略
[CEDEC2014]モバイルゲームにおける社内基盤開発と“実録”
[CEDEC2014]モバイルゲームにおける社内基盤開発と“実録”
フライングゲットガチャ セミナー資料
フライングゲットガチャ セミナー資料
ソーシャルゲームスケールアウトの歴史
ソーシャルゲームスケールアウトの歴史
実録!Railsのはまりポイント10選
実録!Railsのはまりポイント10選
CEDEC 2015 IoT向け汎用protocol MQTTのリアルタイムゲーム通信利用と実装、そして未来へ…
CEDEC 2015 IoT向け汎用protocol MQTTのリアルタイムゲーム通信利用と実装、そして未来へ…
Railsによるワイルドなソフトウェア開発
Railsによるワイルドなソフトウェア開発
サービス改善はログデータ分析から
サービス改善はログデータ分析から
Rubyの会社でPythonistaが三ヶ月生き延びた話
Rubyの会社でPythonistaが三ヶ月生き延びた話
activerecord-turntable
activerecord-turntable
地獄Spec
地獄Spec
スマホマーケットの概要と、マーケティングの失敗例と改善 (アナリティクス アソシエーション 特別セミナー)
スマホマーケットの概要と、マーケティングの失敗例と改善 (アナリティクス アソシエーション 特別セミナー)
PHP開発者のためのNoSQL入門
PHP開発者のためのNoSQL入門
広告費用に頼らない!外部施策を用いた集客・売上向上の実績
広告費用に頼らない!外部施策を用いた集客・売上向上の実績
ログ解析の次にあるもの(リレーションシップリターゲティング)
ログ解析の次にあるもの(リレーションシップリターゲティング)
Sinatraの紹介
Sinatraの紹介
Ähnlich wie ログ解析を支えるNoSQLの技術
20130313 OSCA Hadoopセミナー
20130313 OSCA Hadoopセミナー
Ichiro Fukuda
#01-03 solaris11で深化するクラウド
#01-03 solaris11で深化するクラウド
SolarisJPNight
Hadoop scr第7回 hw2011フィードバック
Hadoop scr第7回 hw2011フィードバック
AdvancedTechNight
OSC2012.Cloud_CloudStack概要
OSC2012.Cloud_CloudStack概要
Midori Oge
AIIT学生会主催勉強会 クラウドのお話
AIIT学生会主催勉強会 クラウドのお話
Toshiaki Baba
地に足がついたクラウドのお話
地に足がついたクラウドのお話
Toshiaki Baba
B14 SQL Server over SMB using infiniBand and SSD by Mario Broodbakker/市川明
B14 SQL Server over SMB using infiniBand and SSD by Mario Broodbakker/市川明
Insight Technology, Inc.
[db tech showcase Tokyo 2017] E35: 12台でやってみた!DWHソフトウェアアプライアンス Db2 Warehouse ~...
[db tech showcase Tokyo 2017] E35: 12台でやってみた!DWHソフトウェアアプライアンス Db2 Warehouse ~...
Insight Technology, Inc.
Fluentdでログを集めてGlusterFSに保存してMapReduceで集計
Fluentdでログを集めてGlusterFSに保存してMapReduceで集計
maebashi
既存システムへの新技術活用法 ~fluntd/MongoDB~
既存システムへの新技術活用法 ~fluntd/MongoDB~
じゅん なかざ
Resemaraを支えた技術 フライングゲットガチャの舞台裏 #ksgstudy #ドリコム
Resemaraを支えた技術 フライングゲットガチャの舞台裏 #ksgstudy #ドリコム
Go Sueyoshi (a.k.a sue445)
dstn交流会_DataSpider のソーシャルとの融合、手組との融合
dstn交流会_DataSpider のソーシャルとの融合、手組との融合
dstn
これからはじめるインフラエンジニア
これからはじめるインフラエンジニア
外道 父
Lampで作るソーシャルアプリの負荷対策~アプリとインフラの調和のテクニック~
Lampで作るソーシャルアプリの負荷対策~アプリとインフラの調和のテクニック~
KLab株式会社
Cloudera impala
Cloudera impala
外道 父
DeNA private cloud のその後 - OpenStack最新情報セミナー(2017年3月)
DeNA private cloud のその後 - OpenStack最新情報セミナー(2017年3月)
VirtualTech Japan Inc.
Db2リブランディングと製品動向 201707
Db2リブランディングと製品動向 201707
IBM Analytics Japan
iPhone、Android両対応アプリ開発講座 概論
iPhone、Android両対応アプリ開発講座 概論
Takakuni Furukawa
LambdaとMobileの美味しいかもしれない関係
LambdaとMobileの美味しいかもしれない関係
Hiraku Komuro
【17-E-2】Ruby PaaS「MOGOK」 ~ ソフトウェアエンジニアのためのクラウドサービス ~ 藤原秀一氏
【17-E-2】Ruby PaaS「MOGOK」 ~ ソフトウェアエンジニアのためのクラウドサービス ~ 藤原秀一氏
Developers Summit
Ähnlich wie ログ解析を支えるNoSQLの技術
(20)
20130313 OSCA Hadoopセミナー
20130313 OSCA Hadoopセミナー
#01-03 solaris11で深化するクラウド
#01-03 solaris11で深化するクラウド
Hadoop scr第7回 hw2011フィードバック
Hadoop scr第7回 hw2011フィードバック
OSC2012.Cloud_CloudStack概要
OSC2012.Cloud_CloudStack概要
AIIT学生会主催勉強会 クラウドのお話
AIIT学生会主催勉強会 クラウドのお話
地に足がついたクラウドのお話
地に足がついたクラウドのお話
B14 SQL Server over SMB using infiniBand and SSD by Mario Broodbakker/市川明
B14 SQL Server over SMB using infiniBand and SSD by Mario Broodbakker/市川明
[db tech showcase Tokyo 2017] E35: 12台でやってみた!DWHソフトウェアアプライアンス Db2 Warehouse ~...
[db tech showcase Tokyo 2017] E35: 12台でやってみた!DWHソフトウェアアプライアンス Db2 Warehouse ~...
Fluentdでログを集めてGlusterFSに保存してMapReduceで集計
Fluentdでログを集めてGlusterFSに保存してMapReduceで集計
既存システムへの新技術活用法 ~fluntd/MongoDB~
既存システムへの新技術活用法 ~fluntd/MongoDB~
Resemaraを支えた技術 フライングゲットガチャの舞台裏 #ksgstudy #ドリコム
Resemaraを支えた技術 フライングゲットガチャの舞台裏 #ksgstudy #ドリコム
dstn交流会_DataSpider のソーシャルとの融合、手組との融合
dstn交流会_DataSpider のソーシャルとの融合、手組との融合
これからはじめるインフラエンジニア
これからはじめるインフラエンジニア
Lampで作るソーシャルアプリの負荷対策~アプリとインフラの調和のテクニック~
Lampで作るソーシャルアプリの負荷対策~アプリとインフラの調和のテクニック~
Cloudera impala
Cloudera impala
DeNA private cloud のその後 - OpenStack最新情報セミナー(2017年3月)
DeNA private cloud のその後 - OpenStack最新情報セミナー(2017年3月)
Db2リブランディングと製品動向 201707
Db2リブランディングと製品動向 201707
iPhone、Android両対応アプリ開発講座 概論
iPhone、Android両対応アプリ開発講座 概論
LambdaとMobileの美味しいかもしれない関係
LambdaとMobileの美味しいかもしれない関係
【17-E-2】Ruby PaaS「MOGOK」 ~ ソフトウェアエンジニアのためのクラウドサービス ~ 藤原秀一氏
【17-E-2】Ruby PaaS「MOGOK」 ~ ソフトウェアエンジニアのためのクラウドサービス ~ 藤原秀一氏
Mehr von Drecom Co., Ltd.
コンテナで始める柔軟な AWS Lambda 生活
コンテナで始める柔軟な AWS Lambda 生活
Drecom Co., Ltd.
サービスのインシデントを解決するには.pdf
サービスのインシデントを解決するには.pdf
Drecom Co., Ltd.
ドリコムサマージョブ報告 by 佐々木 誠治
ドリコムサマージョブ報告 by 佐々木 誠治
Drecom Co., Ltd.
DRECOM Summer Internship 2019 成果発表 by 鹿内 裕介
DRECOM Summer Internship 2019 成果発表 by 鹿内 裕介
Drecom Co., Ltd.
HTML5 ゲームフレームワーク開発について
HTML5 ゲームフレームワーク開発について
Drecom Co., Ltd.
「AROW」お披露目(導入編)
「AROW」お披露目(導入編)
Drecom Co., Ltd.
「AROW」お披露目(実用編)
「AROW」お披露目(実用編)
Drecom Co., Ltd.
AROW の紹介 〜概要編〜
AROW の紹介 〜概要編〜
Drecom Co., Ltd.
AROW の紹介 〜実践編〜
AROW の紹介 〜実践編〜
Drecom Co., Ltd.
rails-developers-meetup-day4
rails-developers-meetup-day4
Drecom Co., Ltd.
html5conf2018-sponsor-session
html5conf2018-sponsor-session
Drecom Co., Ltd.
DApps のユーザ認証に web3.eth.personal.sign を使おう!
DApps のユーザ認証に web3.eth.personal.sign を使おう!
Drecom Co., Ltd.
3Dリアルマップを用いたモバイルゲーム開発における課題とその解決方法
3Dリアルマップを用いたモバイルゲーム開発における課題とその解決方法
Drecom Co., Ltd.
LoveChainのスマートコントラクトを見てみよう & 非中央集権なトークンのカタチ
LoveChainのスマートコントラクトを見てみよう & 非中央集権なトークンのカタチ
Drecom Co., Ltd.
今月のレッツゴー陰陽師!
今月のレッツゴー陰陽師!
Drecom Co., Ltd.
位置情報を常に取得するのはつらいよ
位置情報を常に取得するのはつらいよ
Drecom Co., Ltd.
カンバンと朝会とわたくし
カンバンと朝会とわたくし
Drecom Co., Ltd.
Mehr von Drecom Co., Ltd.
(17)
コンテナで始める柔軟な AWS Lambda 生活
コンテナで始める柔軟な AWS Lambda 生活
サービスのインシデントを解決するには.pdf
サービスのインシデントを解決するには.pdf
ドリコムサマージョブ報告 by 佐々木 誠治
ドリコムサマージョブ報告 by 佐々木 誠治
DRECOM Summer Internship 2019 成果発表 by 鹿内 裕介
DRECOM Summer Internship 2019 成果発表 by 鹿内 裕介
HTML5 ゲームフレームワーク開発について
HTML5 ゲームフレームワーク開発について
「AROW」お披露目(導入編)
「AROW」お披露目(導入編)
「AROW」お披露目(実用編)
「AROW」お披露目(実用編)
AROW の紹介 〜概要編〜
AROW の紹介 〜概要編〜
AROW の紹介 〜実践編〜
AROW の紹介 〜実践編〜
rails-developers-meetup-day4
rails-developers-meetup-day4
html5conf2018-sponsor-session
html5conf2018-sponsor-session
DApps のユーザ認証に web3.eth.personal.sign を使おう!
DApps のユーザ認証に web3.eth.personal.sign を使おう!
3Dリアルマップを用いたモバイルゲーム開発における課題とその解決方法
3Dリアルマップを用いたモバイルゲーム開発における課題とその解決方法
LoveChainのスマートコントラクトを見てみよう & 非中央集権なトークンのカタチ
LoveChainのスマートコントラクトを見てみよう & 非中央集権なトークンのカタチ
今月のレッツゴー陰陽師!
今月のレッツゴー陰陽師!
位置情報を常に取得するのはつらいよ
位置情報を常に取得するのはつらいよ
カンバンと朝会とわたくし
カンバンと朝会とわたくし
Kürzlich hochgeladen
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
CRI Japan, Inc.
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Hiroshi Tomioka
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
Toru Tamaki
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
Toru Tamaki
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
sn679259
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
iPride Co., Ltd.
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
CRI Japan, Inc.
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
atsushi061452
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NTT DATA Technology & Innovation
Utilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native Integrations
WSO2
Kürzlich hochgeladen
(12)
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
知識ゼロの営業マンでもできた!超速で初心者を脱する、悪魔的学習ステップ3選.pptx
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
Utilizing Ballerina for Cloud Native Integrations
Utilizing Ballerina for Cloud Native Integrations
ログ解析を支えるNoSQLの技術
1.
ログ解析を支えるNoSQLの技術
川上 知成 Drecom Co., Ltd 12/02/20 © Drecom Co.,Ltd. All rights Reserved
2.
自己紹介 • 川上 知成 •
@tomofusa • 株式会社ドリコム • ソーシャルゲーム事業本部 • ICTデザイン部 ICTグループ長 • ソーシャルゲーム開発を経て – アーキテクトグループのマネジメント 12/02/20 © Drecom Co.,Ltd. All rights Reserved 2
3.
ソーシャルゲームの
ログ解析とは? 12/02/20 © Drecom Co.,Ltd. All rights Reserved 3
4.
アクセスする目的が明確 12/02/20
© Drecom Co.,Ltd. All rights Reserved 4
5.
ゲームを遊ぶ 12/02/20
© Drecom Co.,Ltd. All rights Reserved 5
6.
PV
Action 取得するログ 12/02/20 © Drecom Co.,Ltd. All rights Reserved 6
7.
PV
Action ( x N ) 取得するログの種類 12/02/20 © Drecom Co.,Ltd. All rights Reserved 7
8.
PV
Action ( x N ) 取得するログの種類 日:1∼2億PV レコード 月: 50億PV レコード 例:アクセスログのみ 12/02/20 © Drecom Co.,Ltd. All rights Reserved 8
9.
日:1∼2億PV レコード
月: 50億PV レコード 例:アクセスログ RDBMSでギリギリ計算可能? 蓄積データを含めた解析は 容量に限界がある 計算時間がリニアに増加 12/02/20 © Drecom Co.,Ltd. All rights Reserved 9
10.
NoSQLを利用 12/02/20
© Drecom Co.,Ltd. All rights Reserved 10
11.
NoSQLとは? 12/02/20
© Drecom Co.,Ltd. All rights Reserved 11
12.
NoSQL? • Not Only
SQL • NoSQLとは、 RDBMS以外のデータベース管理システム を指し、 RDBMSの長い歴史を打破するものとして、 広い意味での関係モデル以外に属するデー タベースの発展を促進させようとする運動 である。 (wikipediaより抜粋) 12/02/20 © Drecom Co.,Ltd. All rights Reserved 12
13.
NoSQL? 特徴: • データストアによって多種多様な特徴
– 揮発性、不揮発性 – スキーマレス – Joinの有無 – トランザクションの有無 • SQLに比べてシンプル、しかし高性能 • スケーラビリティ、分散処理に対応しやすい 構成をとっている ものも 12/02/20 © Drecom Co.,Ltd. All rights Reserved 13
14.
弊社で利用しているNoSQL 種類
データ特徴 用途 Memcached*1 揮発性 Session, cache TokyoTyrant*2 不揮発性 Session, cache KyotoTycoon 不揮発性, Dual-Master Session, cache Redis 不揮発性, Queue, cache, Master-Slave(Cluster) Sorted Set Hadoop 大規模分散Storage Log保存 *1 一部利用、移行中 *2 現在は利用していない 12/02/20 © Drecom Co.,Ltd. All rights Reserved 14
15.
SocialGame50億PVのログ解析
Hadoopを使った仕組み データ分析システム基盤 Aguri 12/02/20 © Drecom Co.,Ltd. All rights Reserved 15
16.
※今回は分析軸は対象とせず、
仕組みのみを話します。 12/02/20 © Drecom Co.,Ltd. All rights Reserved 16
17.
Aguriとは • 目的:
– ソーシャルアプリのログ収集 – ログ蓄積 – ログ解析によるKPI算出 – アプリへフィードバックし、Actionプランへ 12/02/20 © Drecom Co.,Ltd. All rights Reserved 17
18.
Aguriとは • 究極目標:
Data Driven Auto Optimize • 例: 1. リンク色を複数、ユーザによって出し分け 2. 最適なリンク色の抽出 特定個人に依存する意思決定ポイントの減少 12/02/20 © Drecom Co.,Ltd. All rights Reserved 18
19.
Aguri::IO INPUT • アプリの各種ログデータ OUTPUT • メールレポート •
ディスプレイ – Web管理画面 • RDBMS 12/02/20 © Drecom Co.,Ltd. All rights Reserved 19
20.
Aguri::System • Scribe:2.2.1
*1 – boost 1.43.0, fb303 0.5.0 thrift 0.5.0 libhdfsで書き込み – https://github.com/facebook/scribe • Hadoop:cdh2 (Cloudera's Distribution for Hadoop) *2 • Batch: – Java Mapreduce – Ruby hadoop streaming *1 再送の仕組み *2 容量の冗長性を担保 ※その他の中間処理などはRuby 12/02/20 © Drecom Co.,Ltd. All rights Reserved 20
21.
Aguri::Overview
hadoop MapReduce Web UI Hadoop DFS Log Files. Summery Data. Thrift Scribe Display Mail Logfile Collection view Social Game Application RDBMS 12/02/20 © Drecom Co.,Ltd. All rights Reserved 21
22.
ログ収集
• Pull型収集 app Log – LogServerで Server Appの追加漏れ app – LogServerが SPOF(取得漏れ app は、手動で) OUTPUT app 12/02/20 © Drecom Co.,Ltd. All rights Reserved 22
23.
ログ収集
• Push型収集 app – App側で scribe LogServerを指定 app Scribe – ScribeServerが Server Scribe SPOFだが、 scribe Server Bufferと再送で app scribe 可用性UP hadoop app scribe OUTPUT 12/02/20 © Drecom Co.,Ltd. All rights Reserved 23
24.
Aguri::Log
• 独自フォーマットを規定 – 1次処理(クレンジング)の省略 – 例:アクセスログ 12/02/20 © Drecom Co.,Ltd. All rights Reserved 24
25.
Aguri::Batch • Java:MapReduce
– メリット:高速、チューニング可 – デメリット:開発コストが高い (coding環境, compile) • Ruby:Hadoop Streamingを利用 – メリット:サーバサイドで完結。 – デメリット:遅い 定型処理はJava。試行錯誤はRuby。 12/02/20 © Drecom Co.,Ltd. All rights Reserved 25
26.
Aguri::Batch • mrtoolkit
– Ruby製 mapreduceツール – NY TimesがGNU GPL v3で公開 – http://code.google.com/p/mrtoolkit/ 12/02/20 © Drecom Co.,Ltd. All rights Reserved 26
27.
Aguri::Batch • Sample code
– IP別PVの算出 12/02/20 © Drecom Co.,Ltd. All rights Reserved 27
28.
Aguri::History • システムの変遷
– 2010/9 テストローンチ – 2010/12 Aguriへ移行(pull型より) 以後、本格稼働 – 2011/4頃 中期構成 – 2011/9頃 現在構成 12/02/20 © Drecom Co.,Ltd. All rights Reserved 28
29.
Aguri::History
– 初期構成:最小構成のためmasternode同居 • 3node: capacity 1TB scribe Master Slave Slave Slave name data data job task task data task 12/02/20 © Drecom Co.,Ltd. All rights Reserved 29
30.
Aguri::History
– 中期構成:masternodeが分離, Slave追加 • 5node: capacity 3TB scribe Master slave Slave Slave Slave name data data data data job task task task task 12/02/20 © Drecom Co.,Ltd. All rights Reserved 30
31.
Aguri::History
– 現在の構成:masternode scaleup引越し • 9node: capacity 12TB scribe scribe Scribe Master slave Slave Slave Slave Local disk name data data data data job task task task task slave Slave Slave Slave 12/02/20 © Drecom Co.,Ltd. All rights Reserved 31
32.
Aguri::History • Hdfsデータcapacity
– 8 datanode: 12TB • Used 6TB – ログ(gz圧縮済み、圧縮率10 20%) – 集計・解析データ 12/02/20 © Drecom Co.,Ltd. All rights Reserved 32
33.
Aguri::Result • 定期実行
– Hourly: 速報値をレポート – Daily: レポートとディスプレイ – Weekly: 蓄積データから解析レポート 重要な定期出力KPIはRDBMSへ • 不定期 – 解析は随時 12/02/20 © Drecom Co.,Ltd. All rights Reserved 33
34.
Aguri::Result • アプリ毎に共通指標で予実を確認 • アプリチームの業務/システム負荷軽減
– ログ収集・集計の手間 – 集計時のIO, メモリなど各種システムリソース 12/02/20 © Drecom Co.,Ltd. All rights Reserved 34
35.
より柔軟に • アプリ個別にレポート
– resque-scheduler gem (Redis) • 仕様変更に合わせた集計 • より詳細なデータ取得 を取得可能 12/02/20 © Drecom Co.,Ltd. All rights Reserved 35
36.
専任分析チーム • アプリDBの利用
– DBの定期backupデータrestore環境を用意 – 大規模RDBMSからデータを抽出 • 1.2TB ioDrive Duo by Fusion-io 12/02/20 © Drecom Co.,Ltd. All rights Reserved 36
37.
専任分析チーム • 解析ソフト:某有償解析ツールの利用
– DB抽出データとAguri抽出データを 組み合わせて解析 • ユーザ行動分析 • イベント効果分析 12/02/20 © Drecom Co.,Ltd. All rights Reserved 37
38.
専任分析チーム • ユーザ行動/イベント効果分析
– パラメータチューニングにまで落とし込み 12/02/20 © Drecom Co.,Ltd. All rights Reserved 38
39.
専任分析チーム P:イベント企画 D:イベント実施 C:イベント効果分析
– KPI分析 – パラメータチューニング提案 A:アプリイベント改善策立案 – 次回パラメータ改善へ 12/02/20 © Drecom Co.,Ltd. All rights Reserved 39
40.
まとめ • 弊社のログ解析と利用NoSQLについて • Aguriについて •
分析利用事例を紹介 12/02/20 © Drecom Co.,Ltd. All rights Reserved 40
41.
12/02/20
© Drecom Co.,Ltd. All rights Reserved 41
42.
【PR】 • データ分析基盤システムに興味のある方 • ソーシャルゲームの分析をやってみたい方 •
大規模ログ解析をしてみたい方 を募集しまています。 12/02/20 © Drecom Co.,Ltd. All rights Reserved 42
43.
【PR】
一緒にデータをゴリゴリ解析し、 を見つけましょう。 12/02/20 © Drecom Co.,Ltd. All rights Reserved 43
44.
ご清聴ありがとうございました 12/02/20
© Drecom Co.,Ltd. All rights Reserved 44