Submit Search
Upload
ニコニコデータビューアー・改
•
11 likes
•
3,724 views
(shibao)芝尾 (kouichiro)幸一郎
Follow
ニコニコ学会β第五回データ分析研究会で発表した。 今まで、21分かかった物が、10秒で集計が出来る。
Read less
Read more
Environment
Report
Share
Report
Share
1 of 35
Download now
Download to read offline
Recommended
第七回ニコニコ学会βデータ分析研究会
Re dashで作るニコニコデータセット分析環境
Re dashで作るニコニコデータセット分析環境
(shibao)芝尾 (kouichiro)幸一郎
ニコニコ動画データセットの分析環境を作ってみた。 第3回ニコニコ学会データ分析研究会LT発表
ニコニコ動画データセット分析環境作ってみたその後
ニコニコ動画データセット分析環境作ってみたその後
(shibao)芝尾 (kouichiro)幸一郎
トピック 1. ごちうさ難民はどこへ行ったか 2. コメントによる動画要約 3. ニコニコ動画を表現するマルチモーダル特徴の検討
ニコニコ動画のコメント解析
ニコニコ動画のコメント解析
Keisuke Ogaki
【Twilio x kintone 合同ハンズオン in 大阪】Twilio Studioとkintoneで電話受付システムをつくろう!!前の Kintone News
TwilioKintone20171012
TwilioKintone20171012
kintone papers
第5回ニコニコデータ研究会 LT
pixivのデータを使って萌え要素の人気について分析してみた
pixivのデータを使って萌え要素の人気について分析してみた
Masanori Takano
静岡Developes勉強会のコンピュータビジョン9章の資料です。
実践コンピュータビジョン 9章 画像の領域分割
実践コンピュータビジョン 9章 画像の領域分割
yaju88
可視化法学、smpis登壇版
可視化法学 smips登壇
可視化法学 smips登壇
(shibao)芝尾 (kouichiro)幸一郎
第1回関西ソーシャルゲーム勉強会で発表した内容です。
第1回関西ソーシャルゲーム勉強会 kpi発表
第1回関西ソーシャルゲーム勉強会 kpi発表
OCHI Shuji
Recommended
第七回ニコニコ学会βデータ分析研究会
Re dashで作るニコニコデータセット分析環境
Re dashで作るニコニコデータセット分析環境
(shibao)芝尾 (kouichiro)幸一郎
ニコニコ動画データセットの分析環境を作ってみた。 第3回ニコニコ学会データ分析研究会LT発表
ニコニコ動画データセット分析環境作ってみたその後
ニコニコ動画データセット分析環境作ってみたその後
(shibao)芝尾 (kouichiro)幸一郎
トピック 1. ごちうさ難民はどこへ行ったか 2. コメントによる動画要約 3. ニコニコ動画を表現するマルチモーダル特徴の検討
ニコニコ動画のコメント解析
ニコニコ動画のコメント解析
Keisuke Ogaki
【Twilio x kintone 合同ハンズオン in 大阪】Twilio Studioとkintoneで電話受付システムをつくろう!!前の Kintone News
TwilioKintone20171012
TwilioKintone20171012
kintone papers
第5回ニコニコデータ研究会 LT
pixivのデータを使って萌え要素の人気について分析してみた
pixivのデータを使って萌え要素の人気について分析してみた
Masanori Takano
静岡Developes勉強会のコンピュータビジョン9章の資料です。
実践コンピュータビジョン 9章 画像の領域分割
実践コンピュータビジョン 9章 画像の領域分割
yaju88
可視化法学、smpis登壇版
可視化法学 smips登壇
可視化法学 smips登壇
(shibao)芝尾 (kouichiro)幸一郎
第1回関西ソーシャルゲーム勉強会で発表した内容です。
第1回関西ソーシャルゲーム勉強会 kpi発表
第1回関西ソーシャルゲーム勉強会 kpi発表
OCHI Shuji
「オープンソースカンファレンス 2016 Tokyo/Spring(2016年2月26日講演資料)」 高速処理と高信頼性を両立し、ペタバイト級の多種大量データを蓄積する、ビッグデータ/ IoT時代のデータベースとは?? オープンソースカンファレンス 2016 Tokyo/Spring(2016 年 2 月 26、27 日)
高速処理と高信頼性を両立し、ペタバイト級の多種大量データを蓄積する、ビッグデータ/ IoT時代のデータベースとは??
高速処理と高信頼性を両立し、ペタバイト級の多種大量データを蓄積する、ビッグデータ/ IoT時代のデータベースとは??
griddb
「モノタロウの1900万商品を検索するElasticsearch構築運用事例」として、2022年10月26日に「第50回 Elasticsearch 勉強会」にて発表した内容の資料です。 モノタロウの商品検索の仕組みや、取り入れた工夫について説明しています。
モノタロウの1900万商品を検索する Elasticsearch構築運用事例(2022-10-26 第50回Elasticsearch 勉強会発表資料)
モノタロウの1900万商品を検索する Elasticsearch構築運用事例(2022-10-26 第50回Elasticsearch 勉強会発表資料)
株式会社MonotaRO Tech Team
This presentation vividly describes what is going on in the IT industry with the advent of cloud technology, focusing in Google App Engine. Then reviews competitors’ moves both in terms of background technology and the service capitalization. It was revealed that major Japanese companies such as Fujitsu and NTT Data are introducing Microsoft Azure in their data centers, but Oracle and IBM are the technically strong chasers. So far there are very few moves for Japanese IT companies to implement their own cloud products. IBM's zEnterprise product line has potential to replace and wipe out container-based data centers, but their pricing policy unknown. Oracle's next hardware strategy unknown. In Japan, tailoring open-source softwares auch as Cassandra and Hadoop found at newly rising companies, IIJ, and Rakuten.
Cloud impact on IT industry (in Japanese)
Cloud impact on IT industry (in Japanese)
shojiro-tanaka
2024年3月19日に実施されたQlik Tipsで紹介された「Direct QueryのカスタムSQL」の資料です。
Direct QueryのカスタムSQL(Qlik Tips ~ Qlik を使いこなす!スキルアップ勉強会)
Direct QueryのカスタムSQL(Qlik Tips ~ Qlik を使いこなす!スキルアップ勉強会)
QlikPresalesJapan
MySQL Binlog Events を検証してみました
MySQL Binlog Events でストリーム処理してみた #MySQLUC15
MySQL Binlog Events でストリーム処理してみた #MySQLUC15
Yahoo!デベロッパーネットワーク
12/13(土) 第1回 Scala 関西勉強会 LT 資料 http://connpass.com/event/10091/ 12/1 (月) の Netflix Meetup in Kyoto (http://connpass.com/event/9837/) の参加報告
Netflix Meetup in Kyoto 参加報告
Netflix Meetup in Kyoto 参加報告
tnoda
本書では、全面的に百度10年の歴史を紹介している。作者がRobinから始め、百度すべてのキーマンを密着取材したため、普段知られていない百度の裏話を披露した。 ただし、本書が百度を宣伝する意味も含まれていると個人的に思うため、皆様の客観的な見方を持って、この紹介を読んで頂ければと思うのである。
李彦宏の百度世界
李彦宏の百度世界
Tom Rong
Tokyo video tech #5 presentation document.
データドリブンな動画コンテンツ制作の裏側
データドリブンな動画コンテンツ制作の裏側
TatsuyaAkasaka
可視化法学(Found it Project #9)編です。 https://foundit-project.connpass.com/event/66468/
可視化法学(Found it project#9)
可視化法学(Found it project#9)
(shibao)芝尾 (kouichiro)幸一郎
2021/11/17 なぜあの会社は少人数でもシステム運用ができるのか? 〜工夫を凝らし効率的に運用しているお客様事例祭り @AWS https://awsonlineseminar.splashthat.com/
ビットバンクにおける少人数で支えるインフラチームの戦略
ビットバンクにおける少人数で支えるインフラチームの戦略
bitbank, Inc. Tokyo, Japan
#bq_sushi用のプレゼン資料 落ちて分かるBIgQUeryの落とし菜々
Bq sushi(BigQuery lessons learned)
Bq sushi(BigQuery lessons learned)
(shibao)芝尾 (kouichiro)幸一郎
2018.02.17 LogicFlow-ja offline で清水がお話した際のセッション資料です。
Flow を使って効率的にデータを集めたその後は Power BI に繋げよう
Flow を使って効率的にデータを集めたその後は Power BI に繋げよう
Yugo Shimizu
kintone hive tokyo (2017/5/19) kintone hack アールスリーインスティテュート 金春氏
kintoneで教育をhack
kintoneで教育をhack
Cybozucommunity
ニコニコ動画のタグに関する話(仮)_データ研究会20131110
ニコニコ動画のタグに関する話(仮)_データ研究会20131110
nobi000
2020.05.28 14:00 - Microsoft 365 Virtual Marathon にて清水が行ったセッションのスライドです。
毎月更新されるデータを Excel で集計してレポートを作ってるですって? それ、Power BI と SharePoint フォルダーで自動化できますよー
毎月更新されるデータを Excel で集計してレポートを作ってるですって? それ、Power BI と SharePoint フォルダーで自動化できますよー
Yugo Shimizu
イベント名:設立3周年記念チャリティーセミナー 講師:日本仮想化技術 宮原 日時:2010/2/6 アジェンダ: • ハードウェアの選定 • 省電力サーバーの検討 • ストレージの選定 • ベンチマークによる性能検証 概要: 仮想化技術を活用してシステムを統合し、コスト削減を実現するには、適切な仮想化環境の設計が欠かせません。従来の物理サーバーを利用したシステム設計手法とは異なる、仮想化環境設計の基本的な流れと、設計上重要なポイントについて解説します。
仮想環境の設計手法
仮想環境の設計手法
VirtualTech Japan Inc.
DXとはなにか。一言で言うなら戦い方が違うということだ。
DXとはなにか?
DXとはなにか?
(shibao)芝尾 (kouichiro)幸一郎
可視化法学のstudycode発表変です。
可視化法学(studycode編)
可視化法学(studycode編)
(shibao)芝尾 (kouichiro)幸一郎
LinkedOpenDataChallenge2016受賞時に使用したプレゼンです
可視化法学(Linked Open Data Challenge 2016)授賞式プレゼン
可視化法学(Linked Open Data Challenge 2016)授賞式プレゼン
(shibao)芝尾 (kouichiro)幸一郎
第9回ニコニコ学会データ研究会のLTで発表したスライドです。 データ研究会のイベントページはこちら http://niconicodatasig9.peatix.com/?lang=ja また、当日の内容はこちらのtogetterを参照下さい https://togetter.com/li/1073090
可視化法学(ニコニコ学会データ研究会第9回)
可視化法学(ニコニコ学会データ研究会第9回)
(shibao)芝尾 (kouichiro)幸一郎
c91にて可視化法学の冊子を頒布した。その際、可視化法学の内容をまとめたA7の小冊子を作った。 それは無料で配布したので、こちらにもあげます。
可視化法学c91紹介リーフレット
可視化法学c91紹介リーフレット
(shibao)芝尾 (kouichiro)幸一郎
超会議2016ニコつく ポスターセッション展示
可視化法学ポスター超会議2016 チラシ
可視化法学ポスター超会議2016 チラシ
(shibao)芝尾 (kouichiro)幸一郎
More Related Content
Similar to ニコニコデータビューアー・改
「オープンソースカンファレンス 2016 Tokyo/Spring(2016年2月26日講演資料)」 高速処理と高信頼性を両立し、ペタバイト級の多種大量データを蓄積する、ビッグデータ/ IoT時代のデータベースとは?? オープンソースカンファレンス 2016 Tokyo/Spring(2016 年 2 月 26、27 日)
高速処理と高信頼性を両立し、ペタバイト級の多種大量データを蓄積する、ビッグデータ/ IoT時代のデータベースとは??
高速処理と高信頼性を両立し、ペタバイト級の多種大量データを蓄積する、ビッグデータ/ IoT時代のデータベースとは??
griddb
「モノタロウの1900万商品を検索するElasticsearch構築運用事例」として、2022年10月26日に「第50回 Elasticsearch 勉強会」にて発表した内容の資料です。 モノタロウの商品検索の仕組みや、取り入れた工夫について説明しています。
モノタロウの1900万商品を検索する Elasticsearch構築運用事例(2022-10-26 第50回Elasticsearch 勉強会発表資料)
モノタロウの1900万商品を検索する Elasticsearch構築運用事例(2022-10-26 第50回Elasticsearch 勉強会発表資料)
株式会社MonotaRO Tech Team
This presentation vividly describes what is going on in the IT industry with the advent of cloud technology, focusing in Google App Engine. Then reviews competitors’ moves both in terms of background technology and the service capitalization. It was revealed that major Japanese companies such as Fujitsu and NTT Data are introducing Microsoft Azure in their data centers, but Oracle and IBM are the technically strong chasers. So far there are very few moves for Japanese IT companies to implement their own cloud products. IBM's zEnterprise product line has potential to replace and wipe out container-based data centers, but their pricing policy unknown. Oracle's next hardware strategy unknown. In Japan, tailoring open-source softwares auch as Cassandra and Hadoop found at newly rising companies, IIJ, and Rakuten.
Cloud impact on IT industry (in Japanese)
Cloud impact on IT industry (in Japanese)
shojiro-tanaka
2024年3月19日に実施されたQlik Tipsで紹介された「Direct QueryのカスタムSQL」の資料です。
Direct QueryのカスタムSQL(Qlik Tips ~ Qlik を使いこなす!スキルアップ勉強会)
Direct QueryのカスタムSQL(Qlik Tips ~ Qlik を使いこなす!スキルアップ勉強会)
QlikPresalesJapan
MySQL Binlog Events を検証してみました
MySQL Binlog Events でストリーム処理してみた #MySQLUC15
MySQL Binlog Events でストリーム処理してみた #MySQLUC15
Yahoo!デベロッパーネットワーク
12/13(土) 第1回 Scala 関西勉強会 LT 資料 http://connpass.com/event/10091/ 12/1 (月) の Netflix Meetup in Kyoto (http://connpass.com/event/9837/) の参加報告
Netflix Meetup in Kyoto 参加報告
Netflix Meetup in Kyoto 参加報告
tnoda
本書では、全面的に百度10年の歴史を紹介している。作者がRobinから始め、百度すべてのキーマンを密着取材したため、普段知られていない百度の裏話を披露した。 ただし、本書が百度を宣伝する意味も含まれていると個人的に思うため、皆様の客観的な見方を持って、この紹介を読んで頂ければと思うのである。
李彦宏の百度世界
李彦宏の百度世界
Tom Rong
Tokyo video tech #5 presentation document.
データドリブンな動画コンテンツ制作の裏側
データドリブンな動画コンテンツ制作の裏側
TatsuyaAkasaka
可視化法学(Found it Project #9)編です。 https://foundit-project.connpass.com/event/66468/
可視化法学(Found it project#9)
可視化法学(Found it project#9)
(shibao)芝尾 (kouichiro)幸一郎
2021/11/17 なぜあの会社は少人数でもシステム運用ができるのか? 〜工夫を凝らし効率的に運用しているお客様事例祭り @AWS https://awsonlineseminar.splashthat.com/
ビットバンクにおける少人数で支えるインフラチームの戦略
ビットバンクにおける少人数で支えるインフラチームの戦略
bitbank, Inc. Tokyo, Japan
#bq_sushi用のプレゼン資料 落ちて分かるBIgQUeryの落とし菜々
Bq sushi(BigQuery lessons learned)
Bq sushi(BigQuery lessons learned)
(shibao)芝尾 (kouichiro)幸一郎
2018.02.17 LogicFlow-ja offline で清水がお話した際のセッション資料です。
Flow を使って効率的にデータを集めたその後は Power BI に繋げよう
Flow を使って効率的にデータを集めたその後は Power BI に繋げよう
Yugo Shimizu
kintone hive tokyo (2017/5/19) kintone hack アールスリーインスティテュート 金春氏
kintoneで教育をhack
kintoneで教育をhack
Cybozucommunity
ニコニコ動画のタグに関する話(仮)_データ研究会20131110
ニコニコ動画のタグに関する話(仮)_データ研究会20131110
nobi000
2020.05.28 14:00 - Microsoft 365 Virtual Marathon にて清水が行ったセッションのスライドです。
毎月更新されるデータを Excel で集計してレポートを作ってるですって? それ、Power BI と SharePoint フォルダーで自動化できますよー
毎月更新されるデータを Excel で集計してレポートを作ってるですって? それ、Power BI と SharePoint フォルダーで自動化できますよー
Yugo Shimizu
イベント名:設立3周年記念チャリティーセミナー 講師:日本仮想化技術 宮原 日時:2010/2/6 アジェンダ: • ハードウェアの選定 • 省電力サーバーの検討 • ストレージの選定 • ベンチマークによる性能検証 概要: 仮想化技術を活用してシステムを統合し、コスト削減を実現するには、適切な仮想化環境の設計が欠かせません。従来の物理サーバーを利用したシステム設計手法とは異なる、仮想化環境設計の基本的な流れと、設計上重要なポイントについて解説します。
仮想環境の設計手法
仮想環境の設計手法
VirtualTech Japan Inc.
Similar to ニコニコデータビューアー・改
(16)
高速処理と高信頼性を両立し、ペタバイト級の多種大量データを蓄積する、ビッグデータ/ IoT時代のデータベースとは??
高速処理と高信頼性を両立し、ペタバイト級の多種大量データを蓄積する、ビッグデータ/ IoT時代のデータベースとは??
モノタロウの1900万商品を検索する Elasticsearch構築運用事例(2022-10-26 第50回Elasticsearch 勉強会発表資料)
モノタロウの1900万商品を検索する Elasticsearch構築運用事例(2022-10-26 第50回Elasticsearch 勉強会発表資料)
Cloud impact on IT industry (in Japanese)
Cloud impact on IT industry (in Japanese)
Direct QueryのカスタムSQL(Qlik Tips ~ Qlik を使いこなす!スキルアップ勉強会)
Direct QueryのカスタムSQL(Qlik Tips ~ Qlik を使いこなす!スキルアップ勉強会)
MySQL Binlog Events でストリーム処理してみた #MySQLUC15
MySQL Binlog Events でストリーム処理してみた #MySQLUC15
Netflix Meetup in Kyoto 参加報告
Netflix Meetup in Kyoto 参加報告
李彦宏の百度世界
李彦宏の百度世界
データドリブンな動画コンテンツ制作の裏側
データドリブンな動画コンテンツ制作の裏側
可視化法学(Found it project#9)
可視化法学(Found it project#9)
ビットバンクにおける少人数で支えるインフラチームの戦略
ビットバンクにおける少人数で支えるインフラチームの戦略
Bq sushi(BigQuery lessons learned)
Bq sushi(BigQuery lessons learned)
Flow を使って効率的にデータを集めたその後は Power BI に繋げよう
Flow を使って効率的にデータを集めたその後は Power BI に繋げよう
kintoneで教育をhack
kintoneで教育をhack
ニコニコ動画のタグに関する話(仮)_データ研究会20131110
ニコニコ動画のタグに関する話(仮)_データ研究会20131110
毎月更新されるデータを Excel で集計してレポートを作ってるですって? それ、Power BI と SharePoint フォルダーで自動化できますよー
毎月更新されるデータを Excel で集計してレポートを作ってるですって? それ、Power BI と SharePoint フォルダーで自動化できますよー
仮想環境の設計手法
仮想環境の設計手法
More from (shibao)芝尾 (kouichiro)幸一郎
DXとはなにか。一言で言うなら戦い方が違うということだ。
DXとはなにか?
DXとはなにか?
(shibao)芝尾 (kouichiro)幸一郎
可視化法学のstudycode発表変です。
可視化法学(studycode編)
可視化法学(studycode編)
(shibao)芝尾 (kouichiro)幸一郎
LinkedOpenDataChallenge2016受賞時に使用したプレゼンです
可視化法学(Linked Open Data Challenge 2016)授賞式プレゼン
可視化法学(Linked Open Data Challenge 2016)授賞式プレゼン
(shibao)芝尾 (kouichiro)幸一郎
第9回ニコニコ学会データ研究会のLTで発表したスライドです。 データ研究会のイベントページはこちら http://niconicodatasig9.peatix.com/?lang=ja また、当日の内容はこちらのtogetterを参照下さい https://togetter.com/li/1073090
可視化法学(ニコニコ学会データ研究会第9回)
可視化法学(ニコニコ学会データ研究会第9回)
(shibao)芝尾 (kouichiro)幸一郎
c91にて可視化法学の冊子を頒布した。その際、可視化法学の内容をまとめたA7の小冊子を作った。 それは無料で配布したので、こちらにもあげます。
可視化法学c91紹介リーフレット
可視化法学c91紹介リーフレット
(shibao)芝尾 (kouichiro)幸一郎
超会議2016ニコつく ポスターセッション展示
可視化法学ポスター超会議2016 チラシ
可視化法学ポスター超会議2016 チラシ
(shibao)芝尾 (kouichiro)幸一郎
可視化法学、超会議2016 大和超券ステージ版
可視化法学-大和超券ステージ
可視化法学-大和超券ステージ
(shibao)芝尾 (kouichiro)幸一郎
法律をITを使って可視化する試み 第八回ニコニコ学会βデータ研究会 http://niconicodatasig8.peatix.com/?lang=ja
可視化法学
可視化法学
(shibao)芝尾 (kouichiro)幸一郎
株式会社 Aiming 主催の開発勉強会 第8回の発表資料になります。Aiming社でのデータ集計環境構築の話になります。 http://aiming.connpass.com/event/25004/
BigQueryで集計するシステムを作って分かったKPI集計ツール作成
BigQueryで集計するシステムを作って分かったKPI集計ツール作成
(shibao)芝尾 (kouichiro)幸一郎
AimingでのGoogle Cloud Platformの利用事例を「Google for モバイル・アプリ」というイベントで発表してきました。 Google for モバイル・アプリのURLは https://lp.google-mkto.com/JAPAN-MobileOne-Campaign_LandingPage3.html Aimingでは、データ分析やインフラに興味のあるエンジニを募集しています。
AimingでGoogle Cloud Platformの利用について
AimingでGoogle Cloud Platformの利用について
(shibao)芝尾 (kouichiro)幸一郎
ニコニコデータセット 分析環境作ってみた-ニコニコデータデータ分析研究会 2013/07/27 @ドワンゴ
ニコニコデータセット 分析環境作ってみた-ニコニコデータデータ分析研究会
ニコニコデータセット 分析環境作ってみた-ニコニコデータデータ分析研究会
(shibao)芝尾 (kouichiro)幸一郎
第四回ニコニコ学会in超会議2 ポスターセッション 世界各国のiPhoneアプリランキングを比較してみた。
世界のiPhoneアプリランキング比較してみた
世界のiPhoneアプリランキング比較してみた
(shibao)芝尾 (kouichiro)幸一郎
第一回ニコニコデータ分析研究会発表資料 世界のYoutube 芝尾幸一郎
第一回ニコニコデータ分析研究会発表資料-世界のYoutube
第一回ニコニコデータ分析研究会発表資料-世界のYoutube
(shibao)芝尾 (kouichiro)幸一郎
12/6に行われたニコニコ学会β、5thセクション、「研究してみたマッドネス」で発表させていただきました。3分という短い時間でしたが、面白い発表が出来ました。
ニコニコ学会β発表資料
ニコニコ学会β発表資料
(shibao)芝尾 (kouichiro)幸一郎
'Seeing is Believing' let you to reconstruct your perception.
Seeing is Believing
Seeing is Believing
(shibao)芝尾 (kouichiro)幸一郎
introduce Pycon2010
Introduction Pycon2010
Introduction Pycon2010
(shibao)芝尾 (kouichiro)幸一郎
More from (shibao)芝尾 (kouichiro)幸一郎
(16)
DXとはなにか?
DXとはなにか?
可視化法学(studycode編)
可視化法学(studycode編)
可視化法学(Linked Open Data Challenge 2016)授賞式プレゼン
可視化法学(Linked Open Data Challenge 2016)授賞式プレゼン
可視化法学(ニコニコ学会データ研究会第9回)
可視化法学(ニコニコ学会データ研究会第9回)
可視化法学c91紹介リーフレット
可視化法学c91紹介リーフレット
可視化法学ポスター超会議2016 チラシ
可視化法学ポスター超会議2016 チラシ
可視化法学-大和超券ステージ
可視化法学-大和超券ステージ
可視化法学
可視化法学
BigQueryで集計するシステムを作って分かったKPI集計ツール作成
BigQueryで集計するシステムを作って分かったKPI集計ツール作成
AimingでGoogle Cloud Platformの利用について
AimingでGoogle Cloud Platformの利用について
ニコニコデータセット 分析環境作ってみた-ニコニコデータデータ分析研究会
ニコニコデータセット 分析環境作ってみた-ニコニコデータデータ分析研究会
世界のiPhoneアプリランキング比較してみた
世界のiPhoneアプリランキング比較してみた
第一回ニコニコデータ分析研究会発表資料-世界のYoutube
第一回ニコニコデータ分析研究会発表資料-世界のYoutube
ニコニコ学会β発表資料
ニコニコ学会β発表資料
Seeing is Believing
Seeing is Believing
Introduction Pycon2010
Introduction Pycon2010
ニコニコデータビューアー・改
1.
ニコニコデータ ビューア・改 @shibacow
2.
芝尾幸一郎 • 株式会社Aiming所属
• データ分析を担当 • ニコニコ動画のランキングサイ トを作っている • follow me: @shibacow
3.
ニコニコデータ ビューア
4.
5.
ニコニコデータセット
6.
• ニコニコ動画の情報を配布 •
2007-2012の • 動画情報800万件 • タグ情報40000万件 • コメント情報24億件 • 無料で公開中
7.
ニコニコデータ ビューア
8.
• web上で •
手軽に無料で • ニコニコデータセットの • 分析 • ができる。
9.
10.
不満 • 集計が遅い(21分)
• 土日しか開けられない(お 金が高い)-土日だけで 8000円
11.
作り直し中
12.
データセットビューア・改 • 特徴
• 集計が早い • だいぶ安い
13.
DEMO
14.
早い • 23億件の集計
• 21分 -> 10秒以内 126倍
15.
16.
17.
MySQLとの比較 • 数億件だと、MySQLの
集計は、厳しい。 • 3億円でオラクル買う世 界
18.
早いので • トライアンドエラーがや
りやすい • 集中が長続きする
19.
安い • 土日だけではなく
• 連日開放 • 今までで6ドル • (従量制だが、だいぶ安い)
20.
なぜ早くて安い?
21.
22.
グーグル製データ分析 ツール
23.
何故早い カラム指向 ツリー
アーキテクチャ
24.
本当の所
25.
力技の勝利 • 3台で集計(21分)
• 5000台で集計(10秒)
26.
力技なので • 中間一致に強い
• 5000台使ってgrepして いる。
27.
データセット ビューア・改
28.
改善点 • 集計が早い
• いつでも使える • 無料
29.
新機能
30.
• お手軽グラフツール •
集計結果の保存と拡散 • smidの自動展開
31.
お願い
32.
協力者募集:主にUI 詳しくは芝尾 (@shibacow)まで
33.
34.
お願い2 ドワンゴさん、 そろそろデータセット
更新して
35.
ThankYou • @shibacow
• http://nicodata.info/
Download now