SlideShare ist ein Scribd-Unternehmen logo
1 von 27
Downloaden Sie, um offline zu lesen
PIXNET
Algorithm Engineering Team
Kent 施晨揚
全台最大的社群數據實驗室
800,000,000 篇文章
7,700,000 位訪客
6,000,000 名會員
20,00,000 造訪紀錄
數據導向
新商業模式
Cloud
Composer
App
Engine
Kubernetes
Engine
Compute
Engine
BigQueryGPU
Cloud
Storage
統計
● 營運報表
● 監控指標
● 排行榜
機器學習
● 性別年齡預測
● 文章分類
● 內文實體連結
● 圖片搜尋
分析
● 族群輪廓分析
● 事件分析
● 異常流量
應用
● 文章推薦
● 廣告投遞
● 導流服務
每天有 770萬
UV !
但未入登者是
誰?
輪廓分析
精準服務投遞 !
透過閱讀行為勾勒瀏覽者輪廓
• 晚上 10:00 開始瀏覽
• 喜歡看親子類相關文章
• 常搜尋關鍵字為「副食品」
透過閱讀行為勾勒瀏覽者輪廓
• 早上 8:00 開始瀏覽
• 財金類文章且文章有上密碼鎖
• 常搜尋關鍵字為「美股」
轉換成為機器學習問題
男生 或 女生
閱覽
行為 15-25
25-35
45-55
>55
完整的閱讀者瀏覽歷程
部落客優質文章
社群內容經營專家制定關鍵字及分類
透過演算法分析出眾多讀者的全貌
利用 PIXinsight 歸納,將依興趣分群
親子
旅遊 美妝
運動 流行
電影汽車
6742 個關鍵字
149 個類別(標籤)
利用 Google Data Studio - 韓國旅遊
韓式料理
懷孕
利用 Google Data Studio - 保健食品
醫療
追星族
文章 x 使用者瀏覽紀錄 x 關鍵字集
○ 2000萬 瀏覽紀錄 / 天
○ 使用者 90 天 拜訪紀錄
○ 600 萬篇文章
○ 6742 關鍵字
複雜度
Computation Complexity
180,600,000 筆
7,700,000筆 Key Grouping
利用 BigQuery
1.8 億筆 User Behavior Log
聚合
小於 7 分鐘
Collection and Computation
with BigQuery
BigQuery
Cloud
Dataproc
Cloud
Storage
Compute
Engine
Dataproc Cluster
文章量 : 600 萬
使用者數 : 600 萬
運算時間 : 7.5 小時
Speed < 1 Miniutes
Simple = (1 Click ,1 Pages)
Convenient @ Mobile Phone
Data Query Robot
萬豪酒店
文章數
觸及數
BigQuery
App Engine
BigQuery
App Engine
萬豪酒店
相似酒店
公投
BigQuery
App Engine
調閱文
章品質
BigQuery
App Engine
關鍵字重
疊分析
BigQuery
App Engine
利用 Google Data Studio - Robot 使用分析
2017 年至今
累積了 12,000
Search Keyword Analysis by BigQuery
BigQuery
Metabase
Count Search Click Log
in few Seconds
SELECT sum(clicks ) FROM
`pixnet-gt.grouptargeting.search_console_2018*` LIMIT 1000
8億
Google Data Studio - 關鍵字觀察報表
熱門關鍵字
讓營運部門觀察分析
7 月
延禧攻略
8 月
如懿傳

Weitere ähnliche Inhalte

Was ist angesagt?

薛伟:腾讯广点通——大数据之上的实时精准推荐
薛伟:腾讯广点通——大数据之上的实时精准推荐薛伟:腾讯广点通——大数据之上的实时精准推荐
薛伟:腾讯广点通——大数据之上的实时精准推荐
hdhappy001
 

Was ist angesagt? (16)

Observe Changes of Taiwan Big Data Communities with Small Data (Updated)
Observe Changes of Taiwan Big Data Communities with Small Data (Updated)Observe Changes of Taiwan Big Data Communities with Small Data (Updated)
Observe Changes of Taiwan Big Data Communities with Small Data (Updated)
 
Realtime analytics with Flink and Druid
Realtime analytics with Flink and DruidRealtime analytics with Flink and Druid
Realtime analytics with Flink and Druid
 
Trinity BDM - 橋接傳統與未來
Trinity BDM - 橋接傳統與未來Trinity BDM - 橋接傳統與未來
Trinity BDM - 橋接傳統與未來
 
Postmortem of 'Person of Interest' - Big data rc sharing
Postmortem of 'Person of Interest' - Big data rc sharingPostmortem of 'Person of Interest' - Big data rc sharing
Postmortem of 'Person of Interest' - Big data rc sharing
 
Data Pipeline Matters
Data Pipeline MattersData Pipeline Matters
Data Pipeline Matters
 
Data Engineering in Taiwan: PAST, NOW and FUTURE
Data Engineering in Taiwan: PAST, NOW and FUTUREData Engineering in Taiwan: PAST, NOW and FUTURE
Data Engineering in Taiwan: PAST, NOW and FUTURE
 
Hadoop 生態系十年回顧與未來展望
Hadoop 生態系十年回顧與未來展望Hadoop 生態系十年回顧與未來展望
Hadoop 生態系十年回顧與未來展望
 
Data Leaders in Action - 資料價值領袖風範與關鍵行動
Data Leaders in Action - 資料價值領袖風範與關鍵行動Data Leaders in Action - 資料價值領袖風範與關鍵行動
Data Leaders in Action - 資料價值領袖風範與關鍵行動
 
薛伟:腾讯广点通——大数据之上的实时精准推荐
薛伟:腾讯广点通——大数据之上的实时精准推荐薛伟:腾讯广点通——大数据之上的实时精准推荐
薛伟:腾讯广点通——大数据之上的实时精准推荐
 
「大航道計畫」快問快答
「大航道計畫」快問快答「大航道計畫」快問快答
「大航道計畫」快問快答
 
Power BI x R
Power BI x RPower BI x R
Power BI x R
 
Big Data Projet Management the Body of Knowledge (BDPMBOK)
Big Data Projet Management the Body of Knowledge (BDPMBOK)Big Data Projet Management the Body of Knowledge (BDPMBOK)
Big Data Projet Management the Body of Knowledge (BDPMBOK)
 
2020/7/25 台灣人工智慧學校|講題:AI與資料視覺化
2020/7/25 台灣人工智慧學校|講題:AI與資料視覺化2020/7/25 台灣人工智慧學校|講題:AI與資料視覺化
2020/7/25 台灣人工智慧學校|講題:AI與資料視覺化
 
Track A-1: Cloudera 大數據產品和技術最前沿資訊報告
Track A-1: Cloudera 大數據產品和技術最前沿資訊報告Track A-1: Cloudera 大數據產品和技術最前沿資訊報告
Track A-1: Cloudera 大數據產品和技術最前沿資訊報告
 
啟動你的AI工匠魂
啟動你的AI工匠魂啟動你的AI工匠魂
啟動你的AI工匠魂
 
Track C-1 大數據時代的產品 ─ 創新與洞察決策
Track C-1 大數據時代的產品 ─ 創新與洞察決策Track C-1 大數據時代的產品 ─ 創新與洞察決策
Track C-1 大數據時代的產品 ─ 創新與洞察決策
 

Ähnlich wie Google Cloud Summit BigQuery PIXNET

网站分析 让网站在你的面前裸奔
网站分析 让网站在你的面前裸奔网站分析 让网站在你的面前裸奔
网站分析 让网站在你的面前裸奔
ericyaocn
 
PChome.net 2009 Mediakit
PChome.net 2009 MediakitPChome.net 2009 Mediakit
PChome.net 2009 Mediakit
bridge38
 
Google Analytics 使用者行為分析 @ Front-End Developers Taiwan Party - 9
Google Analytics 使用者行為分析 @ Front-End Developers Taiwan Party - 9Google Analytics 使用者行為分析 @ Front-End Developers Taiwan Party - 9
Google Analytics 使用者行為分析 @ Front-End Developers Taiwan Party - 9
Hans Shih
 
Se shang hai_05_tongqu
Se shang hai_05_tongquSe shang hai_05_tongqu
Se shang hai_05_tongqu
Tech2IPO
 
Ne tivism intro
Ne tivism introNe tivism intro
Ne tivism intro
jimyhuang
 
UXD product requirement report
UXD product requirement reportUXD product requirement report
UXD product requirement report
aido Cho
 

Ähnlich wie Google Cloud Summit BigQuery PIXNET (20)

Data Analyse Black Horse - ClickHouse
Data Analyse Black Horse - ClickHouseData Analyse Black Horse - ClickHouse
Data Analyse Black Horse - ClickHouse
 
网站分析 让网站在你的面前裸奔
网站分析 让网站在你的面前裸奔网站分析 让网站在你的面前裸奔
网站分析 让网站在你的面前裸奔
 
專案設計流程 x Prott 蹦出新滋味
專案設計流程 x Prott 蹦出新滋味專案設計流程 x Prott 蹦出新滋味
專案設計流程 x Prott 蹦出新滋味
 
優化宅的日常-數據分析篇
優化宅的日常-數據分析篇優化宅的日常-數據分析篇
優化宅的日常-數據分析篇
 
PChome.net 2009 Mediakit
PChome.net 2009 MediakitPChome.net 2009 Mediakit
PChome.net 2009 Mediakit
 
台中市創業平台建置計畫
台中市創業平台建置計畫台中市創業平台建置計畫
台中市創業平台建置計畫
 
Toutiao 2013 Jan Series B Funding Deck
Toutiao 2013 Jan Series B Funding DeckToutiao 2013 Jan Series B Funding Deck
Toutiao 2013 Jan Series B Funding Deck
 
LWC15建一個有溫度的數位典藏報告人:臺北市議會圖書館 鄭有容館員
LWC15建一個有溫度的數位典藏報告人:臺北市議會圖書館 鄭有容館員LWC15建一個有溫度的數位典藏報告人:臺北市議會圖書館 鄭有容館員
LWC15建一個有溫度的數位典藏報告人:臺北市議會圖書館 鄭有容館員
 
[SDX2016] UX 不只是優化 – 透過洞察提昇商業價值 / 蔡明哲 悠識數位 首席體驗架構師
[SDX2016] UX 不只是優化 – 透過洞察提昇商業價值 / 蔡明哲 悠識數位 首席體驗架構師[SDX2016] UX 不只是優化 – 透過洞察提昇商業價值 / 蔡明哲 悠識數位 首席體驗架構師
[SDX2016] UX 不只是優化 – 透過洞察提昇商業價值 / 蔡明哲 悠識數位 首席體驗架構師
 
資料視覺化 (科智企業股份有限公司 內訓課程)
資料視覺化 (科智企業股份有限公司 內訓課程)資料視覺化 (科智企業股份有限公司 內訓課程)
資料視覺化 (科智企業股份有限公司 內訓課程)
 
Google Analytics 使用者行為分析 @ Front-End Developers Taiwan Party - 9
Google Analytics 使用者行為分析 @ Front-End Developers Taiwan Party - 9Google Analytics 使用者行為分析 @ Front-End Developers Taiwan Party - 9
Google Analytics 使用者行為分析 @ Front-End Developers Taiwan Party - 9
 
迈向企业级移动之路
迈向企业级移动之路迈向企业级移动之路
迈向企业级移动之路
 
Medialand 2013
Medialand 2013Medialand 2013
Medialand 2013
 
[網路星期二] 網站流量分析---這樣做就對了!!:環資-大誌-Wilson
[網路星期二] 網站流量分析---這樣做就對了!!:環資-大誌-Wilson[網路星期二] 網站流量分析---這樣做就對了!!:環資-大誌-Wilson
[網路星期二] 網站流量分析---這樣做就對了!!:環資-大誌-Wilson
 
Web Analytics 2.0 的新世界
Web Analytics 2.0 的新世界Web Analytics 2.0 的新世界
Web Analytics 2.0 的新世界
 
Se shang hai_05_tongqu
Se shang hai_05_tongquSe shang hai_05_tongqu
Se shang hai_05_tongqu
 
Ne tivism intro
Ne tivism introNe tivism intro
Ne tivism intro
 
UXD product requirement report
UXD product requirement reportUXD product requirement report
UXD product requirement report
 
Streaming architecture zx_dec2015
Streaming architecture zx_dec2015Streaming architecture zx_dec2015
Streaming architecture zx_dec2015
 
智能 Bot 應用情境分享
智能 Bot 應用情境分享智能 Bot 應用情境分享
智能 Bot 應用情境分享
 

Google Cloud Summit BigQuery PIXNET