Suche senden
Hochladen
大型互联网广告应用系统架构
•
20 gefällt mir
•
3,341 views
S
Shaoning Pan
Folgen
#LAMP人#第14期《海量数据挖掘与应用 – e淘专场》 之 《大型互联网广告应用系统架构》
Weniger lesen
Mehr lesen
Technologie
Melden
Teilen
Melden
Teilen
1 von 15
Jetzt herunterladen
Downloaden Sie, um offline zu lesen
Empfohlen
H base云存储
H base云存储
harryren0524
redis 适用场景与实现
redis 适用场景与实现
iammutex
Oracle cloud 云介绍及测试账户申请
Oracle cloud 云介绍及测试账户申请
Zhaoyang Wang
#Lamp人#淘宝数据魔方的系统架构 -长林
#Lamp人#淘宝数据魔方的系统架构 -长林
drewz lin
关于Hbase
关于Hbase
Xuewen Zhang
海量统计数据的分布式MySQL集群——MyFOX
海量统计数据的分布式MySQL集群——MyFOX
aleafs
Koha 導論
Koha 導論
maolins
淘宝数据魔方的系统架构 -长林
淘宝数据魔方的系统架构 -长林
Shaoning Pan
Empfohlen
H base云存储
H base云存储
harryren0524
redis 适用场景与实现
redis 适用场景与实现
iammutex
Oracle cloud 云介绍及测试账户申请
Oracle cloud 云介绍及测试账户申请
Zhaoyang Wang
#Lamp人#淘宝数据魔方的系统架构 -长林
#Lamp人#淘宝数据魔方的系统架构 -长林
drewz lin
关于Hbase
关于Hbase
Xuewen Zhang
海量统计数据的分布式MySQL集群——MyFOX
海量统计数据的分布式MySQL集群——MyFOX
aleafs
Koha 導論
Koha 導論
maolins
淘宝数据魔方的系统架构 -长林
淘宝数据魔方的系统架构 -长林
Shaoning Pan
淘宝分布式数据处理实践
淘宝分布式数据处理实践
isnull
浅析分布式存储架构—设计自己的存储- 58同城徐振华
浅析分布式存储架构—设计自己的存储- 58同城徐振华
zhuozhe
分布式系统日志处理调研
分布式系统日志处理调研
klandor
张铁安:Feed系统架构浅析
张铁安:Feed系统架构浅析
Leechael
腾讯大讲堂45 解剖ttc
腾讯大讲堂45 解剖ttc
areyouok
罗李:构建一个跨机房的Hadoop集群
罗李:构建一个跨机房的Hadoop集群
hdhappy001
高性能并发Web服务器实现核心内幕
高性能并发Web服务器实现核心内幕
ideawu
05 杨志丰
05 杨志丰
锐 张
Ocean base 千亿级海量数据库-日照
Ocean base 千亿级海量数据库-日照
Shaoning Pan
Cassandra简介.ppt
Cassandra简介.ppt
james tong
系统架构浅析
系统架构浅析
uptodate
Cassandra架构与应用
Cassandra架构与应用
zhangzhaokun
用Python实现hadoop任务调度管理
用Python实现hadoop任务调度管理
Leo Zhou
淘宝对象存储与Cdn系统到服务
淘宝对象存储与Cdn系统到服务
drewz lin
Taobao图片存储与cdn系统到服务
Taobao图片存储与cdn系统到服务
Wensong Zhang
大型系统的Java中间件实践q con北京
大型系统的Java中间件实践q con北京
vanadies10
大数据时代feed架构 (ArchSummit Beijing 2014)
大数据时代feed架构 (ArchSummit Beijing 2014)
Tim Y
Taobao海量图片存储与cdn系统
Taobao海量图片存储与cdn系统
智杰 付
淘宝图片存储与Cdn系统
淘宝图片存储与Cdn系统
Dai Jun
Taobao海量图片存储与cdn系统
Taobao海量图片存储与cdn系统
Wensong Zhang
Taobao 海量图片存储与CDN系统02
Taobao 海量图片存储与CDN系统02
lovingprince58
Taobao海量图片存储与cdn系统
Taobao海量图片存储与cdn系统
Michael Zhang
Weitere ähnliche Inhalte
Was ist angesagt?
淘宝分布式数据处理实践
淘宝分布式数据处理实践
isnull
浅析分布式存储架构—设计自己的存储- 58同城徐振华
浅析分布式存储架构—设计自己的存储- 58同城徐振华
zhuozhe
分布式系统日志处理调研
分布式系统日志处理调研
klandor
张铁安:Feed系统架构浅析
张铁安:Feed系统架构浅析
Leechael
腾讯大讲堂45 解剖ttc
腾讯大讲堂45 解剖ttc
areyouok
罗李:构建一个跨机房的Hadoop集群
罗李:构建一个跨机房的Hadoop集群
hdhappy001
高性能并发Web服务器实现核心内幕
高性能并发Web服务器实现核心内幕
ideawu
05 杨志丰
05 杨志丰
锐 张
Ocean base 千亿级海量数据库-日照
Ocean base 千亿级海量数据库-日照
Shaoning Pan
Cassandra简介.ppt
Cassandra简介.ppt
james tong
系统架构浅析
系统架构浅析
uptodate
Cassandra架构与应用
Cassandra架构与应用
zhangzhaokun
用Python实现hadoop任务调度管理
用Python实现hadoop任务调度管理
Leo Zhou
Was ist angesagt?
(13)
淘宝分布式数据处理实践
淘宝分布式数据处理实践
浅析分布式存储架构—设计自己的存储- 58同城徐振华
浅析分布式存储架构—设计自己的存储- 58同城徐振华
分布式系统日志处理调研
分布式系统日志处理调研
张铁安:Feed系统架构浅析
张铁安:Feed系统架构浅析
腾讯大讲堂45 解剖ttc
腾讯大讲堂45 解剖ttc
罗李:构建一个跨机房的Hadoop集群
罗李:构建一个跨机房的Hadoop集群
高性能并发Web服务器实现核心内幕
高性能并发Web服务器实现核心内幕
05 杨志丰
05 杨志丰
Ocean base 千亿级海量数据库-日照
Ocean base 千亿级海量数据库-日照
Cassandra简介.ppt
Cassandra简介.ppt
系统架构浅析
系统架构浅析
Cassandra架构与应用
Cassandra架构与应用
用Python实现hadoop任务调度管理
用Python实现hadoop任务调度管理
Ähnlich wie 大型互联网广告应用系统架构
淘宝对象存储与Cdn系统到服务
淘宝对象存储与Cdn系统到服务
drewz lin
Taobao图片存储与cdn系统到服务
Taobao图片存储与cdn系统到服务
Wensong Zhang
大型系统的Java中间件实践q con北京
大型系统的Java中间件实践q con北京
vanadies10
大数据时代feed架构 (ArchSummit Beijing 2014)
大数据时代feed架构 (ArchSummit Beijing 2014)
Tim Y
Taobao海量图片存储与cdn系统
Taobao海量图片存储与cdn系统
智杰 付
淘宝图片存储与Cdn系统
淘宝图片存储与Cdn系统
Dai Jun
Taobao海量图片存储与cdn系统
Taobao海量图片存储与cdn系统
Wensong Zhang
Taobao 海量图片存储与CDN系统02
Taobao 海量图片存储与CDN系统02
lovingprince58
Taobao海量图片存储与cdn系统
Taobao海量图片存储与cdn系统
Michael Zhang
开源+自主开发 - 淘宝软件基础设施构建实践
开源+自主开发 - 淘宝软件基础设施构建实践
Wensong Zhang
Java@taobao
Java@taobao
vanadies10
章文嵩:Taobao海量图片存储与cdn系统 v2-系统架构师
章文嵩:Taobao海量图片存储与cdn系统 v2-系统架构师
Enlight Chen
Taobao海量图片存储与cdn系统 v2-系统架构师
Taobao海量图片存储与cdn系统 v2-系统架构师
Wensong Zhang
天涯论坛的技术进化史-Qcon2011
天涯论坛的技术进化史-Qcon2011
Yiwei Ma
RockStor - A Cloud Object System based on Hadoop
RockStor - A Cloud Object System based on Hadoop
Schubert Zhang
淘宝软件基础设施构建实践
淘宝软件基础设施构建实践
Wensong Zhang
Taobao base
Taobao base
mysqlops
淘宝软件基础设施构建实践
淘宝软件基础设施构建实践
lovingprince58
淘宝软件基础设施构建实践
淘宝软件基础设施构建实践
drewz lin
deep inside Sina App Engine cloud service
deep inside Sina App Engine cloud service
cong lei
Ähnlich wie 大型互联网广告应用系统架构
(20)
淘宝对象存储与Cdn系统到服务
淘宝对象存储与Cdn系统到服务
Taobao图片存储与cdn系统到服务
Taobao图片存储与cdn系统到服务
大型系统的Java中间件实践q con北京
大型系统的Java中间件实践q con北京
大数据时代feed架构 (ArchSummit Beijing 2014)
大数据时代feed架构 (ArchSummit Beijing 2014)
Taobao海量图片存储与cdn系统
Taobao海量图片存储与cdn系统
淘宝图片存储与Cdn系统
淘宝图片存储与Cdn系统
Taobao海量图片存储与cdn系统
Taobao海量图片存储与cdn系统
Taobao 海量图片存储与CDN系统02
Taobao 海量图片存储与CDN系统02
Taobao海量图片存储与cdn系统
Taobao海量图片存储与cdn系统
开源+自主开发 - 淘宝软件基础设施构建实践
开源+自主开发 - 淘宝软件基础设施构建实践
Java@taobao
Java@taobao
章文嵩:Taobao海量图片存储与cdn系统 v2-系统架构师
章文嵩:Taobao海量图片存储与cdn系统 v2-系统架构师
Taobao海量图片存储与cdn系统 v2-系统架构师
Taobao海量图片存储与cdn系统 v2-系统架构师
天涯论坛的技术进化史-Qcon2011
天涯论坛的技术进化史-Qcon2011
RockStor - A Cloud Object System based on Hadoop
RockStor - A Cloud Object System based on Hadoop
淘宝软件基础设施构建实践
淘宝软件基础设施构建实践
Taobao base
Taobao base
淘宝软件基础设施构建实践
淘宝软件基础设施构建实践
淘宝软件基础设施构建实践
淘宝软件基础设施构建实践
deep inside Sina App Engine cloud service
deep inside Sina App Engine cloud service
Mehr von Shaoning Pan
海量数据计算架构实现
海量数据计算架构实现
Shaoning Pan
RTB 优化算法
RTB 优化算法
Shaoning Pan
Technology Changes
Technology Changes
Shaoning Pan
一淘广告机器学习
一淘广告机器学习
Shaoning Pan
海量用户数据处理及其在一淘广告和推荐中的应用
海量用户数据处理及其在一淘广告和推荐中的应用
Shaoning Pan
Tanx成长之路 real time media
Tanx成长之路 real time media
Shaoning Pan
移动社交网络动态框架 李章晶
移动社交网络动态框架 李章晶
Shaoning Pan
移动互联网产业分析 梁文静
移动互联网产业分析 梁文静
Shaoning Pan
曾勇 Elastic search-intro
曾勇 Elastic search-intro
Shaoning Pan
Hadoop的etl任务—flume使用及其 优化-品友互动
Hadoop的etl任务—flume使用及其 优化-品友互动
Shaoning Pan
互联网广告发展的趋势-品友互动
互联网广告发展的趋势-品友互动
Shaoning Pan
互联网行为分析和数据挖掘-品友互动
互联网行为分析和数据挖掘-品友互动
Shaoning Pan
如何构建一个高可用可扩展的广告投放平台-品友互动
如何构建一个高可用可扩展的广告投放平台-品友互动
Shaoning Pan
网站前段性能优化-品友互动
网站前段性能优化-品友互动
Shaoning Pan
品友互动 Hadoop的etl任务—flume使用及其 优化
品友互动 Hadoop的etl任务—flume使用及其 优化
Shaoning Pan
分布式计算与Hadoop - 刘鹏
分布式计算与Hadoop - 刘鹏
Shaoning Pan
Cassandra实时统计分享 - 赵伟
Cassandra实时统计分享 - 赵伟
Shaoning Pan
Android应用开发 - 沈大海
Android应用开发 - 沈大海
Shaoning Pan
Think social to go global
Think social to go global
Shaoning Pan
腾讯开放平台 Hellena
腾讯开放平台 Hellena
Shaoning Pan
Mehr von Shaoning Pan
(20)
海量数据计算架构实现
海量数据计算架构实现
RTB 优化算法
RTB 优化算法
Technology Changes
Technology Changes
一淘广告机器学习
一淘广告机器学习
海量用户数据处理及其在一淘广告和推荐中的应用
海量用户数据处理及其在一淘广告和推荐中的应用
Tanx成长之路 real time media
Tanx成长之路 real time media
移动社交网络动态框架 李章晶
移动社交网络动态框架 李章晶
移动互联网产业分析 梁文静
移动互联网产业分析 梁文静
曾勇 Elastic search-intro
曾勇 Elastic search-intro
Hadoop的etl任务—flume使用及其 优化-品友互动
Hadoop的etl任务—flume使用及其 优化-品友互动
互联网广告发展的趋势-品友互动
互联网广告发展的趋势-品友互动
互联网行为分析和数据挖掘-品友互动
互联网行为分析和数据挖掘-品友互动
如何构建一个高可用可扩展的广告投放平台-品友互动
如何构建一个高可用可扩展的广告投放平台-品友互动
网站前段性能优化-品友互动
网站前段性能优化-品友互动
品友互动 Hadoop的etl任务—flume使用及其 优化
品友互动 Hadoop的etl任务—flume使用及其 优化
分布式计算与Hadoop - 刘鹏
分布式计算与Hadoop - 刘鹏
Cassandra实时统计分享 - 赵伟
Cassandra实时统计分享 - 赵伟
Android应用开发 - 沈大海
Android应用开发 - 沈大海
Think social to go global
Think social to go global
腾讯开放平台 Hellena
腾讯开放平台 Hellena
大型互联网广告应用系统架构
1.
大型互联网广告应用系统架构
2.
第14期:
《海量数据挖掘与应用 》- e淘专场 www.LAMPER.cn http://weibo.com/lampercn
3.
大纲 • 一、介绍 • 二、高并发应用系统 •
三、海量数据存储系统 • 四、中间件应用 • 五、广告系统运维和监控
4.
背景介绍 • 广告产品 –
淘宝直通车,一淘直通车 – 钻石展位 – Tanx – 淘宠(阿里妈妈)
5.
直通车整体架构 • 业务系统 –
广告主自助系统 – CRM – 実核系统 – 数据同步 – 开放API • 广告引擎 – 搜索 – 非搜索 • 数据平台,计算平台和算法 • 防作弊和点击结算
6.
7.
8.
9.
10.
高并发应用系统
• 每天亿级的API调用 淘宠API • 几十万广告主使用 直通车API • 直通车已开放上百个API供合作代理商使用 • 历史报表数据查询和下载 报表API • 实时报表数据开放
11.
业务系统架构
Tengine (Nginx) Tengine (Nginx) Tengine (Nginx) + + + Tomcat Tomcat Tomcat JDBC HSF Se ssio n Tair 集群 用户库 HSF Service Oracle Provider 事务型关系数据库 消息队列 Redis Redis Oracle Oracle Oracle Master Slave
12.
海量数据存储系统 • Oracle:核心广告数据 • HDFS:日志,报表计算数据 •
OceanBase:大宠户用户报表数据,实时报表数据 • Mysql:用户报表数据 • MongoDB: 用户操作日志 • Redis:消息队列数据 • Tair:Session数据,Online应用数据缓存 • TFS:图片,下载文件
13.
中间件应用 • HSF
– 远程服务调用 – 软负载均衡 • TDDL – 透明数据库切分 – 读写分离 – 数据复制(非对称) • Notify – 保证通知的消息中间件(MQ) • Meta – 保证分区时序的持久化消息队列 • Diamond – 静态配置中心服务 • Time Tunnel 3 – 日志收集
14.
广告系统运维和监控 黄金眼
• 实时监控(分钟级)广告位消耗 系统监控 • PE监控工具: tsar, nagios 监控门户 • 哈勃应用系统监控
15.
Q&A 谢谢!
Jetzt herunterladen