![淘宝分布式数据处理实践 淘宝数据平台及产品部 周敏 [email_address] 2010-09-04](https://image.slidesharecdn.com/random-100910061242-phpapp02/85/-1-320.jpg)
![主要内容 ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]](data:image/gif;base64,R0lGODlhAQABAIAAAAAAAP///yH5BAEAAAAALAAAAAABAAEAAAIBRAA7)
Empfohlen
Weitere ähnliche Inhalte
Was ist angesagt?
Was ist angesagt? (20)
Ähnlich wie 淘宝分布式数据处理实践
Ähnlich wie 淘宝分布式数据处理实践 (20)
Mehr von isnull
淘宝分布式数据处理实践
- 1. 淘宝分布式数据处理实践 淘宝数据平台及产品部 周敏 [email_address] 2010-09-04
- 3. 淘宝的数据 Oracle 备库 MySQL 备库 日志系统 云梯 1 TimeTunnel JDBCDUMP 数据平台 搜索 支付宝 B2B 云梯 2 Gateway Servers 数据魔方 量子统计 口碑 DataExchange 爬虫数据 Map Reduce Java Jobs Streaming Jobs Hive Jobs 广告 BI 淘数据 推荐系统 搜索排行 …
- 15. 分布式数据仓库构思 Hadoop 集群 JobTracker TaskTracker Postgres 实例 MapTask ReduceTask TaskTracker Postgres 实例 MapTask ReduceTask TaskTracker Postgres 实例 MapTask ReduceTask 提交 MapReduce 作业 Anthill 服务器 元数据库 分析器 优化器 规划器 执行器 Anthill 客户端 网络
Hinweis der Redaktion
- 45399569 files and directories, 60602161 blocks = 106001730 total. Heap Memory used 29.41 GB is 74% of Commited Heap Memory 39.6 GB. Max Heap Memory is 39.6 GB. Non Heap Memory used 26.01 MB is 67% of Commited Non Heap Memory 38.6 MB. Max Non Heap Memory is 132 MB. Configured Capacity : 9.1 PB DFS Used : 7.01 PB Non DFS Used : 155.2 TB DFS Remaining : 1.93 PB DFS Used% : 77.09 % DFS Remaining% : 21.24 % Live Nodes : 1043 Dead Nodes : 50
- 45399569 files and directories, 60602161 blocks = 106001730 total. Heap Memory used 29.41 GB is 74% of Commited Heap Memory 39.6 GB. Max Heap Memory is 39.6 GB. Non Heap Memory used 26.01 MB is 67% of Commited Non Heap Memory 38.6 MB. Max Non Heap Memory is 132 MB. Configured Capacity : 9.1 PB DFS Used : 7.01 PB Non DFS Used : 155.2 TB DFS Remaining : 1.93 PB DFS Used% : 77.09 % DFS Remaining% : 21.24 % Live Nodes : 1043 Dead Nodes : 50
- 7.01PB