大规模分布式系统架构与设计实战【2025|PDF|Epub|mobi|kindle电子书版本百度云盘下载】

大规模分布式系统架构与设计实战PDF格式电子书版下载

注意：本站所有压缩包均有解压码： 点击下载压缩包解压工具

第1章 概述1

1.1分布式计算、并行计算、云计算概述1

1.2分布式产品Hadoop、 ZooKeeper、 HBase概述6

1.3 Fourinone的产生背景12

第2章 分布式并行计算的原理与实践14

2.1分布式并行计算模式14

2.1.1最初想到的master-slave结构14

2.1.2“包工头-职介所-手工仓库-工人”模式15

2.1.3基于消息中枢的计算模式17

2.1.4基于网状直接交互的计算模式18

2.1.5并行结合串行模式22

2.1.6包工头内部批量多阶段处理模式23

2.1.7计算集群模式和兼容遗留计算系统24

2.1.8工人计算的服务化模式26

2.2跟Hadoop的区别28

2.3关于分布式的一些概念与产品30

2.4配置文件和核心API介绍35

2.5实践与应用36

2.5.1一个简单的示例36

2.5.2工头工人计算模式更完整的示例39

2.5.3工人合并互相say hello的示例44

2.5.4实现Hadoop经典实例Word Count48

2.5.5分布式多机部署的示例52

2.5.6分布式计算自动部署的示例53

2.5.7计算过程中的故障和容灾处理57

2.5.8计算过程中的相关时间属性设置60

2.5.9如何在一台计算机上一次性启动多个进程63

2.5.10如何调用C/C+++程序实现68

2.5.11如何中止工人计算和超时中止68

2.5.12使用并行计算大幅提升递归算法效率73

2.5.13使用并行计算求圆周率π81

2.5.14从赌钱游戏看PageRank算法86

2.5.15 使用并行计算实现上亿排序96

2.5.16工人服务化模式应用示例104

2.6实时流计算107

第3章 分布式协调的实现111

3.1协调架构原理简介111

3.2核心API113

3.3权限机制115

3.4相对于ZooKeeper的区别116

3.5与Paxos算法的区别117

3.6实践与应用119

3.6.1如何实现公共配置管理119

3.6.2如何实现分布式锁126

3.6.3如何实现集群管理129

3.6.4多节点权限操作示例134

3.6.5领导者选举相关属性设置137

第4章 分布式缓存的实现139

4.1小型网站或企业应用的缓存实现架构139

4.2大型分布式缓存系统实现过程140

4.3一致性哈希算法的原理、改进和实现147

4.4解决任意扩容的问题152

4.5解决扩容后数据均匀的问题153

4.6分布式Session的架构设计和实现154

4.7缓存容量的相关属性设置156

4.8缓存清空的相关属性设置158

第5章 消息队列的实现162

5.1闲话中间件与MQ162

5.2 JMS的两种经典模式163

5.3如何实现发送接收的队列模式164

5.4如何实现主题订阅模式168

第6章 分布式文件系统的实现173

6.1 FTTP架构原理解析174

6.2搭建配置FttpAdapter环境177

6.3访问集群文件根目录179

6.4访问和操作远程文件181

6.5集群内文件复制和并行复制184

6.6读写远程文件187

6.7解析远程文件189

6.8并行读写远程文件191

6.9批量并行读写远程文件和事务补偿处理194

6.10如何进行整型读写198

6.11基于整型读写的上亿排序205

第7章 分布式作业调度平台的实现219

7.1调度平台的设计与实现219

7.2资源隔离的实现224

7.3资源调度算法226

7.4其他作业调度平台简介227

7.4.1其他MPI作业资源调度技术227

7.4.2 Mesos和Yarn简介229