-
第6章 分布式文件系统的实现
第6章 分布式文件系统的实现 第6章 分布式文件系统的实现 本章讲述如何使用FTTP去实现一个分布式文件系统，包括FTTP的架构原理和远程文件各种方式的访问和操作，以及整型数据处理等，包含了每一步的具体操作，可帮助入门的读者快速上手。 在FTTP中通过FttpAdapter和FileAdapter实现文件IO的支持。其中，FttpAdapter提供对... -
2.5.4 实现Hadoop经典实例Word Count
2.5.4 实现Hadoop经典实例Word Count 2.5.4 实现Hadoop经典实例Word Count 很多人是通过Word Count入门分布式并行计算，该demo演示了Hadoop的经典实例Word Count的实现。 ❏ 输入数据：n个数据文件，每个1G大小，为了方便统计，每个文件的数据由"aaa bbb…ccc"(由空格分割的1k... -
第13章 分布式处理与大数据平台
第13章 分布式处理与大数据平台 第13章 分布式处理与大数据平台 分布式系统和大数据处理平台是目前业界关注的热门技术。 本章将重点介绍热门的消息队列中间件RabbitMQ，分布式任务处理平台Celery，大数据分布式处理的三大重量级武器：Hadoop、Spark、Storm，以及新一代的数据采集和分析引擎Elasticsearch。 围绕如何基于... -
第2章 分布式并行计算的原理与实践
第2章 分布式并行计算的原理与实践 第2章 分布式并行计算的原理与实践 本章首先讲述分布式并行计算的各种设计模式和原理机制，并进一步说明Fourinone与市场上其他并行计算产品和技术的区别，最后手把手演示大量并行计算案例。 本章讲述的分布式并行计算思想、模式、技巧、实现，与编程语言无关，读者可以用多台计算机来尝试编程。 -
空标题文档
5.1 数据库瓶颈阻碍业务的持续发展 在淘宝平台向共享服务体系改造的过程中，通过各个服务中心拥有各自独立数据库的方式，即采用数据垂直分区的方式对业务数据进行分区，确实在很大程度上缓解了当时数据库连接数资源捉襟见肘和数据库因为表多、数据多造成的性能等问题。从当时淘宝业务突飞猛进式的发展势头来看，单一服务中心的数据访问压力也必然很快会达到单机数据库的承载上限... -
2.5.7 计算过程中的故障和容灾处理
2.5.7 计算过程中的故障和容灾处理 2.5.7 计算过程中的故障和容灾处理 使用Fourinone可以完成大部分分布式并行计算需求，但是计算过程中的故障和容灾处理是怎么进行的呢，这里详细分析一下。 总的来说，Fourinone框架不会在设计中抛弃错误不处理或者容忍错误导致框架崩溃，框架通常会捕获所有的错误反馈给开发者去处理，但是框架本身不自作主张... -
2.1.3 基于消息中枢的计算模式
2.1.3 基于消息中枢的计算模式 2.1.3 基于消息中枢的计算模式 由于Fourinone提供简单MQ的支持，因此包工头和工人之间的交互也可以以消息中枢的模式进行，包工头将需要工人执行的任务/命令/消息发送到消息中枢，工人监听消息中枢上各自的消息队列，一旦自己的队列有新内容，便接收执行任务，各个工人以并行的方式进行，如图2-3所示。 图2-3... -
第7章 分布式数据库
第7章 分布式数据库 7.1 数据库中间层" level="3"> 7.1 数据库中间层 7.1.1 架构" level="4"> 7.1.1 架构 第7章 分布式数据库 关系数据库理论汇集了计算机科学家几十年的智慧，Oracle、Microsoft SQL Server、MySQL等关系数据库系统广泛应用在各行各业中。可以说，没有关系数据库，就没... -
4.2 大型分布式缓存系统实现过程
4.2 大型分布式缓存系统实现过程 4.2 大型分布式缓存系统实现过程 我们接着上一节的思路，如果是大型网站的缓存，单台ParkServer的压力不能承受，需要建立多台CacheServer，并使用CacheFacade进行负载均衡。CacheFacade会根据key自动寻找存储它的CacheServer，数据在多台CacheServer上是均匀分布的... -
4.6 分布式Session的架构设计和实现
4.6 分布式Session的架构设计和实现 4.6 分布式Session的架构设计和实现 如果建立一个网站，经常用到Session，Web中的Session指的就是用户在浏览某个网站时，从进入网站到浏览器关闭所经过的这段时间，也就是用户浏览这个网站所花费的时间。一个Session的概念需要包括特定的客户端、特定的服务器端以及不中断的操作时间。A用户和...