MapReduce设计模式2025|PDF|Epub|mobi|kindle电子书版本百度云盘下载

MapReduce设计模式PDF格式电子书版下载

注意：本站所有压缩包均有解压码： 点击下载压缩包解压工具

第1章 设计模式与MapReduce1

1.1 设计模式2

1.2 MapReduce简史3

1.3 MapReduce和Hadoop简介4

1.4 Hadoop示例：单词计数6

1.5 Pig和Hive10

第2章 概要模式12

2.1 数值概要12

2.1.1 模式描述12

2.1.2 数值概要示例16

2.2 倒排索引概要30

2.2.1 模式描述30

2.2.2 倒排索引示例32

2.3 计数器计数34

2.3.1 模式描述34

2.3.2 计数器计数示例36

第3章 过滤模式39

3.1 过滤40

3.1.1 模式描述40

3.1.2 过滤示例43

3.2 布隆过滤45

3.2.1 模式描述45

3.2.2 布隆过滤器示例48

3.3 Top 1053

3.3.1 模式描述53

3.3.2 Top 10示例58

3.4 去重60

3.4.1 模式描述60

3.4.2 去重示例63

第4章 数据组织模式65

4.1 分层结构65

4.1.1 模式描述65

4.1.2 分层结构示例69

4.2 分区76

4.2.1 模式描述76

4.2.2 分区示例79

4.3 分箱81

4.3.1 模式描述81

4.3.2 分箱示例83

4.4 全排序85

4.4.1 模式描述85

4.4.2 全排序示例88

4.5 混排92

4.5.1 模式描述92

4.5.2 混排示例93

第5章 连接模式96

5.1 连接简介97

5.2 reduce端连接102

5.2.1 模式描述102

5.2.2 reduce端连接示例104

5.2.3 使用布隆过滤器的reduce端连接110

5.3 复制连接112

5.3.1 模式描述112

5.3.2 复制连接示例114

5.4 组合连接116

5.4.1 模式描述116

5.4.2 组合连接示例119

5.5 笛卡儿积121

5.5.1 模式描述121

5.5.2 笛卡儿积示例124

第6章 元模式131

6.1 作业链131

6.1.1 关于驱动程序132

6.1.2 作业链示例133

6.1.3 关于shell脚本142

6.1.4 关于JobControl145

6.2 链折叠149

6.2.1 ChainMapper方法和ChainReducer方法153

6.2.2 链折叠示例153

6.3 作业归并158

作业归并示例160

第7章 输入和输出模式166

7.1 在Hadoop中自定义输入和输出166

7.1.1 InputFormat167

7.1.2 RecordReader168

7.1.3 OutputFormat169

7.1.4 RecordWriter170

7.2 生成数据170

7.2.1 模式描述170

7.2.2 生成数据示例172

7.3 外部源输出177

7.3.1 模式描述177

7.3.2 外部源输出示例179

7.4 外部源输入183

7.4.1 模型描述183

7.4.2 外部源输入示例185

7.5 分区裁剪190

7.5.1 模式描述190

7.5.2 分区裁剪示例192

第8章 最后的思考与设计模式的未来203

8.1 数据的本质趋势203

8.1.1 图像、音频和视频203

8.1.2 流式数据204

8.2 YARN的影响204

8.3 作为库或者组件的模式205

8.4 读者可以帮到什么205

附录 布隆过滤器207