大数据技术体系与开源生态2025|PDF|Epub|mobi|kindle电子书版本百度云盘下载

大数据技术体系与开源生态PDF格式电子书版下载

注意：本站所有压缩包均有解压码： 点击下载压缩包解压工具

第一篇 大数据技术体系与开源生态概述3

第1章 大数据技术体系概述3

1.1大数据技术的主要内容3

1.2大数据开源框架4

1.2.1大数据获取技术4

1.2.2大数据管理技术5

1.2.3大数据处理技术5

1.2.4大数据安全与治理技术5

1.2.5大数据分析与挖掘技术6

1.2.6大数据可视化技术6

1.3本章小结7

第2章 开源生态与代码托管平台简介8

2.1开源和开源软件的简介8

2.1.1开源的简介8

2.1.2开源软件的简介8

2.2开源代码托管平台——GitHub9

2.3本章小结10

第3章 大数据开源生态的介绍11

3.1Apache软件基金会11

3.1.1发展历历史11

3.1.2主要参与者12

3.1.3开源项目13

3.2Linux基金会14

3.2.1发展历史15

3.2.2主要参与者15

3.2.3开源项目17

3.3开源中国18

3.3.1发展历史18

3.3.2主要参与者19

3.4本章小结19

第4章 云计算开源生态的介绍20

4.1OpenStack基金会20

4.1.1发展历史21

4.1.2主要参与者21

4.1.3开源项目22

4.2Cloud Native Computing Foundation23

4.2.1发展历史23

4.2.2主要参与者23

4.2.3开源项目25

4.3本章小结25

第二篇 大数据获取技术29

第5章 消息队列相关技术29

5.1ZeroMQ29

5.1.1技术概况29

5.1.2发展近况和技术优势30

5.1.3软件架构31

5.1.4应用场景33

5.2RabbitMQ34

5.2.1技术概况34

5.2.2发展近况和技术优势35

5.2.3软件架构36

5.2.4应用场景38

5.3Active MQ40

5.3.1技术概况40

5.3.2发展近况和技术优势40

5.3.3软件架构42

5.3.4应用场景43

5.4Apache Kafka44

5.4.1技术概况44

5.4.2发展近况和技术优势45

5.4.3软件架构46

5.4.4应用场景47

5.5本章小结50

第三篇 大数据管理技术53

第6章 数据库相关技术53

6.1传统关系型数据库53

6.1.1MySQL53

6.1.2PostgreSQL60

6.2文档型数据库65

6.2.1MongoDB65

6.2.2Apache CouchDB69

6.3列存储数据库73

6.3.1Vertica73

6.3.2Apache HBase76

6.4键/值对型数据库80

6.4.1Redis80

6.4.2Riak82

6.5图形数据库85

6.5.1Neo4j85

6.5.2OrientDB90

6.5.3InfiiniteGraph93

6.6基于内存的分布式文件系统之Alluxio95

6.6.1技术概况95

6.6.2发展近况和技术优势96

6.6.3软件架构97

6.6.4应用场景98

6.7数据仓库系统之ApacheTajo99

6.7.1技术概况99

6.7.2发展近况和技术优势100

6.7.3软件架构101

6.7.4应用场景103

6.8本章小结105

第7章 大数据平台资源管理技术106

7.1Apache ZooKeeper106

7.1.1技术概况106

7.1.2发展近况和技术优势107

7.1.3软件架构108

7.1.4应用场景110

7.2Apache Hadoop YARN111

7.2.1技术概况111

7.2.2发展近况和技术优势112

7.2.3软件架构113

7.2.4应用场景116

7.3Apache Mesos119

7.3.1技术概况119

7.3.2发展近况和技术优势120

7.3.3软件架构120

7.3.4应用场景122

7.4Apache Mnemonic123

7.4.1技术概况123

7.4.2发展近况和技术优势124

7.5本章小结125

第四篇 大数据处理技术129

第8章 开源批处理平台129

8.1Apache Hadoop129

8.1.1技术概况129

8.1.2发展近况和技术优势130

8.1.3软件架构131

8.1.4应用场景136

8.2Apache Spark142

8.2.1技术概况142

8.2.2发展近况和技术优势142

8.2.3软件架构144

8.2.4应用场景146

8.3Apache Kylin150

8.3.1技术概况150

8.3.2发展近况和技术优势150

8.3.3软件架构152

8.3.4应用场景153

8.4本章小结159

第9章 开源实时处理平台160

9.1Apache Storm160

9.1.1技术概况160

9.1.2发展近况和技术优势161

9.1.3软件架构162

9.1.4应用场景163

9.2Apache Spark Streaming169

9.2.1技术概况169

9.2.2发展近况和技术优势170

9.2.3软件架构170

9.2.4应用场景171

9.3Apache Flink173

9.3.1技术概况173

9.3.2发展近况和技术优势174

9.3.3软件架构175

9.3.4应用场景176

9.4Apache Beam179

9.4.1技术概况179

9.4.2发展近况和技术优势180

9.4.3软件架构181

9.4.4应用场景182

9.5Apache Apex186

9.5.1技术概况186

9.5.2发展近况和技术优势187

9.5.3软件架构188

9.5.4应用场景191

9.6本章小结194

第五篇 大数据分析与挖掘技术199

第10章 开源数据分析平台199

10.1Apache Mahout199

10.1.1技术概况199

10.1.2发展近况和技术优势200

10.1.3应用场景202

10.2Apache Spark MLlib204

10.2.1技术概况204

10.2.2发展近况和技术优势204

10.2.3软件架构205

10.2.4应用场景207

10.3Apache Lens208

10.3.1技术概况208

10.3.2发展近况及技术优势209

10.3.3软件架构213

10.3.4应用场景214

10.4Scikit-Learn217

10.4.1技术概况217

10.4.2发展近况与技术优势217

10.4.3软件架构218

10.4.4应用场景220

10.5本章小结223

第11章 开源深度学习平台225

11.1TensorFlow225

11.1.1技术概况225

11.1.2发展近况和技术优势226

11.1.3软件架构226

11.1.4应用场景230

11.2Tensorflow Lite233

11.2.1技术概况233

11.2.2发展近况和技术优势233

11.2.3软件架构234

11.3Caffe237

11.3.1技术概述237

11.3.2发展近况和技术优势237

11.3.3软件架构239

11.3.4应用场景241

11.4PyTorch243

11.4.1技术概况243

11.4.2发展近况和技术优势243

11.4.3软件架构245

11.4.4应用场景247

11.5本章小结248

第六篇 大数据可视化与交互技术251

第12章 主流大数据可视化与交互工具251

12.1Tableau251

12.1.1技术概况251

12.1.2发展近况和技术优势252

12.1.3软件架构255

12.1.4应用场景256

12.2Apache Zeppelin260

12.2.1技术概况260

12.2.2发展近况和技术优势261

12.2.3软件架构262

12.2.4应用场景263

12.3本章小结266

第13章 其他大数据可视化与交互工具267

13.1Jaspersoft Community267

13.1.1技术概况267

13.1.2发展近况和技术优势268

13.1.3软件架构270

13.1.4应用场景271

13.2BIRT274

13.2.1技术概况274

13.2.2发展近况和技术优势275

13.2.3软件架构278

13.2.4应用场景280

13.3KNIME281

13.3.1技术概况281

13.3.2发展近况和技术优势281

13.3.3软件架构283

13.3.4应用场景285

13.4本章小结285

第七篇 大数据安全与治理技术289

第14章 大数据治理技术289

14.1Apache Falcon289

14.1.1技术概况290

14.1.2发展近况和技术优势290

14.1.3软件架构292

14.1.4应用场景294

14.2Apache Atlas297

14.2.1技术概况298

14.2.2发展近况和技术优势301

14.2.3软件架构306

14.3本章小结314

第15章 大数据安全技术316

15.1Apache Ranger316

15.1.1技术概况316

15.1.2发展近况和技术优势318

15.1.3软件架构321

15.1.4应用场景322

15.2Apache Sentry324

15.2.1技术概况324

15.2.2发展近况和技术优势326

15.2.3软件架构332

15.3Apache Kerberos334

15.3.1技术概况335

15.3.2发展近况和技术优势336

15.3.3软件架构337

15.4Apache Metron339

15.4.1技术概况339

15.4.2发展近况及技术优势340

15.4.3软件架构344

15.5Hyperledger346

15.5.1技术概况346

15.5.2发展近况和技术优势347

15.5.3软件架构348

15.5.4应用场景349

15.6本章小结351

结束语353

名词索引355