-
内容大纲
K.G.斯里尼瓦沙、阿尼尔·库马尔·穆帕拉著的《高性能分布式计算系统开发与实现(基于Hadoop\Scalding和Spark)/数据科学与工程技术丛书》介绍了如何使用开源工具和技术开发与实现大规模分布式处理系统,涵盖构建高性能分布式计算系统的方法和最佳实践。第一部分(第1~4章)介绍了高性能分布式计算编程的基础知识,包括分布式系统、Hadoop入门、Spark入门、Scalding入门等;第二部分(第5~8章)给出了使用Hadoop、Spark、Scalding的案例研究,涉及数据聚类、数据分类、回归分析、推荐系统等。
本书适合作为高等院校计算机、大数据相关专业的教材,也适合作为软件工程师、应用开发人员、科研人员的参考书。 -
作者介绍
-
目录
译者序
前言
作者简介
第一部分 高性能分布式计算编程基础
第1章 引言
1.1 分布式系统
1.2 分布式系统类型
1.2.1 分布式嵌入式系统
1.2.2 分布式信息系统
1.2.3 分布式计算系统
1.3 分布式计算架构
1.4 分布式文件系统
1.4.1 分布式文件系统需求
1.4.2 分布式文件系统架构
1.5 分布式系统面临的挑战
1.6 分布式系统的发展趋势
1.7 高性能分布式计算系统示例
参考文献
第2章 Hadoop入门
2.1 Hadoop简介
2.2 Hadoop生态系统
2.3 Hadoop分布式文件系统
2.3.1 HDFS的特性
2.3.2 名称节点和数据节点
2.3.3 文件系统
2.3.4 数据复制
2.3.5 通信
2.3.6 数据组织
2.4 MapReduce准备工作
2.5 安装前的准备
2.6 单节点集群的安装
2.7 多节点集群的安装
2.8 Hadoop编程
2.9 Hadoop流
参考文献
第3章 Spark入门
3.1 Spark简介
3.2 Spark内部结构
3.3 Spark安装
3.3.1 安装前的准备
3.3.2 开始使用
3.3.3 示例:Scala应用
3.3.4 Python下Spark的使用
3.3.5 示例:Python应用
3.4 Spark部署
3.4.1 应用提交
3.4.2 单机模式
参考文献
第4章 Scalding和Spark的内部编程
4.1 Scalding简介
4.1.1 安装
4.1.2 编程指南
4.2 Spark编程指南
参考文献
第二部分 使用Hadoop、Scalding和Spark的案例研究
第5章 案例研究Ⅰ:使用Scalding和Spark进行数据聚类
5.1 简介
5.2 聚类
5.2.1 聚类方法
5.2.2 聚类处理
5.2.3 K均值算法
5.2.4 简单的K均值示例
5.3 实现
问题
参考文献
第6章 案例研究Ⅱ:使用Scalding和Spark进行数据分类
6.1 分类
6.2 概率论
6.2.1 随机变量
6.2.2 分布
6.2.3 均值和方差
6.3 朴素贝叶斯
6.3.1 概率模型
6.3.2 参数估计和事件模型
6.3.3 示例
6.4 朴素贝叶斯分类器的实现
6.4.1 Scalding实现
6.4.2 结果
问题
参考文献
第7章 案例研究Ⅲ:使用Scalding和Spark进行回归分析
7.1 回归分析的步骤
7.2 实现细节
7.2.1 线性回归:代数方法
7.2.2 代数方法的Scalding实现
7.2.3 代数方法的Spark实现
7.2.4 线性回归:梯度下降法
7.2.5 梯度下降法的Scalding实现
7.2.6 梯度下降法的Spark实现
问题
参考文献
第8章 案例研究Ⅳ:使用Scalding和Spark实现推荐系统
8.1 推荐系统
8.1.1 目标
8.1.2 推荐系统的数据源
8.1.3 推荐系统中使用的技术
8.2 实现细节
8.2.1 Spark实现
8.2.2 Scalding实现
问题
参考文献
索引
同类热销排行榜
- C语言与程序设计教程(高等学校计算机类十二五规划教材)16
- 电机与拖动基础(教育部高等学校自动化专业教学指导分委员会规划工程应用型自动化专业系列教材)13.48
- 传感器与检测技术(第2版高职高专电子信息类系列教材)13.6
- ASP.NET项目开发实战(高职高专计算机项目任务驱动模式教材)15.2
- Access数据库实用教程(第2版十二五职业教育国家规划教材)14.72
- 信号与系统(第3版下普通高等教育九五国家级重点教材)15.08
- 电气控制与PLC(普通高等教育十二五电气信息类规划教材)17.2
- 数字电子技术基础(第2版)17.36
- VB程序设计及应用(第3版十二五职业教育国家规划教材)14.32
- Java Web从入门到精通(附光盘)/软件开发视频大讲堂27.92
推荐书目
-
孩子你慢慢来/人生三书 华人世界率性犀利的一枝笔,龙应台独家授权《孩子你慢慢来》20周年经典新版。她的《...
-
时间简史(插图版) 相对论、黑洞、弯曲空间……这些词给我们的感觉是艰深、晦涩、难以理解而且与我们的...
-
本质(精) 改革开放40年,恰如一部四部曲的年代大戏。技术突变、产品迭代、产业升级、资本对接...