-
内容大纲
本书是高等职业教育大数据技术与应用系列教材中的一册,讲解了大数据系统运行维护过程中的各个主要任务,包括大数据生态圈、Hadoop环境搭建与运维、Hive环境搭建与基本操作、HBase环境搭建与运维、Hadoop常用组件安装等内容。本书内容详尽充实,针对每个知识点都配有相应的实验用于验证和巩固,在基础理论知识上增加了运维大数据平台实践应用知识,重点介绍了大数据系统的运维实操技能,对于培养应用型大数据平台运维人才有着很强的指导性。
本书既可以作为高等职业院校大数据平台运维课程的教学用书,也同样适合作为有志从事大数据系统运维工作的广大爱好者的参考书。 -
作者介绍
-
目录
第1章 大数据生态圈
1.1 大数据的概念和价值
1.2 大数据的特点
1.3 大数据技术组成与生态圈
1.4 大数据的行业应用和未来发展
第2章 Hadoop环境搭建与运维
2.1 Hadoop概述
2.2 Hadoop单机模式和伪分布模式搭建
2.2.1 创建“hadoop”用户
2.2.2 准备工作
2.2.3 安装SSH、配置SSH无密码登录
2.2.4 安装Java环境
2.2.5 安装Hadoop2
2.2.6 Hadoop单机配置
2.2.7 Hadoop伪分布式配置
2.2.8 运行Hadoop伪分布式实例
2.3 Hadoop集群模式搭建
2.3.1 创建Hadoop运行用户
2.3.2 关闭防火墙
2.3.3 配置机器名和网络
2.3.4 配置非root用户免验证登录SSH
2.3.5 安装JDK
2.3.6 安装Hadoop
2.3.7 格式化HDFS
2.3.8 启动Hadoop
2.4 Hadoop HA模式介绍
2.4.1 Hadoop的HA机制
2.4.2 HA集群
2.5 Hadoop查看集群运行状态
2.6 网页查看集群
2.7 Hadoop命令的使用
2.7.1 Hadoop常用命令
2.7.2 HDFS常用命令
2.8 WordCount示例程序的运行和日志查看
2.8.1 MapReduce的工作原理
2.8.2 MapReduce框架的作业运行流程
2.8.3 WordCount示例程序
2.9 实验
2.9.1 【实验1】CentOS系统安装
2.9.2 【实验2】Hadoop单机部署
2.9.3 【实验3】Hadoop伪分布式部署
2.9.4 【实验4】Hadoop完全分布式部署
2.9.5 【实验5】Hadoop查看集群状态
2.9.6 【实验6】Hadoop基础命令的使用
2.9.7 【实验7】Hadoop示例程序WordCount的执行(Java)
2.9.8 【实验8】Hadoop示例程序WordCount的执行(Python)
2.9.9 【实验9】Hadoop HA模式解析
第3章 Hive环境搭建与基本操作
3.1 Hive概述
3.2 基于HDFS和MySQL的Hive环境搭建
3.3 Hive Shell
3.4 Hive SQL语句的使用
3.5 Hive函数的使用
3.6 Hive分区表和桶表的创建
3.7 实验
3.7.1 【实验10】Hive环境搭建
3.7.2 【实验11】Hive SQL语句操作
3.7.3 【实验12】Hive函数的使用
3.7.4 【实验13】Hive分区表的创建
第4章 HBase环境搭建与运维
4.1 HBase概述
4.2 HBase单机模式和伪分布模式部署
4.3 HBase完全分布模式部署
4.4 HBase查看集群运行状态
4.5 HBase Shell的使用
4.6 实验
4.6.1 【实验14】HBase单机模式和伪分布模式部署
4.6.2 【实验15】HBase分布式部署
4.6.3 【实验16】HBase查看集群运行状态
4.6.4 【实验17】HBase Shell命令的使用
第5章 Hadoop常用组件安装
5.1 Hadoop常用组件概述
5.2 ZooKeeper环境部署
5.3 Kafka环境部署
5.4 Storm环境部署
5.4.1 单机环境部署
5.4.2 分布式环境部署
5.5 Flume环境部署
5.6 Spark环境部署
5.6.1 单机环境部署
5.6.2 分布式环境部署
5.7 实验
5.7.1 【实验18】ZooKeeper环境部署
5.7.2 【实验19】Kafka环境部署
5.7.3 【实验20】Storm环境部署
5.7.4 【实验21】Flume环境部署
5.7.5 【实验22】Spark环境部署
同类热销排行榜
- C语言与程序设计教程(高等学校计算机类十二五规划教材)16
- 电机与拖动基础(教育部高等学校自动化专业教学指导分委员会规划工程应用型自动化专业系列教材)13.48
- 传感器与检测技术(第2版高职高专电子信息类系列教材)13.6
- ASP.NET项目开发实战(高职高专计算机项目任务驱动模式教材)15.2
- Access数据库实用教程(第2版十二五职业教育国家规划教材)14.72
- 信号与系统(第3版下普通高等教育九五国家级重点教材)15.08
- 电气控制与PLC(普通高等教育十二五电气信息类规划教材)17.2
- 数字电子技术基础(第2版)17.36
- VB程序设计及应用(第3版十二五职业教育国家规划教材)14.32
- Java Web从入门到精通(附光盘)/软件开发视频大讲堂27.92
推荐书目
-
孩子你慢慢来/人生三书 华人世界率性犀利的一枝笔,龙应台独家授权《孩子你慢慢来》20周年经典新版。她的《...
-
时间简史(插图版) 相对论、黑洞、弯曲空间……这些词给我们的感觉是艰深、晦涩、难以理解而且与我们的...
-
本质(精) 改革开放40年,恰如一部四部曲的年代大戏。技术突变、产品迭代、产业升级、资本对接...