失效链接处理 |
大数据^台运l_(d)初Q?PDF 下蝲
下蝲地址Q?/strong>
版权归出版社和原作者所有,链接已删除,误买正?br style="padding: 0px; margin: 0px;" />
用户下蝲说明Q?/strong>
?sh)子版仅供预览,下蝲?4时内务必删除,支持正版Q喜Ƣ的误买正版书c:(x)
http://product.dangdang.com/11141378885.html
相关截图Q?br /> ![]() 资料介:(x) 本书?ldquo;1+X”职业技能等U证书配套,按国?ldquo;1+X”大数据^台运l职业技能等U标准编写。本书属于大数据q_q维初Q从大数据^台运l工E师角度由浅入深、全方位Cl大数据q_q维的相兛_知识和基本实操。本书共?个部?8章,**部分为大数据q_安装Q涉?qing)^台操作系l的使用、Hadoopq_安装、^台基环境配置Q第二部分ؓ(f)大数据^台配|,涉及(qing)Hadoop文g参数配置、Hadoop集群q行Q第三部分ؓ(f)大数据^台组件的安装与配|,涉及(qing)Hive、HBase、ZooKeeper、Sqoop和Flumelg的安装与配置Q第四部分ؓ(f)大数据^台实施,涉及(qing)大数据^台实施方案、培训方案;W五部分为大数据q_监控Q涉?qing)基于大数据q_的监控命令、监控界面和报表、日志和告警信息监控Q第六部分ؓ(f)大数据运l综合实战案例,以实际项目ؓ(f)例介l从q_部v、数据业务采集、数据分析到数据可视化的整体基础实施q程Qƈ介绍?jin)大数据q_q维的常见故障及(qing)处理程。本书可作ؓ(f)中高职院校大数据?qing)计机cȝ关专业的Q也可作为大数据q_q维人员的参考用书?br /> 资料目录Q?/strong>
**部分 大数据^台安?/div>
W??q_操作pȝ的?3
1.1 Linux操作pȝ概述 3
1.1.1 Linux操作pȝ的v?3
1.1.2 Linux操作pȝ的特?4
1.1.3 Linux操作pȝ的应用场?5
1.1.4 Linux版本 6
1.2 Linux常用命o(h) 7
1.2.1 文g与目录操?7
1.2.2 用户操作 9
1.2.3 文本操作 10
1.2.4 pȝ操作 11
1.3 Linux操作pȝ用户信息 14
1.3.1 用户和组 14
1.3.2 文gcd和权?15
1.4 本章结 17
W??Hadoopq_安装 18
2.1 Hadoop概述 18
2.1.1 Hadoop的v?18
2.1.2 Hadoop的生态圈 19
2.1.3 Hadoop的版?21
2.1.4 Hadoop的优?22
2.1.5 Hadoop的应用场?22
2.1.6 Hadoop的运行模?23
2.2 Hadoop的核?j)组?23
2.2.1 HDFS 23
2.2.2 MapReduce 26
2.2.3 YARN 28
2.3 q_操作pȝ环境讄 29
2.3.1 配置Linux操作pȝ基础
环境 30
2.3.2 安装Java环境 32
2.4 安装Hadoop软g 35
2.4.1 获取Hadoop安装?35
2.4.2 安装Hadoop软g 35
2.4.3 修改目录所有者和所有者组 36
2.5 安装单机版Hadooppȝ 36
2.5.1 配置Hadoop配置文g 37
2.5.2 试Hadoop本地模式?/div>
q行 37
2.6 本章结 38
W??q_基础环境配置 39
3.1 集群|络q接 39
3.1.1 实验环境下的大数据Hadoop
q_集群|络 39
3.1.2 生环境下的大数据Hadoop
q_集群|络 40
3.2 SSH无密码登?41
3.2.1 SSH?41
3.2.2 SSH特点介绍 41
3.2.3 非对U加密机?42
3.2.4 SSH安全机制 42
3.2.5 SSHZ口o(h)的安全验?43
3.2.6 Z密钥的安全验?43
3.3 集群|络配置 44
3.3.1 实验环境下的集群|络配置 44
3.3.2 生环境下的集群|络配置 44
3.4 SSH无密码验证配|?47
3.4.1 生成SSH密钥 47
3.4.2 交换SSH密钥 49
3.4.3 验证SSH无密码登?50
3.5 本章结 51
W二部分 大数据^台配|?/div>
W??Hadoop文g参数配置 55
4.1 Hadoop配置文g说明 55
4.1.1 Hadoop环境配置 55
4.1.2 Hadoop守护q程环境配置 56
4.1.3 Hadoop配置参数格式 57
4.1.4 获得Hadoop集群全部配置
信息 57
4.2 在master节点上安装Hadoop 58
4.3 配置hdfs-site.xml文g参数 58
4.4 配置core-site.xml文g参数 59
4.5 配置mapred-site.xml 60
4.6 配置yarn-site.xml 61
4.7 Hadoop其他相关配置 62
4.8 本章结 63
W??Hadoop集群q行 64
5.1 Hadoopq行状?64
5.2 配置Hadoop格式?68
5.3 查看Javaq程 69
5.4 查看HDFS的报?70
5.5 使用览器查看节点状?71
5.6 停止Hadoop 74
5.7 本章结 74
W三部分 大数据^台组件的安装与配|?/div>
W??Hivelg的安装与配置 77
6.1 Hive相关知识 77
6.2 Hivelg架构 78
6.3 下蝲和解压安装文?79
6.3.1 基础环境和安装准?79
6.3.2 解压安装文g 79
6.4 讄Hive环境 80
6.4.1 卸蝲MariaDB数据?80
6.4.2 安装MySQL数据?80
6.4.3 配置Hivelg 85
6.5 初始化Hive元数?87
6.6 启动Hive 89
6.7 本章结 89
W??HBaselg的安装与配置 90
7.1 HBase相关知识 90
7.2 HBase功能应用 91
7.3 HBaselg讄 92
7.4 HBase安装与配|?94
7.5 HBase常用Shell命o(h) 98
7.6 本章结 101
W??ZooKeeperlg的安装与配置 102
8.1 ZooKeeper相关知识 102
8.1.1 ZooKeeper的重要概?103
8.1.2 ZooKeeper的特?104
8.2 ZooKeeper选项讄 104
8.3 ZooKeeper角色选D 105
8.4 下蝲和安装ZooKeeper 105
8.5 ZooKeeper的配|选项 106
8.5.1 master节点配置 106
8.5.2 slave节点配置 106
8.5.3 pȝ环境变量配置 106
8.6 启动ZooKeeper 107
8.7 本章结 107
W??Sqooplg的安装与配置 108
9.1 Sqoop相关知识 108
9.2 Sqoop的功能应?109
9.2.1 Sqoop架构 109
9.2.2 Sqoop导入原理 109
9.2.3 Sqoop导出原理 110
9.3 下蝲和解压Sqoop 112
9.4 配置Sqoop环境 112
9.5 启动Sqoop 113
9.6 Sqoop模板命o(h) 114
9.7 Sqooplg应用 116
9.8 本章结 117
W?0?Flumelg的安装与配置 118
10.1 Flume相关知识 118
10.2 Flume功能应用 119
10.2.1 Flume功能 119
10.2.2 Flumel构 119
10.3 Flumelg讄 119
10.4 下蝲和解压Flume 120
10.5 Flumelg部v 121
10.6 使用Flume发送和接收
信息 121
10.7 本章结 122
W四部分 大数据^台实?/div>
W?1?大数据^台实施方案的理解 125
11.1 pȝ实施Ҏ(gu)概述 125
11.1.1 Ҏ(gu)概述 125
11.1.2 目实施思\ 126
11.1.3 目实施程 126
11.2 认客户需?127
11.2.1 认需求分析准?127
11.2.2 q行认需求调?127
11.2.3 pȝ详细需求分?129
11.3 ~写大数据^台实施方?129
11.3.1 大数据^台规?129
11.3.2 大数据^台部|?131
11.3.3 目实施计划 131
11.3.4 目实施人员 132
11.4 执行实施Ҏ(gu)q程 133
11.4.1 实施内容 133
11.4.2 实施程 133
11.5 pȝ试 133
11.6 目验收 135
11.7 本章结 135
W?2?客户培训Ҏ(gu)的制?136
12.1 培训Ҏ(gu)概述 136
12.2 客户培训Ҏ(gu)要点 137
12.2.1 培训目标 137
12.2.2 培训对象 138
12.2.3 培训形式 139
12.2.4 培训内容 139
12.2.5 培训计划 140
12.3 文制作工具 140
12.3.1 制作甘特?140
12.3.2 制作WBS?143
12.4 大数据^台操作演C?145
12.4.1 演示内容选取 145
12.4.2 演示的步?146
12.4.3 演示的技?147
12.4.4 演示注意事项 148
12.5 本章结 148
W五部分 大数据^台监?/div>
W?3?大数据^台监控命?151
13.1 大数据^台运行状?151
13.1.1 大数据^C机系l状?152
13.1.2 大数据^台Hadoop状?153
13.2 大数据^台资源状?153
13.2.1 YARN资源状?154
13.2.2 HDFS资源状?154
13.2.3 HBase状?155
13.2.4 Hive状?155
13.3 大数据^台服务状?156
13.3.1 ZooKeeper服务状?156
13.3.2 Sqoop服务状?157
13.3.3 Flume服务状?157
13.4 通过命o(h)监控大数据^台的
q行状?157
13.4.1 通过命o(h)查看大数据^?/div>
状?157
13.4.2 通过命o(h)查看Hadoop
状?165
13.5 通过命o(h)监控大数据^台的
资源状?166
13.5.1 通过命o(h)查看YARN状?166
13.5.2 通过命o(h)查看HDFS状?167
13.5.3 通过命o(h)查看HBase状?168
13.5.4 通过命o(h)查看Hive状?171
13.6 通过命o(h)监控大数据^台的
服务状?174
13.6.1 通过命o(h)查看ZooKeeper
状?174
13.6.2 通过命o(h)查看Sqoop状?178
13.6.3 通过命o(h)查看Flume状?180
13.7 本章结 181
W?4?大数据^台监控界面和报表 182
14.1 大数据^台常用组?182
14.2 通过界面监控大数据^台的
q行状?183
14.2.1 通过界面查看大数据^?/div>
状?183
14.2.2 通过界面查看Hadoop
状?183
14.3 通过界面监控大数据^台的
资源状?185
14.3.1 通过界面监控YARN?/div>
状?185
14.3.2 通过界面监控HDFS状?186
14.3.3 通过界面监控HBase?/div>
状?188
14.3.4 通过界面监控Hive的状?189
14.4 本章结 193
W?5?日志和告警信息监?194
15.1 大数据^台日志信?194
15.1.1 Hadoop日志?194
15.1.2 大数据^C机日志信?195
15.2 大数据^台告警信?196
15.3 查看大数据^台日志信?196
15.3.1 查看大数据^C机日?196
15.3.2 在Hadoop MapReduce Jobs
中查看日志信?203
15.3.3 通过用户界面查看Hadoop
日志 205
15.3.4 通过命o(h)查看Hadoop
日志 207
15.3.5 查看HBase日志 209
15.3.6 查看Hive日志 210
15.4 查看大数据^台告警信?211
15.4.1 查看大数据^C机告?/div>
信息 211
15.4.2 查看Hadoop告警信息 213
15.4.3 查看HBase告警信息 215
15.4.4 查看Hive告警信息 218
15.5 本章结 220
W六部分 大数据运l综合实战案?/div>
W?6?大数据^台及(qing)lg的安装与
部v 223
16.1 目背景 223
16.2 目实施目标 223
16.3 Hadoop全分布部|?224
16.3.1 Hadoop全分布部|流E?224
16.3.2 Hadoop全分布部|要?224
16.3.3 Hadoop部v操作步骤 225
16.3.4 Hadoop集群验证 226
16.4 Sqooplg部v 228
16.4.1 Sqooplg部v程 228
16.4.2 Sqooplg部v要求 228
16.4.3 Sqoop部v操作步骤 229
16.4.4 Sqoop数据传输验证 229
16.5 Hivelg部v 231
16.5.1 Hivelg部v程 231
16.5.2 Hivelg部v要求 231
16.5.3 Hive部v操作步骤 232
16.5.4 Hivelg验证 232
16.6 本章结 233
W?7?大数据^台的q行与应?234
17.1 目背景 234
17.2 目实施目标 234
17.3 大数据^C务处理流E?235
17.4 大数据^C务处理系l?/div>
应用 236
17.4.1 生环境数据导入大数?/div>
q_ 236
17.4.2 业务处理层数据清z分?237
17.4.3 q行业务处理相关清洗
d 245
17.4.4 数据q入数据仓库 252
17.4.5 业务应用层大数据分析 254
17.4.6 数据仓库数据导出数据
讉K?255
17.4.7 数据讉K层大数据可视?257
17.5 本章结 259
W?8?大数据运l基本问题案例集 260
18.1 大数据^台问题分析处?/div>
程 260
18.2 解决基础环境的基本问?/div>
案例 261
18.2.1 权限配置问题 261
18.2.2 SELinux问题 262
18.2.3 Hadoop安全模式问题 262
18.2.4 L名配|造成问题 263
18.3 解决lg配置的基本问?/div>
案例 264
18.3.1 Hivelg异常问题 264
18.3.2 Sqooplg异常问题 267
18.3.3 HBaselg异常问题 268
18.3.4 ZooKeeperlg异常问题 268
18.4 解决q_启动的基本问?/div>
案例 269
18.4.1 HDFS服务启动问题 269
18.4.2 NameNode格式化异?/div>
问题 270
18.4.3 DataNodeq程启动问题 271
18.4.4 SecondaryNameNode启动
问题 273
18.5 解决q_q行的基本问?/div>
案例 274
18.6 本章结 275
附录 虚拟化Y件的使用 276
A.1 虚拟机的概念、用途及(qing)常用
软g 276
A.1.1 虚拟机的概念 276
A.1.2 虚拟机的用?278
A.1.3 常用虚拟Y?279
A.2 H3C CAS云计管理^?280
A.2.1 H3C CAS云计管理^?/div>
?280
A.2.2 创徏虚拟?282
A.2.3 修改虚拟机硬仉|?284
A.2.4 ZCAS云^C?/div>
虚拟?285
A.2.5 删除虚拟?286
A.3 H3C教学与实늮理^?287
A.3.1 H3C教学与实늮理^?/div>
?287
A.3.2 预习(fn) 287
A.3.3 上课学习(fn) 289
A.3.4 巩固学习(fn)效果 292
A.3.5 完成学习(fn) 295
A.4 结 296
|