hadoop大数据开发技术 数据库 作者 新华正版
举报
-
作者:
作者
-
出版社:
清华大学出版社
-
ISBN:
9787302579700
-
出版时间:
2021-07
-
版次:
1
-
装帧:
平装
-
开本:
16
-
页数:
288页
-
字数:
453千字
-
出版时间:
2021-07
-
版次:
1
-
装帧:
平装
-
开本:
16
-
页数:
288页
-
字数:
453千字
售价
￥
29.20
4.9折
定价
￥59.80
品相
全新品相描述
上书时间2024-04-14
卖家超过10天未登录
手机购买
![]()
微信扫码访问
-
-
商品描述：
-
主编：
本书分为三大部分，部分主要介绍大数据开发技术台hadoop，分为6章，介绍hadoop各部分的主要技术及其应用，包括hadoop架构及组成、台搭建、hdf、yarn、mapreduce等内容；第二部分介绍hadoop 家族的其他几个重要项目，这些都与基本的大数据开发应用紧密相关，包括数据库hbae、数据仓库hive、park；第三部分介绍大数据应用开发综合实例，介绍了编程环境与数据准备、大数据分析与数据可视化、一个具体大数据应用领域“电影”的具体实施方法。
目录：
篇大数据开发技术台hadoop
章hadoop概述3
1.1大数据与hadoop3
1.1.1大数据概述4
1.1.2什么是hadoop6
1.1.3大数据与hadoop的关系6
1.2hadoop的发展历史7
1.2.1hadoop的产生7
1.2.2hadoop的发展阶段7
1.3hadoop的体系结构8
1.3.1hadoop的mon8
1.3.2hadoop的hdfs9
1.3.3hadoop的yarn10
1.3.4hadoop的mapreduce10
1.3.5hadoop家族的其他成员11
1.4本章小结12
题12第2章大数据开发台hadoop环境的搭建13
2.1linux系统下的参数配置13
2.1.1linux系统的网络配置13
2.1.2为hadoop设置专门用户15
2.1.3设置无密码登录用户16
2.2基于linux系统的k安装与配置17
2.2.1java开发工具k的下载与安装17
2.2.2配置与java有关的环境参数17
2.2.3基于linux系统下eclie的安装与配置19
2.2.4eclie集成环境——java程序开发实例23
2.3hadoop环境的搭建24
2.3.1单机模式25
2.3.2伪集群模式26
2.3.3集群模式32
2.4hadoop服务的启动与测试38
2.5本章小结38
题38第3章hadoop通用命令与应用编程39
3.1hadoop命令概述39
3.2hadoop管理命令41
3.2.1命令功能与命令格式41
3.2.2命令应用实例41
3.3hadoop用户命令42
3.3.1建立与查看hadoop的文档42
3.3.2检查hadoop本地代码可用44
3.3.3classpath命令44
3.3.4credential命令44
3.3.5递归复制文件和目录命令distcp46
3.3.6hadoop的fs命令47
3.3.7hadoop的jar命令47
3.3.8hadoop的key命令47
3.3.9hadoop的其他用户命令48
3.4hadoop编程49
3.4.1创建java应用项目49
3.4.2hadoop分布式处理程序的设计53
3.5hadoop编程实例53
3.5.1问题描述53
3.5.2求优选值的hadoop程序设计54
3.6本章小结57
题57第4章hadoop分布式文件存储58
4.1hdfs概述58
4.1.1hdfs的特点59
4.1.2hdfs的架构59
4.1.3熟悉hdfs守护进程61
4.1.4hdfs的规划设计64
4.2hdfs的shell命令66
4.2.1hdfs的shell命令概述66
4.2.2管理命令67
4.2.3客户端命令68
4.2.4hdfs的守护进程命令73
4.3hdfs的api编程应用74
4.3.1一个简单的hdfsapi编程实例74
4.3.2hdfs的应用编程接76
4.3.3hdfs的编程应用实例80
4.4本章小结84
题84第5章作业调度与集群资源管理框架yarn86
5.1yarn概述86
5.1.1yarn简介86
5.1.2yarn的主要架构87
5.1.3yarn架构简析89
5.2yarn的命令及应用89
5.2.1yarn命令概述89
5.2.2用户命令90
5.2.3管理员命令95
5.3yarn的api应用编程98
5.3.1yarn工作流程98
5.3.2yarn编程概述99
5.3.3yarnclient程序编写100
5.3.4yarnappicationmaster编写101
5.3.5yarncontainer工作程序104
5.4本章小结104
题104第6章hadoop分布式计算框架mapreduce105
6.1mapreduce结构模型105
6.1.1mapreduce概述105
6.1.2map和reduce(映和规约)106
6.1.3mapreduce的主要功能及技术特征106
6.2mapreduce的工作109
6.2.1shuffle和sort109
6.2.2任务的执行113
6.2.3故障处理116
6.2.4作业调度118
6.3mapreduce的命令行应用121
6.3.1命令概述121
6.3.2用户命令121
6.3.3管理命令124
6.4mapreduce的api应用编程125
6.4.1与数据输入有关的类125
6.4.2mapper/reducer类129
6.4.3job类及相关类131
6.4.4输出格式类与记录输出类135
6.5mapreduce应用实例135
6.5.1单词程序设计135
6.5.2计算均的程序设计138
6.6本章小结140
题140
第2篇hadoop家族的其他项目
第7章hadoop数据库hbase145
7.1hbase概述145
7.1.1hbase简介145
7.1.2hbase的特点146
7.2hbase体系结构147
7.3hbase的数据模型148
7.3.1逻辑模型148
7.3.2物理模型150
7.4hbase的下载与安装150
7.4.1hbase的下载150
7.4.2hbase的安装151
7.5hbaseshell154
7.5.1通用命令155
7.5.2数据定义语言155
7.5.3数据作语言159
7.6hbaseapi164
7.6.1hbaseadmin类164
7.6.2htable类165
7.6.3htabledescriptor类165
7.6.4hcolumndescriptor类166
7.6.5get类166
7.6.6put类166
7.6.7delete类167
7.6.8result类168
7.6.9resultscanner类168
7.7hbase过滤器179
7.7.1过滤器filter179
7.7.2过滤器的作符179
7.7.3过滤器的比较器parator180
7.7.4过滤器的使用180
7.8本章小结184
题184第8章hadoop数据仓库hive186
8.1hive概述186
8.1.1hive简介186
8.1.2hive架构186
8.1.3hive的安装187
8.2hive数据类型192
8.2.1基本类型192
8.2.2复杂类型193
8.3hive的数据模型194
8.3.1表194
8.3.2外部表194
8.3.3分区表194
8.3.4桶表194
8.3.5视图表195
8.4hive内置运算符195
8.4.1关系运算符195
8.4.2算术运算符196
8.4.3逻辑运算符196
8.4.4复杂运算符197
8.5hiveshell作197
8.5.1数据库作197
8.5.2表作198
8.6hive的内置函数和udf199
8.6.1内置函数199
8.6.2用户自定义函数200
8.7本章小结201
题201第9章hadoop数据的快速通用计算引擎spark204
9.1spark概述204
9.1.1理解spark206
9.1.2安装spark206
9.2快速启动spark209
9.3spark生态圈213
9.4spark编程217
9.4.1structuredstreaming编程217
9.4.2sparkstreaming编程218
9.4.3机器学库和graphx编程220
9.5本章小结223
题223
第3篇大数据应用开发综合实例
0章编程环境与数据集准备227
10.1zeppelin部署227
10.1.1zeppelin安装227
10.1.2zeppelin配置228
10.1.3运行zeppelin231
10.1.4连接测试zeppelin231
10.1.5用admin身份权限登录232
10.2zeppelinui233
10.2.1首页233
10.2.2菜单234
10.2.3237
10.2.4zeppelin配置中的典型错误240
10.3获取movielens数据集242
10.4本章小结246
题2461章大数据分析与数据可视化247
11.1数据处理247
11.1.1创建247
11.1.2数据处理案例248
11.2数据分析与可视化252
11.2.1注册临时表users252
11.2.2浏览users252
11.2.3统计年龄分布253
11.2.4统计职业分布255
11.3复杂逻辑处理257
11.3.1评分统计分析257
11.3.2评分分布的条形图259
11.4本章小结260
题2602章构建算法261
12.1协同过滤算法概述261
12.2协同过滤分类261
12.2.1基于用户的协同过滤262
12.2.2基于物品的协同过滤262
12.3spark模型库263
12.3.1显式矩阵分解263
12.3.2隐式矩阵分解264
12.3.3交替小二乘法264
12.4用sparkmllibals构建算法265
12.4.1获取ml1m.zip文件265
12.4.2创建rdd265
12.4.3创建dataframe265
12.4.4构建训练和测试数据集267
12.4.5构建模型268
12.4.6使用模型预测269
12.4.7用测试数据对模型进行评估269
12.4.8衡量模型的准确度270
12.5本章小结271
题271
内容简介：
本书较为全面地介绍了大数据开发技术台hadoop及其生态系统的相关知识。全书共12章，包括hadoop概述、大数据开发台hadoop环境的搭建、hadoop通用命令与编程、hadoop分布式文件存储hdf、作业调度与集群资源管理框架yarn、hadoop分布式计算框架mapreduce、hadoop数据库hbae、hadoop数据仓库hive、hadoop数据的快速通用计算引擎park，以及大数据应用开发综合实例。本书从应用角度出发，重点培养应用大数据技术台hadoop解决实际问题的能力。本书内容新颖，简明易懂，可作强，可作为普通高等学校、高职高专院校数据科学与大数据、软件工程等计算机相关专业和信息管理类专业“大数据开发技术”课程的教材，也可作为大数据技术培训的教材，还适合大数据技术研发人员和广大计算机爱好者自学使用。
作者简介：
"申时全，1953年6月生，贵州毕节人，本科学历，学士，教授， ciw认证软件开发工程师。广东科技学院计算机系网络工程专业负责人。
讲授课程：计算机网络、linux与应用、c语言程序设计、作系统、统一建模语言uml、linux编程、java语言程序设计。"
![]()
孔网啦啦啦啦啦纺织女工火锅店第三课
开播时间：09月02日 10:30
即将开播，去预约
直播中，去观看
占位居中
