HIVE编程技术与应用 孙帅 普通高等教育新工科人才培养规划教材(大数据专业)
更新日期:2024-07-13 00:59:56
出版时间:2017-03
浏览量:1169
价格:0.0¥

书籍下载

内容介绍

   图书基本信息
图书名称 HIVE编程技术与应用 孙帅 普通高等教育新工科人才培养规划教材(大数据专业) 作者 孙帅 王美佳 李紫薇 邹先锋 张美娟 臧红久
定价 28.00元 出版社 中国水利水电出版社
ISBN 9787517069140 出版日期 2017-03-01
字数 242千字 页码 153
版次 1 装帧 平装
开本 16开 商品重量 0.4Kg

   内容简介
本书通过原理加案例的方式系统地讲解了Hive编程技术,使读者能够全面地了解使用Hive的开发流程。书中精心安排了Hive的原理分析、架构特点、环境搭建、HiveQL使用等内容,给出了大量的开发案例及其开发过程,使读者对Hive开发有直观的印象。全书共10章:前6章系统讲解Hive工作原理、特点,Hive架构,HiveQL表操作,HiveQL数据操作,HiveQL查询,Hive安装与配置,Hive自定义函数;第8、9、10章是综合案例部分,通过案例帮助读者掌握整个大数据项目的开发流程,包括数据清洗、数据处理、数据导入导出。本书知识结构简单明了,案例生动具体,内容设计新颖,思路清晰。本书不仅可作为普通高校大数据相关专业的教材,也可以作为想继续深入了解大数据编程的读者的参考书,还可作为各类相关培训班的培训教材。

   作者简介
孙帅,中关村软件园百知教育课程研发部总监,曾主持开发项目:易宝支付3代平台系统、易宝支付风控系统、GDB敏捷开发平台、精品科技期刊全文数据库和网络服务系统、国家科技图书文献中心NSTL网络服务系统、万方数据知识服务平台、的士通3G项目、凤凰网视频3G项目。

   目录
前言
章 Hive介绍
1.1 Hive工作原理
1.2 Hive的数据类型
1.3 Hive的特点
1.4 本章小结
第2章 Hive架构
2.1 Hive用户接口
2.1.1 Hive CLI
2.1.2 HWI
2.1.3 Thrift服务
2.2 Hive元数据库
2.2.1 Hive元数据表结构
2.2.2 Hive元数据的三种存储模式
2.3 Hive数据存储
2.4 Hive文件格式
2.4.1 TextFile格式
2.4.2 SequenceFile格式
2.4.3 RCFile格式
2.4.4 ORC格式
2.5 本章小结
第3章 HiveQL表操作
3.1 内部表
3.2 外部表
3.3 分区表
3.3.1 静态分区
3.3.2 动态分区
3.4 桶表
3.5 视图
3.5.1 使用视图降低查询复杂度
3.5.2 使用视图来限制基于条件过滤的数据
3.5.3 动态分区中的视图和map类型
3.6 本章小结
第4章 HiveQL数据操作
4.1 装载数据到表中
4.2 通过查询语句向表中插入数据
4.3 单个查询语句中创建并加载数据
4.4 导出数据
4.5 本章小结
第5章 HiveQL查询
5.1 SELECTFROM语句
5.1.1 使用正则表达式来指定列的
5.1.2 使用列值进行计算
5.1.3 算述运算符
5.1.4 使用函数
5.1.5 LIMIT语句
5.1.6 列别名
5.1.7 嵌套SELECT语句
5.1.8 CASEWHENTHEN语句
5.2 WHERE语句
5.2.1 谓词操作符
5.2.2 关于浮点数比较
5.2.3 LIKE和RLIKE
5.3 GROtJPBY语句
5.4 .JOIN语句
5.4.1 INNER JOIN
5.4.2 JOIN优化
5.4.3 LEFTOUTER JOIN
5.4.4 R1GHTOUTER JOIN
5.4.5 FULLOUTER JOIN
5.4.6 LEFT SEMI JOIN
5.4.7 笛卡尔积JOIN
5.4.8 mad-side JOIN
5.5 ORDER BY和SOPT BY
5.6 含有SOftT BY的DISTRIBIJTE BY
5.7 CLUSTER BY
5.8 类型转换
5.9 抽样查询
5.9.1 数据块抽样
5.9.2 分桶表的输入裁剪
5.10 LINIONALL
5.11 本章小结
第6章 Hive配置与应用
6.1 Hive安装与配置
6.2 Hive访问
6.3 Hive基本操作
6.3.1 Hive CLI命令行操作讲解
6.3.2 Hive的数据类型
6.3.3 Hive表的创建
6.3.4 Hive数据导入
6.3.5 Hive数据导出
6.4 Hive数据定义
6.4.1 内部表与外部表的区别
6.4.2 内部表建立
6.4.3 外部表建立
6.4.4 表的分区与桶的建立
6.4.5 删除表与修改表结构
6.4.6 HiveQL简单查询语句
6.4.7 WHERE语句
6.5 Hive高级查询
6.6 本章小结
第7章 Hive自定义函数
7.1 LIDF
7.2 UDTF
7.3 UDAF
7.4 Hive函数综合案例
7.4.1 Row-Sequence实现列自增长
7.4.2 列转行和行转列
7.5 本章小结
第8章 Hive综合案例(一)
8.1 项目背景与数据情况
8.2 关键指标KPI
8.3 开发步骤分析
8.4 表结构设计
8.5 数据清洗过程
8.5.1 定期上传日志至HDFS
8.5.2 编写.MapReduce程序清理日志
8.5.3 定期清理日志至HDFS
8.5.4 查询清洗前后的数据
8.6 数据统计分析
8.6.1 借助Hive进行统计
8.6.2 使用HiveQL统计关键指标
8.7 本章小结
第9章 Hive综合案例(二)
9.1 项目应用场景
9.2 设计与实现
9.2.1 日志格式分析
9.2.2 建立表
9.2.3 程序设计
9.2.4 编码实现
9.2.5 运行并测试
9.3 本章小结
0章 Hive综合案例(三)
10.1 应用场景
10.2 设计与实现
10.2.1 数据处理
10.2.2 使用Hive对清洗后的数据进行多维分析
10.2.3 在MySQL中建立数据库
10.2.4 使用sqoop把分析结果导入到MySQL中
10.2.5 程序设计与实现
10.2.6 运行并测试
10.3 本章总结
附录

   编辑推荐

   文摘

   序言