Hive編程技術與應用(第2版)
張鐵紅;張繼山;那銳
- 出版商: 中國水利水電
- 出版日期: 2022-12-01
- 定價: $216
- 售價: 8.5 折 $184
- 語言: 簡體中文
- 頁數: 154
- 裝訂: 平裝
- ISBN: 7522611709
- ISBN-13: 9787522611709
下單後立即進貨 (約4週~6週)
相關主題
商品描述
本書通過原理加案例的方式系統地講解了 Hive 編程技術, 使讀者能夠全面地瞭解使用 Hive 的開發流程。
書中精心安排了 Hive 的原理分析、 架構特點、 環境搭建、 HiveQL 使用等內容,
給出了大量的開發案例及其開發過程, 使讀者對 Hive 開發有直觀的印象。
全書共 10 章:
第1~7章系統講解 Hive 工作原理、 特點, Hive 架構, HiveQL 表操作,
HiveQL 數據操作,HiveQL 查詢, Hive 配置與應用, Hive 自定義函數;
第 8 ~ 10 章是綜合案例部分, 通過案例幫助讀者掌握整個大數據項目的開發流程, 包括數據清洗、 數據處理、 數據導入與導出。
本書知識結構簡單明瞭,案例生動具體, 內容設計新穎, 思路清晰。
本書不僅可作為普通高校大數據相關專業的教材,
也可以作為想繼續深入瞭解大數據編程的讀者的參考書, 還可作為各類相關培訓班的培訓教材。
目錄大綱
再版前言
第1章Hive介紹
1.1 Hive的工作原理
1.2 Hive的數據類型
1.3 Hive的特點
本章小結
習題1
第2章Hive架構
2.1 Hive用戶接口
2.1.1 Hive CLI
2.1.2 HWI
2.1.3 Thrift服務
2.2 Hive元數據庫
2.2.1 Hive元數據表結構
2.2.2 Hive元數據的三種存儲模式
2.3 Hive數據存儲
2.4 Hive文件格式
2.4.1 TextFile格式
2.4.2 SequenceFile格式
2.4.3 RCFile格式
2.4.4 ORC格式
本章小結
習題2
第3章HiveQL表操作
3.1 內部表
3.2 外部表
3.3 分區表
3.3.1 靜態分區
3.3.2 動態分區
3.4 桶表
3.5 視圖
3.5.1 使用視圖降低查詢複雜度
3.5.2 使用視圖來限制基於條件過濾的數據
3.5.3 動態分區中的視圖和map類型
本章小結
習題3
第4章HiveQL數據操作
4.1 裝載數據到表中
4.2 通過查詢語句向表中插入數據
4.3 單個查詢語句中創建並加載數據
4.4 導出數據
本章小結
習題4
第5章HiveQL查詢
5.1 select...from語句
5.1.1 使用正則表達式來指定列
5.1.2 使用列值進行計算
5.1.3 算術運算符
5.1.4 函數
5.1.5 limit語句
5.1.6 列別名
5.1.7 嵌套select語句
5.1.8 case...when...then語句
5.2 where語句
5.2.1 謂詞操作符
5.2.2 關於浮點數比較
5.2.3 like和rlike
5.3 group by語句
5.4 join語句
5.4.1 inner join
5.4.2 join優化
5.4.3 left outer join
5.4.4 right outer join
5.4.5 full outer join
5.4.6 left semi join
5.4.7 笛卡兒積join
5.4.8 map-side join
5.5 order by和sort by
5.6 含有sort by的distribute by
5.7 cluster by
5.8 類型轉換
5.9 抽樣查詢
5.9.1 數據塊抽樣
5.9.2 分桶表的輸入裁剪
5.10 union all
本章小結
習題5
第6章Hive配置與應用
6.1 Hive安裝與配置
6.2 Hive訪問
6.3 Hive基本操作
6.3.1 HiveCLI命令行操作講解
6.3.2 Hive的數據類型
6.3.3 Hive表的創建
6.3.4 Hive數據導入
6.3.5 Hive數據導出
6.4 Hive數據定義
6.4.1 內部表與外部表的區別
6.4.2 內部表的創建
6.4.3 外部表的創建
6.4.4 表的分區與桶的建立
6.4.5 刪除表與修改表結構
6.4.6 HiveQL簡單查詢語句
6.4.7 where語句
6.5 Hive高級查詢
本章小結
習題6
第7章Hive自定義函數
7.1 UDF
7.2 UDTF
7.3 UDAF
7.4 Hive函數綜合案例
7.4.1 Row_Sequence實現列自增長
7.4.2 列轉行和行轉列
本章小結
習題7
第8章Hive綜合案例(一)
8.1 項目背景與數據情況
8.2 關鍵績效指標
8.3 開發步驟分析
8.4 表結構設計
8.5 數據清洗過程
8.5.1 定期上傳日誌至HDFS
8.5.2 編寫MapReduce程序清理日誌
8.5.3 定期清理日誌至HDFS
8.5.4 查詢清洗前後的數據
8.6 數據統計分析
8.6.1 借助Hive進行統計
8.6.2 使用HiveQL統計關鍵指標
本章小結
第9章Hive綜合案例(二)
9.1 項目應用場景
9.2 設計與實現
9.2.1 日誌格式分析
9.2.2 建立表
9.2.3 程序設計
9.2.4 編碼實現
9.2.5 運行並測試
本章小結
第10章Hive綜合案例(三)
10.1 應用場景
10.2 設計與實現
10.2.1 數據處理
10.2.2 使用Hive對清洗後的數據進行多維分析
10.2.3 在MySQL中建立數據庫
10.2.4 使用Sqoop把分析結果導入到MySQL中
10.2.5 程序設計與實現
10.2.6 運行並測試
本章小結
附錄1 部分類代碼
附錄2 MySQL安裝