大數據與雲計算導論

 

目錄

 

第一部分〓爬蟲基礎篇

第1章大數據概述與基礎

 

1.1大數據時代的興起

 

1.1.1大數據時代的技術演進

 

1.1.2大數據時代的社會和經濟變革

 

1.2什麽是大數據

 

1.2.1數據的基本知識

 

1.2.2大數據的定義和特徵

 

1.3大數據的結構與類型

 

1.4大數據的應用

 

1.4.1個人生活中的大數據應用

 

1.4.2企業中的大數據應用

 

1.4.3政府部門中的大數據應用

 

1.5數據科學與大數據技術

 

1.5.1數據科學概述

 

1.5.2大數據工具與技術

 

1.6習題與實踐

 

第2章大數據與雲計算

 

2.1雲計算概述

 

2.1.1雲計算的特徵

 

2.1.2雲計算體系架構與服務模式

 

2.2雲計算技術與應用

 

2.2.1虛擬化技術

 

2.2.2並行計算技術

 

2.2.3海量數據管理與存儲技術

 

2.3雲計算與大數據的融合

 

2.4案例： 智慧城市建設

 

2.5習題與實踐

 

第3章大數據處理

 

3.1數據採集與數據質量

 

3.1.1數據採集方法

 

3.1.2數據影響因素與質量評估

 

3.2數據清洗與變換

 

3.2.1處理殘缺、噪聲、冗餘數據

 

3.2.2數據變換與集成

 

3.3數據歸約

 

3.3.1維度歸約

 

3.3.2數值歸約

 

3.4習題與實踐

 

第4章數據統計與分析

 

4.1統計分析方法

 

4.2數據挖掘

 

4.3數據挖掘算法

 

4.4案例： 大數據在文學分析中的應用

 

4.4.1情感分析和主題建模

 

4.4.2風格和影響力分析

 

4.4.3文學趨勢分析和關聯分析

 

4.5習題與實踐

 

 

 

 

 

 

 

第5章大數據安全與隱私

 

5.1安全與隱私問題

 

5.1.1網絡安全漏洞

 

5.1.2隱私泄露

 

5.2大數據時代的安全挑戰

 

5.2.1信息安全歷程

 

5.2.2雲計算的安全挑戰

 

5.3解決大數據安全問題

 

5.3.1安全防護對策

 

5.3.2關鍵技術

 

5.4解決隱私保護問題

 

5.4.1政策法規

 

5.4.2隱私保護技術

 

5.5案例： 百度大數據安全實踐

 

5.6習題與實踐

 

第6章數據可視化

 

6.1數據可視化的類型

 

6.1.1科學可視化

 

6.1.2信息可視化

 

6.1.3可視分析學

 

6.2數據可視化的流程與步驟

 

6.2.1數據處理

 

6.2.2視覺編碼

 

6.2.3統計圖表

 

6.3可視化評估

 

6.3.1評估分類

 

6.3.2評估方法

 

6.4習題與實踐

 

第7章大數據與社交媒體融合

 

7.1社交媒體概述

 

7.2社交媒體大數據分析與挖掘

 

7.3社交媒體大數據的未來挑戰

 

7.4社交媒體大數據信息安全問題

 

7.5習題與實踐

 

第8章大數據在醫療領域的應用

 

8.1醫療病歷的問題與挑戰

 

8.1.1病歷共享

 

8.1.2責任意識

 

8.2大數據與電子病歷

 

8.2.1電子病歷的大數據定義與應用

 

8.2.2電子病歷共享、追溯、數據挖掘

 

8.3我國居民終身電子病歷計劃

 

8.4習題與實踐

 

第9章大數據在旅游業的應用

 

9.1旅游數據問題與發展

 

9.2大數據與旅游業

 

9.2.1智慧旅游

 

9.2.2定製旅游

 

9.2.3精準營銷

 

9.3旅游與數據挖掘

 

9.3.1鎖定用戶

 

9.3.2社交媒體挖掘

 

9.4旅游平臺

 

9.4.1旅游平臺模式

 

9.4.2旅游平臺技術

 

9.5習題與實踐

 

第10章大數據在金融領域的應用

 

10.1金融大數據概述

 

10.1.1金融大數據的定義

 

10.1.2金融大數據的影響

 

10.1.3金融大數據的應用戰略

 

10.2金融大數據的應用

 

10.3大數據與金融創新

 

10.3.1創新維度

 

10.3.2應用案例

 

10.4習題與實踐

 

第11章大數據在製造業的應用

 

11.1大數據與工業革命

 

11.1.1工業4.0

 

11.1.2新工業革命

 

11.2工業大數據

 

11.3大數據與智能工廠

 

11.3.1智能工廠的概念

 

11.3.2智能工廠的特徵

 

11.3.3智能工廠的應用

 

11.4智能製造大數據分析

 

11.5案例： 服裝個性化定製

 

11.6習題與實踐

 

結語： 大數據時代的機遇與挑戰