大數據工程化處理與應用實訓（中級）
北京新奧時代科技有限責任公司
- 出版商: 電子工業
- 出版日期: 2021-11-01
- 定價: $354
- 售價: 8.5 折 $301
- 語言: 簡體中文
- 頁數: 244
- 裝訂: 平裝
- ISBN: 7121422514
- ISBN-13: 9787121422515
-
相關分類:
大數據 Big-data
下單後立即進貨 (約4週~6週)
相關主題
商品描述
本教材編寫以《大數據工程化處理與應用職業技能等級標準》為依據，圍繞大數據工程技術領域人才需求與崗位能力、通過項目任務教學法進行內容設計。本教材包括網絡數據採集、離線數據採集、數據清洗計算、數據計算派生、數據處理、聯機分析處理與決策報表應用、搜索系統與推送報表應用共7個項目15個任務的內容，涵蓋“網絡爬蟲技術與應用”“大數據ETL處理”“大數據查詢技術與應用”等專業核心課程。按照“引導案例-職業能力目標-任務描述與要求-任務資訊-任務計劃與決策-任務實施-任務小結-任務拓展”的組織結構進行設計，以環境、交通、電子商務等不同行業的大數據應用情景作為教學案例。
作者簡介
工業和化教育與考試中心（電子通信行業職業技能鑑定指導中心）（以下是教育考試中心或中心機構中央機構編制辦公室批准設置的事業單位、中心委員會信息工業、通信行業和信息化諮詢中心） 專業人才培養，是集教育培訓、人才選拔和評估技術評估的綜合性專業人才服務機構。並承擔教育部和專業教育信息化職業教育教學指導委員會（簡稱工信行委）具體組織和業務工作實施
目錄大綱
第一篇大數據工程化採集
項目一基於Requestium的空氣質量數據採集
【引導案例】
任務一基於Requestium實現網絡數據採集
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
任務二 爬蟲作業調度
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
項目二基於Sqoop的外貿離線數據採集
【引導案例】
任務一基於Sqoop實現離線數據採集
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
任務二離線採集腳本
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
第二篇大數據工程化處理
項目三基於蜂巢的氣象數據清洗計算
【引導案例】
任務一氣象指標數據
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
任務二計算氣象指標數據
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
項目四基礎Hive的電商數據計算派生
【引導案例】
任務一計算電商指標數據
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
任務二派生電商指標數據
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
項目五基於Hive的共享單車數據處理
【引導案例】
任務一查詢共享單車數據
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
任務二計算共享單車數據
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
任務三派生共享單車數據
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
第三篇 大數據工程化應用
項目應用基於 Kylin 的數據
【引導案例】
任務一在線分析處理
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
任務二實現數據決策報表
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
項目七基於ElasticSearch的影評數據
【引導案例】
任務一構建整體搜索系統
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
任務二 實現數據發送報表
【目標能力】
【任務描述與要求】
【任務資訊】
【任務計劃與決策】
【任務實施】
【任務小結】
【任務探索】
參考文獻
