大數據技術入門(微課視頻+題庫版)
內容描述
本書介紹大數據技術的基本概念和相應的技術應用。全書共10章,分別是大數據介紹、雲計算基礎、大數據架構、數據採集、數據清洗、大數據存儲、大數據分析與挖掘、大數據可視化、大數據安全和大數據的行業應用。本書將理論與實踐操作相結合,通過大量的案例幫助讀者快速瞭解大數據相關基本技術,並對書中重要的、核心的知識點加大練習比例,以達到熟練應用的目的。
本書可作為高等院校大數據、人工智能、軟件技術、雲計算、電腦網絡等專業的專業課教材,也可作為大數據愛好者的參考書。
目錄大綱
配套資源
目錄
第1章大數據介紹
1.1大數據概述
1.1.1認識大數據
1.1.2大數據的特徵
1.1.3大數據技術應用與基礎
1.2大數據的意義
1.2.1大數據的國家戰略意義
1.2.2大數據的企業意義
1.2.3我國大數據市場的產業發展
1.3本章小結
1.4實訓
習題1
第2章雲計算基礎
2.1雲計算概述
2.1.1雲計算定義
2.1.2雲計算的特徵
2.1.3雲計算的體系結構
2.2雲計算的服務類型與層次
2.2.1雲計算服務類型
2.2.2雲計算服務層次
2.3雲計算的服務模式
2.3.1公有雲
2.3.2私有雲
2.3.3混合雲
2.4雲計算關鍵技術
2.4.1虛擬化技術
2.4.2容器技術
2.4.3並行計算技術
2.4.4海量數據存儲技術
2.5雲計算與大數據
2.5.1雲計算與大數據的關系
2.5.2雲計算與大數據的融合發展
2.6雲計算的應用
2.7常見雲計算平臺介紹
2.7.1雲計算平臺介紹
2.7.2常見的雲計算平臺
2.8本章小結
2.9實訓
習題2
第3章大數據架構
3.1大數據架構概述
3.1.1大數據架構介紹
3.1.2大數據架構分類
3.2Hadoop架構
3.2.1Hadoop介紹
3.2.2Hadoop發展史
3.2.3Hadoop核心組件
3.3HDFS概述
3.3.1HDFS的概念
3.3.2HDFS操作
3.4MapReduce概述
3.4.1MapReduce的概念
3.4.2MapReduce設計方式
3.4.3MapReduce架構
3.5本章小結
3.6實訓
習題 3
第4章數據採集
4.1數據採集概述
4.2數據採集平臺
4.2.1數據採集平臺概述
4.2.2數據採集平臺實例
4.3爬蟲數據採集基礎
4.3.1網絡爬蟲基礎知識
4.3.2網絡爬蟲框架Scrapy
4.4Python爬蟲實現
4.4.1Python簡介
4.4.2Python爬蟲實現
4.5本章小結
4.6實訓
習題4
第5章數據清洗
5.1數據清洗概述
5.2數據清洗的常用方法
5.2.1缺失值的處理方法
5.2.2噪聲數據的處理方法
5.3數據質量與數據倉庫
5.3.1數據質量的定義
5.3.2數據質量的常見問題
5.3.3數據質量與數據清洗
5.3.4數據倉庫與ETL
5.3.5主數據與元數據
5.4數據清洗環境與常用工具
5.4.1數據清洗環境
5.4.2數據清洗常用工具
5.5本章小結
5.6實訓
習題5
第6章大數據存儲
6.1大數據存儲概述
6.1.1大數據存儲的概念
6.1.2大數據存儲的類型
6.1.3大數據存儲的關鍵技術
6.2大數據存儲方式
6.2.1分佈式存儲
6.2.2NoSQL數據庫
6.2.3NewSQL數據庫
6.2.4雲數據庫
6.3NoSQL數據庫產品介紹
6.3.1Redis
6.3.2HBase
6.3.3MongoDB
6.3.4LevelDB
6.3.5Neo4j
6.4本章小結
6.5實訓
習題6
第7章大數據分析與挖掘
7.1大數據分析概述
7.1.1大數據分析的概念
7.1.2大數據分析的類型
7.1.3大數據分析的方法
7.2大數據挖掘
7.2.1大數據挖掘概述
7.2.2大數據挖掘應用
7.3數據挖掘算法
7.3.1KMeans算法
7.3.2樸素貝葉斯算法
7.3.3Apriori算法
7.3.4決策樹算法
7.3.5KNN算法
7.3.6支持向量機
7.3.7遺傳算法
7.3.8神經網絡算法
7.4本章小結
7.5實訓
習題 7
第8章大數據可視化
8.1大數據可視化概述
8.1.1大數據可視化的概念
8.1.2大數據可視化的流程
8.1.3大數據可視化圖表介紹
8.2大數據可視化方法
8.2.1文本可視化
8.2.2網絡可視化
8.2.3空間信息可視化
8.3大數據可視化常用工具
8.3.1Excel
8.3.2ECharts
8.3.3Tableau
8.4大數據可視化技術的應用
8.4.1大數據可視化的應用場景
8.4.2大數據可視化技術的行業應用
8.5本章小結
8.6實訓
習題8
第9章大數據安全
9.1數據安全與大數據安全
9.1.1數據安全概述
9.1.2大數據安全
9.2大數據安全的挑戰與關鍵技術
9.2.1大數據安全面臨的主要威脅
9.2.2大數據安全的關鍵技術
9.3大數據安全體系
9.3.1大數據安全體系概述
9.3.2大數據安全體系實施
9.4大數據安全法律
9.4.1大數據安全法律介紹
9.4.2大數據安全法律應用
9.5本章小結
9.6實訓
習題9
第10章大數據的行業應用
10.1工業大數據
10.1.1工業大數據概述
10.1.2工業大數據的特點和分類
10.1.3工業大數據的內涵
10.1.4工業大數據與行業的聯系
10.1.5工業大數據的應用
10.1.6我國工業大數據存在的問題
10.2交通大數據
10.2.1交通大數據概述
10.2.2大數據在智慧交通中的應用
10.2.3交通大數據存在的問題
10.3教育大數據
10.3.1教育大數據概述
10.3.2教育大數據的實現
10.3.3數字化校園
10.3.4教育大數據的應用實例
10.4本章小結
10.5實訓
習題10
參考文獻