中圖網小程序
一鍵登錄
更方便
本類五星書更多>
-
>
闖進數學世界――探秘歷史名題
-
>
中醫基礎理論
-
>
當代中國政府與政治(新編21世紀公共管理系列教材)
-
>
高校軍事課教程
-
>
思想道德與法治(2021年版)
-
>
毛澤東思想和中國特色社會主義理論體系概論(2021年版)
-
>
中醫內科學·全國中醫藥行業高等教育“十四五”規劃教材
大數據平臺構建 版權信息
- ISBN：9787560669410
- 條形碼：9787560669410 ; 978-7-5606-6941-0
- 裝幀：平裝-膠訂
- 冊數：暫無
- 重量：暫無
- 所屬分類：>>
大數據平臺構建 本書特色
本書側重于大數據平臺構建，即平臺的部署、驗證及基本使用，不深入涉及其他大數據分析與應用技術。
本書內容體現為“崗課賽證”的融合，既包括大數據運維工程師核心崗位技能要求，又包括歷年來全國職業院校技能大賽“大數據技術與應用”賽項必考項目和基礎得分項，也包括華為HCIA BigData國際認證的主要考證內容，同時還包括J育部“1 X”大數據應用部署與調優職業技能等級證書的主要考核內容。
大數據平臺構建 內容簡介
本書共4個項目15個任務，項目由易到難、從單一到綜合，各個項目間既有機聯系又相互獨立，授課教師可以根據所教學生的學情分析結果選擇某一個項目單獨教學并進行任務實施。4個項目分別是：安裝環境準備、Hadoop集群完全分布式部署、Hadoop生態系統常用組件部署、Hadoop HA集群部署。每個項目的任務都包含了任務目標、知識準備、任務實施三個部分。
本書對于在實際學習過程中學生需要重點掌握的知識點和技能點都用較多篇幅進行了講解，以加強學生對基礎知識的理解，知其然并知其所以然，從而使學生在任務實施過程中能夠得心應手。本書所有項目的任務實施都來自實際操作步驟，一步一圖，并且任務實施中每一條命令都有詳細注釋，只需認真閱讀、細心操作就能成功。
本書適合作為各類院校大數據技術課程的教材，也適合作為大數據技術愛好者的參考用書。
大數據平臺構建 目錄
項目一 安裝環境準備 1
任務1 了解大數據的基本概念 2
任務目標 2
知識準備 2
一、大數據的定義 2
二、全球數字經濟的發展現狀與趨勢 3
三、我國數字經濟的國際地位與優勢 4
四、大數據時代的挑戰與機遇 5
任務實施 7
任務2 下載所需軟件安裝包 8
任務目標 8
知識準備 8
一、大數據的特征 8
二、大數據生態系統開源技術和框架 9
三、Hadoop生態系統 15
四、Hadoop發展簡史與
版本演變 16
任務實施 17
一、軟件下載清單及官方網址 17
二、VMware Workstation Pro試用版軟件下載 18
三、openEuler軟件下載 18
四、JDK 8軟件下載 19
五、Hadoop軟件下載 19
任務3 虛擬機軟件VMWare Workstation Pro的安裝與使用 20
任務目標 20
知識準備 20
一、VMware Workstation Pro簡介 20
二、VMware Workstation Pro網絡連接模式 21
任務實施 23
一、VMware Workstation Pro 的安裝 23
二、VMware Workstation Pro 的使用 26
任務4 openEuler Linux操作系統的安裝與基礎使用 33
任務目標 33
知識準備 34
一、openEuler Linux操作系統簡介 34
二、查看系統信息 35
三、配置網絡 35
四、管理系統服務 40
五、使用DNF管理軟件包 41
六、文本編輯器vi的使用 47
任務實施 49
一、openEuler Linux操作系統安裝 49
二、FTP服務器的安裝與配置 53
模擬測試試卷 61
項目二 Hadoop集群完全分布式部署 63
任務1 規劃大數據平臺集群 64
任務目標 64
知識準備 64
一、Hadoop的部署模式 64
二、Hadoop集群硬件架構 65
任務實施 66
一、Hadoop完全分布式部署的服務器角色規劃 66
二、Hadoop完全分布式部署的離線安裝所需軟件包下載 66
三、使用FTP服務器構建openEuler完整版的軟件源倉庫 67
任務2 基礎環境配置 72
任務目標 72
知識準備 73
一、SELinux 簡介 73
二、Chrony時間同步服務簡介 75
三、SSH免密登錄簡介 78
任務實施 79
一、安裝集群主節點 79
二、配置集群主機映射表 82
三、關閉防火墻與SELinux 83
四、配置主節點軟件源為FTP服務器軟件源倉庫 83
五、安裝JDK 85
六、新建hadoop用戶 86
七、克隆或復制集群從節點 86
八、安裝時間同步服務 89
九、配置SSH免密鑰登錄(以master為HDFS主節點) 93
任務3 HDFS配置、啟動與驗證 95
任務目標 95
知識準備 96
一、HDFS簡介 96
二、HDFS系統架構與工作原理 98
三、HDFS常用Shell命令 102
任務實施 104
一、Hadoop安裝及腳本文件環境變量配置 104
二、HDFS組件參數配置 106
三、在Shell環境中配置Hadoop環境變量 108
四、分發系統配置文件以及Hadoop文件 110
五、NameNode格式化 112
六、HDFS 啟動 114
七、HDFS驗證 115
任務4 YARN配置、啟動與驗證 117
任務目標 117
知識準備 118
一、YARN與MapReduce簡介 118
二、YARN系統架構與工作原理 119
三、MapReduce系統架構與工作原理 124
任務實施 129
一、配置SSH免密鑰登錄(以slave1 為YARN主節點) 129
二、配置YARN與MapReduce組件參數 131
三、分發YARN與MapReduce配置文件 133
四、啟動集群YARN與JobHistoryServer 136
五、驗證集群YARN與JobHistoryServer 138
六、準備MapReduce輸入文件 141
七、上傳輸入文件到HDFS 142
八、運行MapReduce程序測試job 142
模擬測試試卷 145
項目三 Hadoop生態系統常用組件部署 147
任務1 HBase的安裝部署與基本使用 148
任務目標 148
知識準備 148
一、HBase簡介 148
二、HBase系統架構 151
三、HBase常用Shell命令 154
任務實施 162
一、HBase完全分布式安裝、配置與驗證 162
二、HBase的基本使用 170
任務2 Hive的安裝部署與基本使用 173
任務目標 173
知識準備 173
一、Hive簡介 173
二、Hive系統架構 175
三、Hive安裝模式與連接方式 177
四、Hive常用命令 179
任務實施 195
一、Hive遠程模式安裝、配置與驗證 195
二、Hive基本使用 203
任務3 Spark的安裝部署與基本使用 217
任務目標 217
知識準備 218
一、Spark簡介 218
二、Spark集群運行架構 219
三、Spark運行模式 222
四、Spark應用程序提交模式 223
任務實施 225
一、Spark Local模式安裝 225
二、Spark Standalone模式安裝 228
三、Spark on YARN模式安裝 232
四、Spark SQL CLI使用 240
五、Spark編程基礎 241
模擬測試試卷 248
項目四 Hadoop HA集群部署 251
任務1 規劃Hadoop HA 集群 252
任務目標 252
知識準備 252
一、Hadoop HA簡介 252
二、Hadoop HA原理 252
任務實施 253
一、Hadoop HA部署的服務器角色規劃 253
二、Hadoop HA部署的離線安裝所需軟件包的下載 254
任務2 ZooKeeper安裝與配置 255
任務目標 255
知識準備 255
一、ZooKeeper簡介 255
二、ZooKeeper集群基本架構 256
任務實施 258
一、上傳安裝包到第1個ZooKeeper節點(如master)并解壓 258
二、配置ZooKeeper環境變量 258
三、編輯ZooKeeper配置文件 258
四、創建 zkData和zkDataLog目錄 259
五、設置ZooKeeper節點對應的ID(myid) 259
六、分發ZooKeeper到其他ZooKeeper節點 260
七、修改其他ZooKeeper節點對應的ID(myid) 260
八、啟動與驗證ZooKeeper集群 260
任務3 HDFS HA 配置、啟動與驗證 262
任務目標 262
知識準備 262
一、HDFS HA系統架構 262
二、HDFS NameNode HA工作原理 264
任務實施 265
一、配置HADOOP環境變量 265
二、修改HDFS HA核心配置文件core-site.xml 266
三、修改HDFS HA配置文件hdfs-site.xml 266
四、分發HDFS HA 配置文件 270
五、HDFS HA 集群的格式化 270
六、部署完成之后常規啟動HDFS HA集群 274
七、驗證 HDFS HA 集群 276
八、測試HDFS HA 集群主備NameNode切換 278
任務4 YARN HA 配置、啟動與驗證 280
任務目標 280
知識準備 280
一、YARN HA系統架構 280
二、YARN ResourceManager HA工作原理 282
任務實施 283
一、配置SSH 免密鑰登錄(slave2為主節點) 283
二、修改yarn-site.xml配置文件(YARN HA) 284
三、修改mapred-site.xml配置文件 285
四、分發YARN HA配置文件 286
五、啟動 YARN HA 集群 286
六、啟動歷史服務 288
七、驗證YARN HA集群與歷史服務 288
八、準備MapReduce輸入文件 289
九、將輸入文件上傳到HDFS 290
十、運行MapReduce程序測試job 290
十一、測試YARN HA 集群主備
ResourceManager切換 291
模擬測試試卷 292
參考文獻 295
展開全部
書友推薦
- >
莉莉和章魚
- >
李白與唐代文化
- >
姑媽的寶刀
- >
史學評論
- >
【精裝繪本】畫給孩子的中國神話
- >
龍榆生：詞曲概論/大家小書
- >
月亮與六便士
- >
羅庸西南聯大授課錄
本類暢銷
