中图网(原中国图书网):网上书店,尾货特色书店,30万种特价书低至2折!

歡迎光臨中圖網 請 | 注冊
> >>
大數據平臺運維(初級)/新華三技術有限公司

包郵 大數據平臺運維(初級)/新華三技術有限公司

出版社:電子工業出版社出版時間:2020-10-01
開本: 其他 頁數: 304
中 圖 價:¥35.2(6.0折) 定價  ¥59.0 登錄后可看到會員價
加入購物車 收藏
開年大促, 全場包郵
?新疆、西藏除外
本類五星書更多>
買過本商品的人還買了

大數據平臺運維(初級)/新華三技術有限公司 版權信息

大數據平臺運維(初級)/新華三技術有限公司 內容簡介

本書為“1+X”職業技能等級證書配套教材,按國家“1+X”大數據平臺運維職業技能等級標準編寫。本書屬于大數據平臺運維初級教材,從大數據平臺運維工程師角度由淺入深、多方面地介紹大數據平臺運維的相關基礎知識和基本實操。本書共分6個部分18章,部分為大數據平臺安裝,涉及平臺操作系統的使用、Hadoop平臺安裝、平臺基礎環境配置;第二部分為大數據平臺配置,涉及Hadoop文件參數配置、Hadoop集群運行;第三部分為大數據平臺組件的安裝與配置,涉及Hive、HBase、ZooKeeper、Sqoop和Flume組件的安裝與配置;第四部分為大數據平臺實施,涉及大數據平臺實施方案、培訓方案;第五部分為大數據平臺監控,涉及基于大數據平臺的監控命令、監控界面和報表、日志和告警信息監控;第六部分為大數據運維綜合實戰案例,以實際項目為例介紹從平臺部署、數據業務采集、數據分析到數據可視化的整體基礎實施過程,并介紹了大數據平臺運維的常見故障及處理流程。本書可作為中高職院校大數據及計算機類相關專業的教材,也可作為大數據平臺運維人員的參考用書。

大數據平臺運維(初級)/新華三技術有限公司 目錄

目 錄




**部分 大數據平臺安裝
第1章 平臺操作系統的使用 3
1.1 Linux操作系統概述 3
1.1.1 Linux操作系統的起源 3
1.1.2 Linux操作系統的特點 4
1.1.3 Linux操作系統的應用場景 5
1.1.4 Linux版本 6
1.2 Linux常用命令 7
1.2.1 文件與目錄操作 7
1.2.2 用戶操作 9
1.2.3 文本操作 10
1.2.4 系統操作 11
1.3 Linux操作系統用戶信息 14
1.3.1 用戶和組 14
1.3.2 文件類型和權限 15
1.4 本章小結 17
第2章 Hadoop平臺安裝 18
2.1 Hadoop概述 18
2.1.1 Hadoop的起源 18
2.1.2 Hadoop的生態圈 19
2.1.3 Hadoop的版本 21
2.1.4 Hadoop的優點 22
2.1.5 Hadoop的應用場景 22
2.1.6 Hadoop的運行模式 23
2.2 Hadoop的核心組件 23
2.2.1 HDFS 23
2.2.2 MapReduce 26
2.2.3 YARN 28
2.3 平臺操作系統環境設置 29
2.3.1 配置Linux操作系統基礎
環境 30
2.3.2 安裝Java環境 32
2.4 安裝Hadoop軟件 35
2.4.1 獲取Hadoop安裝包 35
2.4.2 安裝Hadoop軟件 35
2.4.3 修改目錄所有者和所有者組 36
2.5 安裝單機版Hadoop系統 36
2.5.1 配置Hadoop配置文件 37
2.5.2 測試Hadoop本地模式的
運行 37
2.6 本章小結 38
第3章 平臺基礎環境配置 39
3.1 集群網絡連接 39
3.1.1 實驗環境下的大數據Hadoop
平臺集群網絡 39
3.1.2 生產環境下的大數據Hadoop
平臺集群網絡 40
3.2 SSH無密碼登錄 41
3.2.1 SSH簡介 41
3.2.2 SSH特點介紹 41
3.2.3 非對稱加密機制 42
3.2.4 SSH安全機制 42
3.2.5 SSH基于口令的安全驗證 43
3.2.6 基于密鑰的安全驗證 43
3.3 集群網絡配置 44
3.3.1 實驗環境下的集群網絡配置 44
3.3.2 生產環境下的集群網絡配置 44
3.4 SSH無密碼驗證配置 47
3.4.1 生成SSH密鑰 47
3.4.2 交換SSH密鑰 49
3.4.3 驗證SSH無密碼登錄 50
3.5 本章小結 51
第二部分 大數據平臺配置
第4章 Hadoop文件參數配置 55
4.1 Hadoop配置文件說明 55
4.1.1 Hadoop環境配置 55
4.1.2 Hadoop守護進程環境配置 56
4.1.3 Hadoop配置參數格式 57
4.1.4 獲得Hadoop集群全部配置
信息 57
4.2 在master節點上安裝Hadoop 58
4.3 配置hdfs-site.xml文件參數 58
4.4 配置core-site.xml文件參數 59
4.5 配置mapred-site.xml 60
4.6 配置yarn-site.xml 61
4.7 Hadoop其他相關配置 62
4.8 本章小結 63
第5章 Hadoop集群運行 64
5.1 Hadoop運行狀態 64
5.2 配置Hadoop格式化 68
5.3 查看Java進程 69
5.4 查看HDFS的報告 70
5.5 使用瀏覽器查看節點狀態 71
5.6 停止Hadoop 74
5.7 本章小結 74
第三部分 大數據平臺組件的安裝與配置
第6章 Hive組件的安裝與配置 77
6.1 Hive相關知識 77
6.2 Hive組件架構 78
6.3 下載和解壓安裝文件 79
6.3.1 基礎環境和安裝準備 79
6.3.2 解壓安裝文件 79
6.4 設置Hive環境 80
6.4.1 卸載MariaDB數據庫 80
6.4.2 安裝MySQL數據庫 80
6.4.3 配置Hive組件 85
6.5 初始化Hive元數據 87
6.6 啟動Hive 89
6.7 本章小結 89
第7章 HBase組件的安裝與配置 90
7.1 HBase相關知識 90
7.2 HBase功能應用 91
7.3 HBase組件設置 92
7.4 HBase安裝與配置 94
7.5 HBase常用Shell命令 98
7.6 本章小結 101
第8章 ZooKeeper組件的安裝與配置 102
8.1 ZooKeeper相關知識 102
8.1.1 ZooKeeper的重要概念 103
8.1.2 ZooKeeper的特點 104
8.2 ZooKeeper選項設置 104
8.3 ZooKeeper角色選舉 105
8.4 下載和安裝ZooKeeper 105
8.5 ZooKeeper的配置選項 106
8.5.1 master節點配置 106
8.5.2 slave節點配置 106
8.5.3 系統環境變量配置 106
8.6 啟動ZooKeeper 107
8.7 本章小結 107
第9章 Sqoop組件的安裝與配置 108
9.1 Sqoop相關知識 108
9.2 Sqoop的功能應用 109
9.2.1 Sqoop架構 109
9.2.2 Sqoop導入原理 109
9.2.3 Sqoop導出原理 110
9.3 下載和解壓Sqoop 112
9.4 配置Sqoop環境 112
9.5 啟動Sqoop 113
9.6 Sqoop模板命令 114
9.7 Sqoop組件應用 116
9.8 本章小結 117
第10章 Flume組件的安裝與配置 118
10.1 Flume相關知識 118
10.2 Flume功能應用 119
10.2.1 Flume功能 119
10.2.2 Flume結構 119
10.3 Flume組件設置 119
10.4 下載和解壓Flume 120
10.5 Flume組件部署 121
10.6 使用Flume發送和接收
信息 121
10.7 本章小結 122
第四部分 大數據平臺實施
第11章 大數據平臺實施方案的理解 125
11.1 系統實施方案概述 125
11.1.1 方案概述 125
11.1.2 項目實施思路 126
11.1.3 項目實施流程 126
11.2 確認客戶需求 127
11.2.1 確認需求分析準備 127
11.2.2 進行確認需求調研 127
11.2.3 系統詳細需求分析 129
11.3 編寫大數據平臺實施方案 129
11.3.1 大數據平臺規劃 129
11.3.2 大數據平臺部署 131
11.3.3 項目實施計劃 131
11.3.4 項目實施人員 132
11.4 執行實施方案過程 133
11.4.1 實施內容 133
11.4.2 實施流程 133
11.5 系統測試 133
11.6 項目驗收 135
11.7 本章小結 135
第12章 客戶培訓方案的制定 136
12.1 培訓方案概述 136
12.2 客戶培訓方案要點 137
12.2.1 培訓目標 137
12.2.2 培訓對象 138
12.2.3 培訓形式 139
12.2.4 培訓內容 139
12.2.5 培訓計劃 140
12.3 文檔制作工具 140
12.3.1 制作甘特圖 140
12.3.2 制作WBS圖 143
12.4 大數據平臺操作演示 145
12.4.1 演示內容選取 145
12.4.2 演示的步驟 146
12.4.3 演示的技巧 147
12.4.4 演示注意事項 148
12.5 本章小結 148
第五部分 大數據平臺監控
第13章 大數據平臺監控命令 151
13.1 大數據平臺運行狀態 151
13.1.1 大數據平臺主機系統狀態 152
13.1.2 大數據平臺Hadoop狀態 153
13.2 大數據平臺資源狀態 153
13.2.1 YARN資源狀態 154
13.2.2 HDFS資源狀態 154
13.2.3 HBase狀態 155
13.2.4 Hive狀態 155
13.3 大數據平臺服務狀態 156
13.3.1 ZooKeeper服務狀態 156
13.3.2 Sqoop服務狀態 157
13.3.3 Flume服務狀態 157
13.4 通過命令監控大數據平臺的
運行狀態 157
13.4.1 通過命令查看大數據平臺
狀態 157
13.4.2 通過命令查看Hadoop
狀態 165
13.5 通過命令監控大數據平臺的
資源狀態 166
13.5.1 通過命令查看YARN狀態 166
13.5.2 通過命令查看HDFS狀態 167
13.5.3 通過命令查看HBase狀態 168
13.5.4 通過命令查看Hive狀態 171
13.6 通過命令監控大數據平臺的
服務狀態 174
13.6.1 通過命令查看ZooKeeper
狀態 174
13.6.2 通過命令查看Sqoop狀態 178
13.6.3 通過命令查看Flume狀態 180
13.7 本章小結 181
第14章 大數據平臺監控界面和報表 182
14.1 大數據平臺常用組件 182
14.2 通過界面監控大數據平臺的
運行狀態 183
14.2.1 通過界面查看大數據平臺
狀態 183
14.2.2 通過界面查看Hadoop
狀態 183
14.3 通過界面監控大數據平臺的
資源狀態 185
14.3.1 通過界面監控YARN的
狀態 185
14.3.2 通過界面監控HDFS狀態 186
14.3.3 通過界面監控HBase的
狀態 188
14.3.4 通過界面監控Hive的狀態 189
14.4 本章小結 193
第15章 日志和告警信息監控 194
15.1 大數據平臺日志信息 194
15.1.1 Hadoop日志簡介 194
15.1.2 大數據平臺主機日志信息 195
15.2 大數據平臺告警信息 196
15.3 查看大數據平臺日志信息 196
15.3.1 查看大數據平臺主機日志 196
15.3.2 在Hadoop MapReduce Jobs
中查看日志信息 203
15.3.3 通過用戶界面查看Hadoop
日志 205
15.3.4 通過命令查看Hadoop
日志 207
15.3.5 查看HBase日志 209
15.3.6 查看Hive日志 210
15.4 查看大數據平臺告警信息 211
15.4.1 查看大數據平臺主機告警
信息 211
15.4.2 查看Hadoop告警信息 213
15.4.3 查看HBase告警信息 215
15.4.4 查看Hive告警信息 218
15.5 本章小結 220
第六部分 大數據運維綜合實戰案例
第16章 大數據平臺及組件的安裝與
部署 223
16.1 項目背景 223
16.2 項目實施目標 223
16.3 Hadoop全分布部署 224
16.3.1 Hadoop全分布部署流程 224
16.3.2 Hadoop全分布部署要求 224
16.3.3 Hadoop部署操作步驟 225
16.3.4 Hadoop集群驗證 226
16.4 Sqoop組件部署 228
16.4.1 Sqoop組件部署流程 228
16.4.2 Sqoop組件部署要求 228
16.4.3 Sqoop部署操作步驟 229
16.4.4 Sqoop數據傳輸驗證 229
16.5 Hive組件部署 231
16.5.1 Hive組件部署流程 231
16.5.2 Hive組件部署要求 231
16.5.3 Hive部署操作步驟 232
16.5.4 Hive組件驗證 232
16.6 本章小結 233
第17章 大數據平臺的運行與應用 234
17.1 項目背景 234
17.2 項目實施目標 234
17.3 大數據平臺業務處理流程 235
17.4 大數據平臺業務處理系統
應用 236
17.4.1 生產環境數據導入大數據
平臺 236
17.4.2 業務處理層數據清洗分析 237
17.4.3 運行業務處理相關清洗
任務 245
17.4.4 數據進入數據倉庫 252
17.4.5 業務應用層大數據分析 254
17.4.6 數據倉庫數據導出數據
訪問層 255
17.4.7 數據訪問層大數據可視化 257
17.5 本章小結 259
第18章 大數據運維基本問題案例集 260
18.1 大數據平臺問題分析處理
流程 260
18.2 解決基礎環境的基本問題
案例 261
18.2.1 權限配置問題 261
18.2.2 SELinux問題 262
18.2.3 Hadoop安全模式問題 262
18.2.4 主機名配置造成問題 263
18.3 解決組件配置的基本問題
案例 264
18.3.1 Hive組件異常問題 264
18.3.2 Sqoop組件異常問題 267

18.3.3 HBase組件異常問題 268
18.3.4 ZooKeeper組件異常問題 268
18.4 解決平臺啟動的基本問題
案例 269
18.4.1 HDFS服務啟動問題 269
18.4.2 NameNode格式化異常
問題 270
18.4.3 DataNode進程啟動問題 271
18.4.4 SecondaryNameNode啟動
問題 273
18.5 解決平臺運行的基本問題
案例 274
18.6 本章小結 275
附錄 虛擬化軟件的使用 276
A.1 虛擬機的概念、用途及常用
軟件 276
A.1.1 虛擬機的概念 276
A.1.2 虛擬機的用途 278
A.1.3 常用虛擬機軟件 279
A.2 H3C CAS云計算管理平臺 280
A.2.1 H3C CAS云計算管理平臺
簡介 280
A.2.2 創建虛擬機 282
A.2.3 修改虛擬機硬件配置 284
A.2.4 基于CAS云平臺使用
虛擬機 285
A.2.5 刪除虛擬機 286
A.3 H3C教學與實踐管理平臺 287
A.3.1 H3C教學與實踐管理平臺
簡介 287
A.3.2 預習 287
A.3.3 上課學習 289
A.3.4 鞏固學習效果 292
A.3.5 完成學習 295
A.4 小結 296

展開全部

大數據平臺運維(初級)/新華三技術有限公司 作者簡介

紫光股份旗下新華三集團作為數字化解決方案領導者,致力于成為客戶業務創新、數字化轉型最可信賴的合作伙伴。新華三擁有計算、存儲、網絡、5G、安全等全方位的數字化基礎設施整體能力,提供云計算、大數據、人工智能、工業互聯網、信息安全、智能聯接、新安防、邊緣計算等在內的一站式數字化解決方案,以及端到端的技術服務。同時,新華三也是HPE?服務器、存儲和技術服務的中國**提供商。

商品評論(0條)
暫無評論……
書友推薦
本類暢銷
編輯推薦
返回頂部
中圖網
在線客服
主站蜘蛛池模板: RO反渗透设备_厂家_价格_河南郑州江宇环保科技有限公司 | 空冷器|空气冷却器|空水冷却器-无锡赛迪森机械有限公司[官网] | 企业彩铃制作_移动、联通、电信集团彩铃上传开通_彩铃定制_商务彩铃管理平台-集团彩铃网 | 食品无尘净化车间,食品罐装净化车间,净化车间配套风淋室-青岛旭恒洁净技术有限公司 | 高博医疗集团上海阿特蒙医院| Magnescale探规,Magnescale磁栅尺,Magnescale传感器,Magnescale测厚仪,Mitutoyo光栅尺,笔式位移传感器-苏州连达精密量仪有限公司 | 海外整合营销-独立站营销-社交媒体运营_广州甲壳虫跨境网络服务 焊管生产线_焊管机组_轧辊模具_焊管设备_焊管设备厂家_石家庄翔昱机械 | 荣事达手推洗地机_洗地机厂家_驾驶式扫地机_工业清洁设备 | 天津试验仪器-电液伺服万能材料试验机,恒温恒湿标准养护箱,水泥恒应力压力试验机-天津鑫高伟业科技有限公司 | 深圳侦探联系方式_深圳小三调查取证公司_深圳小三分离机构 | 电缆桥架生产厂家_槽式/梯式_热镀锌线槽_广东东莞雷正电气 | 森旺-A级防火板_石英纤维板_不燃抗菌板装饰板_医疗板 | 西宁装修_西宁装修公司-西宁业之峰装饰-青海业之峰墅级装饰设计公司【官网】 | 中视电广_短视频拍摄_短视频推广_短视频代运营_宣传片拍摄_影视广告制作_中视电广 | 5L旋转蒸发器-20L-50L旋转蒸发器-上海越众仪器设备有限公司 | 阜阳成人高考_阜阳成考报名时间_安徽省成人高考网 | 智慧养老_居家养老_社区养老_杰佳通| 逗网红-抖音网红-快手网红-各大平台网红物品导航 | NMRV减速机|铝合金减速机|蜗轮蜗杆减速机|NMRV减速机厂家-东莞市台机减速机有限公司 | 涡街流量计_LUGB智能管道式高温防爆蒸汽温压补偿计量表-江苏凯铭仪表有限公司 | 卫生纸复卷机|抽纸机|卫生纸加工设备|做卫生纸机器|小型卫生纸加工需要什么设备|卫生纸机器设备多少钱一台|许昌恒源纸品机械有限公司 | IWIS链条代理-ALPS耦合透镜-硅烷预处理剂-上海顶楚电子有限公司 lcd条形屏-液晶长条屏-户外广告屏-条形智能显示屏-深圳市条形智能电子有限公司 | 耐酸泵,耐腐蚀真空泵,耐酸真空泵-淄博华舜耐腐蚀真空泵有限公司 精密模具-双色注塑模具加工-深圳铭洋宇通 | atcc网站,sigma试剂价格,肿瘤细胞现货,人结肠癌细胞株购买-南京科佰生物 | 包装盒厂家_纸盒印刷_礼品盒定制-济南恒印包装有限公司 | 智能化的检漏仪_气密性测试仪_流量测试仪_流阻阻力测试仪_呼吸管快速检漏仪_连接器防水测试仪_车载镜头测试仪_奥图自动化科技 | ET3000双钳形接地电阻测试仪_ZSR10A直流_SXJS-IV智能_SX-9000全自动油介质损耗测试仪-上海康登 | 七维官网-水性工业漆_轨道交通涂料_钢结构漆 | 振动筛-交叉筛-螺旋筛-滚轴筛-正弦筛-方形摇摆筛「新乡振动筛厂家」 | 苹果售后维修点查询,苹果iPhone授权售后维修服务中心 – 修果网 拼装地板,悬浮地板厂家,悬浮式拼装运动地板-石家庄博超地板科技有限公司 | 乐考网-银行从业_基金从业资格考试_初级/中级会计报名时间_中级经济师 | 蓝莓施肥机,智能施肥机,自动施肥机,水肥一体化项目,水肥一体机厂家,小型施肥机,圣大节水,滴灌施工方案,山东圣大节水科技有限公司官网17864474793 | 水平垂直燃烧试验仪-灼热丝试验仪-漏电起痕试验仪-针焰试验仪-塑料材料燃烧检测设备-IP防水试验机 | 通风气楼_通风天窗_屋顶风机-山东美创通风设备有限公司 | 塑料异型材_PVC异型材_封边条生产厂家_PC灯罩_防撞扶手_医院扶手价格_东莞市怡美塑胶制品有限公司 | 艺术生文化课培训|艺术生文化课辅导冲刺-济南启迪学校 | 震动筛选机|震动分筛机|筛粉机|振筛机|振荡筛-振动筛分设备专业生产厂家高服机械 | 玉米深加工设备|玉米加工机械|玉米加工设备|玉米深加工机械-河南成立粮油机械有限公司 | 智慧旅游_智慧景区_微景通-智慧旅游景区解决方案提供商 | 红外光谱仪维修_二手红外光谱仪_红外压片机_红外附件-天津博精仪器 | 上海恒驭仪器有限公司-实验室平板硫化机-小型平板硫化机-全自动平板硫化机 |