中图网(原中国图书网):网上书店,尾货特色书店,30万种特价书低至2折!

歡迎光臨中圖網(wǎng) 請 | 注冊
> >>
大數(shù)據(jù)Hive離線計(jì)算開發(fā)實(shí)戰(zhàn)

包郵 大數(shù)據(jù)Hive離線計(jì)算開發(fā)實(shí)戰(zhàn)

作者:楊力
出版社:人民郵電出版社出版時間:2020-06-01
開本: 16開 頁數(shù): 184
中 圖 價:¥45.2(7.7折) 定價  ¥59.0 登錄后可看到會員價
加入購物車 收藏
開年大促, 全場包郵
?新疆、西藏除外
本類五星書更多>

大數(shù)據(jù)Hive離線計(jì)算開發(fā)實(shí)戰(zhàn) 版權(quán)信息

大數(shù)據(jù)Hive離線計(jì)算開發(fā)實(shí)戰(zhàn) 本書特色

本書從數(shù)據(jù)處理平臺數(shù)據(jù)庫和數(shù)據(jù)倉庫入手,幫助讀者逐步搭建大數(shù)據(jù)Hive數(shù)據(jù)倉庫平臺,并介紹了這種傳統(tǒng)數(shù)據(jù)分析方法在大數(shù)據(jù)平臺成功應(yīng)用的典型案例。本書通過對Hive數(shù)據(jù)定義語言、Hive數(shù)據(jù)操縱語言、Hive數(shù)據(jù)基本查詢、Hive數(shù)據(jù)復(fù)雜查詢的詳細(xì)介紹,全面闡述了Hive大數(shù)據(jù)平臺工具的應(yīng)用與開發(fā)。另外,還介紹了Hive數(shù)據(jù)庫對象、用戶自定義函數(shù)以及Azkaban工作流作業(yè)調(diào)度器,幫助讀者掌握Hive平臺的強(qiáng)大功能和特性。*后,通過電商推薦系統(tǒng)、汽車銷售數(shù)據(jù)分析系統(tǒng)以及微博數(shù)據(jù)分析系統(tǒng)3個實(shí)戰(zhàn)開發(fā)項(xiàng)目案例,讓讀者對Hive大數(shù)據(jù)平臺數(shù)據(jù)倉庫工具的實(shí)戰(zhàn)應(yīng)用有更深的理解。

大數(shù)據(jù)Hive離線計(jì)算開發(fā)實(shí)戰(zhàn) 內(nèi)容簡介

本書從數(shù)據(jù)處理平臺數(shù)據(jù)庫和數(shù)據(jù)倉庫入手,幫助讀者逐步搭建大數(shù)據(jù)Hive數(shù)據(jù)倉庫平臺,并介紹了這種傳統(tǒng)數(shù)據(jù)分析方法在大數(shù)據(jù)平臺成功應(yīng)用的典型案例。本書通過對Hive數(shù)據(jù)定義語言、Hive數(shù)據(jù)操縱語言、Hive數(shù)據(jù)基本查詢、Hive數(shù)據(jù)復(fù)雜查詢的詳細(xì)介紹,全面闡述了Hive大數(shù)據(jù)平臺工具的應(yīng)用與開發(fā)。另外,還介紹了Hive數(shù)據(jù)庫對象、用戶自定義函數(shù)以及Azkaban工作流作業(yè)調(diào)度器,幫助讀者掌握Hive平臺的強(qiáng)大功能和特性。很后,通過電商推薦系統(tǒng)、汽車銷售數(shù)據(jù)分析系統(tǒng)以及微博數(shù)據(jù)分析系統(tǒng)3個實(shí)戰(zhàn)開發(fā)項(xiàng)目案例,讓讀者對Hive大數(shù)據(jù)平臺數(shù)據(jù)倉庫工具的實(shí)戰(zhàn)應(yīng)用有更深的理解。

大數(shù)據(jù)Hive離線計(jì)算開發(fā)實(shí)戰(zhàn) 目錄

目錄
第01章 數(shù)據(jù)倉庫基礎(chǔ) 1
1.1 數(shù)據(jù)處理平臺 1
1.2 數(shù)據(jù)庫 2
1.3 關(guān)系型數(shù)據(jù)庫 2
1.3.1 數(shù)據(jù)庫三范式 3
1.3.2 數(shù)據(jù)庫事務(wù) 6
1.3.3 數(shù)據(jù)庫設(shè)計(jì)理念 7
1.4 數(shù)據(jù)倉庫 7
1.4.1 無數(shù)據(jù)倉庫的時代 7
1.4.2 數(shù)據(jù)倉庫的發(fā)展 8
1.5 數(shù)據(jù)倉庫設(shè)計(jì)理念 9
1.6 數(shù)據(jù)庫與數(shù)據(jù)倉庫的不同 10
1.7 本章總結(jié) 11
1.8 本章習(xí)題 11
第02章 Hive安裝部署 12
2.1 Hive基本概念 12
2.1.1 Hive簡介 12
2.1.2 Hive設(shè)計(jì)特性 13
2.1.3 Hive與傳統(tǒng)數(shù)據(jù)庫的對比 14
2.2 Hive安裝部署 14
2.3 安裝配置MySQL 16
2.4 配置啟動Hive 22
2.5 Hive常用內(nèi)部命令 26
2.6 Hive數(shù)據(jù)類型 27
2.6.1 Hive基本數(shù)據(jù)類型 28
2.6.2 Hive集合數(shù)據(jù)類型 30
2.7 本章總結(jié) 36
2.8 本章習(xí)題 36
第03章 Hive數(shù)據(jù)定義與操作 37
3.1 HiveQL數(shù)據(jù)定義語言 37
3.1.1 創(chuàng)建數(shù)據(jù)庫 38
3.1.2 刪除數(shù)據(jù)庫 40
3.1.3 創(chuàng)建表 40
3.1.4 修改表 45
3.1.5 刪除表 46
3.1.6 分區(qū)表 47
3.2 HiveQL數(shù)據(jù)操作 53
3.2.1 向管理表中裝載數(shù)據(jù) 54
3.2.2 經(jīng)查詢語句向表中插入數(shù)據(jù) 54
3.2.3 單個查詢語句中創(chuàng)建表并加載數(shù)據(jù) 55
3.2.4 導(dǎo)入數(shù)據(jù) 55
3.2.5 導(dǎo)出數(shù)據(jù) 56
3.3 本章總結(jié) 56
3.4 本章習(xí)題 57
第04章 HiveQL數(shù)據(jù)查詢基礎(chǔ) 58
4.1 HiveQL數(shù)據(jù)查詢語句 58
4.1.1 SELECT語句 58
4.1.2 WHERE語句 59
4.1.3 GROUP BY語句 60
4.1.4 HAVING分組篩選 61
4.1.5 ORDER BY 語句和
SORT BY語句 62
4.2 HiveQL連接查詢語句 64
4.3 本章總結(jié) 70
4.4 本章習(xí)題 70
第05章 HiveQL數(shù)據(jù)查詢進(jìn)階 71
5.1 Hive內(nèi)置函數(shù) 71
5.1.1 數(shù)學(xué)函數(shù) 72
5.1.2 字符函數(shù) 74
5.1.3 轉(zhuǎn)換函數(shù) 76
5.1.4 日期函數(shù) 76
5.1.5 條件函數(shù) 77
5.1.6 聚合函數(shù) 77
5.2 Hive構(gòu)建搜索引擎日志數(shù)據(jù)分析系統(tǒng) 79
5.2.1 數(shù)據(jù)預(yù)處理(Linux環(huán)境) 79
5.2.2 基于Hive構(gòu)建日志數(shù)據(jù)的數(shù)據(jù)倉庫 81
5.2.3 數(shù)據(jù)分析需求(1):條數(shù)統(tǒng)計(jì) 84
5.2.4 數(shù)據(jù)分析需求(2):關(guān)鍵詞分析 84
5.2.5 數(shù)據(jù)分析需求(3):UID分析 85
5.2.6 數(shù)據(jù)分析需求(4):用戶行為
分析 86
5.3 Sqoop應(yīng)用與開發(fā) 88
5.3.1 Sqoop簡介 89
5.3.2 Sqoop安裝部署 89
5.3.3 Sqoop將Hive表中的數(shù)據(jù)導(dǎo)入MySQL 91
5.4 本章總結(jié) 96
5.5 本章習(xí)題 96
第06章 Hive數(shù)據(jù)庫對象與
用戶自定義函數(shù) 97
6.1 Hive視圖 97
6.1.1 創(chuàng)建視圖 98
6.1.2 查看視圖 98
6.1.3 視圖應(yīng)用實(shí)戰(zhàn) 99
6.1.4 刪除視圖 100
6.2 Hive分桶表 100
6.2.1 創(chuàng)建表 101
6.2.2 插入數(shù)據(jù) 101
6.3 Hive用戶自定義函數(shù) 102
6.3.1 用戶自定義函數(shù)簡介 102
6.3.2 UDF應(yīng)用開發(fā) 103
6.4 Hive用戶自定義聚合函數(shù) 105
6.4.1 用戶自定義聚合函數(shù)簡介 105
6.4.2 UDAF應(yīng)用開發(fā) 105
6.5 本章總結(jié) 108
6.6 本章習(xí)題 108
第07章 Azkaban任務(wù)調(diào)度器 109
7.1 Azkaban簡介 109
7.1.1 Azkaban基本原理 110
7.1.2 Azkaban核心組件 111
7.2 Azkaban安裝部署 112
7.2.1 準(zhǔn)備工作 112
7.2.2 安裝MySQL 112
7.2.3 配置MySQL 113
7.2.4 配置AzkabanWebServer 114
7.2.5 啟動AzkabanWebServer
服務(wù)器 116
7.2.6 配置AzkabanExecutorServer 116
7.2.7 啟動AzkabanExecutorServer
執(zhí)行服務(wù)器 117
7.2.8 登錄訪問WebServer并創(chuàng)建
工作流調(diào)度項(xiàng)目 117
7.3 Hadoop作業(yè)的設(shè)置與書寫 119
7.4 Hive作業(yè)的設(shè)置與書寫 128
7.5 本章總結(jié) 130
7.6 本章習(xí)題 131
第08章 電商推薦系統(tǒng)開發(fā)實(shí)戰(zhàn) 132
8.1 構(gòu)建數(shù)據(jù)倉庫 132
8.1.1 創(chuàng)建數(shù)據(jù)倉庫 133
8.1.2 創(chuàng)建原始數(shù)據(jù)表 134
8.1.3 加載數(shù)據(jù)到數(shù)據(jù)倉庫 136
8.1.4 驗(yàn)證數(shù)據(jù)結(jié)果 136
8.2 數(shù)據(jù)清洗 139
8.2.1 創(chuàng)建臨時表 139
8.2.2 數(shù)據(jù)清洗詳細(xì)步驟 140
8.2.3 驗(yàn)證清洗 143
8.3 推薦算法實(shí)現(xiàn) 144
8.3.1 Mahout安裝部署 144
8.3.2 itembase協(xié)同過濾推薦算法 147
8.3.3 路徑準(zhǔn)備 148
8.3.4 運(yùn)行推薦算法 150
8.3.5 查看推薦結(jié)果 151
8.4 數(shù)據(jù)ETL 152
8.4.1 獲取數(shù)據(jù) 152
8.4.2 創(chuàng)建數(shù)據(jù)庫和表 152
8.4.3 加載數(shù)據(jù) 153
8.4.4 驗(yàn)證ETL過程 153
8.5 本章總結(jié) 155
8.6 本章習(xí)題 156
第09章 汽車銷售數(shù)據(jù)分析
系統(tǒng)實(shí)戰(zhàn)開發(fā) 157
9.1 數(shù)據(jù)概況 157
9.2 項(xiàng)目實(shí)戰(zhàn) 158
9.2.1 構(gòu)建數(shù)據(jù)倉庫 158
9.2.2 創(chuàng)建原始數(shù)據(jù)表 159
9.2.3 加載數(shù)據(jù)到數(shù)據(jù)倉庫 161
9.2.4 驗(yàn)證數(shù)據(jù)結(jié)果 161
9.2.5 統(tǒng)計(jì)乘用車輛和商用車輛的
銷售數(shù)量和銷售數(shù)量占比 162
9.2.6 統(tǒng)計(jì)山西省2013年每個月的
汽車銷售數(shù)量的比例 162
9.2.7 統(tǒng)計(jì)買車的男女比例及男女對車的
品牌的選擇 163
9.2.8 統(tǒng)計(jì)車的所有權(quán)、車輛型號和
車輛類型 165
9.2.9 統(tǒng)計(jì)不同類型車在一個月(對應(yīng)一段
時間,如每月或每年)的總銷量 167
9.2.10 通過不同類型(品牌)車銷售情況,
來統(tǒng)計(jì)發(fā)動機(jī)型號和燃料種類 168
9.2.11 統(tǒng)計(jì)五菱某一年每月的銷售量 168
9.3 本章總結(jié) 169
9.4 本章習(xí)題 169
第 10章 新浪微博數(shù)據(jù)分析系統(tǒng)
實(shí)戰(zhàn)開發(fā) 170
10.1 數(shù)據(jù)概況 170
10.1.1 數(shù)據(jù)參數(shù) 170
10.1.2 數(shù)據(jù)類型 171
10.2 項(xiàng)目實(shí)戰(zhàn) 172
10.2.1 組織數(shù)據(jù) 172
10.2.2 統(tǒng)計(jì)需求 174
10.2.3 特殊需求 179
10.2.4 數(shù)據(jù)ETL 182
10.3 本章總結(jié) 184
10.4 本章習(xí)題 184
展開全部

大數(shù)據(jù)Hive離線計(jì)算開發(fā)實(shí)戰(zhàn) 作者簡介

楊力,原北大青鳥學(xué)術(shù)部經(jīng)理兼教學(xué)總監(jiān),中信國安創(chuàng)客霸王課特聘高級講師,現(xiàn)任北京兄弟連IT教育大數(shù)據(jù)專家級講師,一直從事大數(shù)據(jù)方向,是大數(shù)據(jù)領(lǐng)域?qū)<遥Y深顧問,致力于大數(shù)據(jù)技術(shù)的推廣與普及,擁有Apache Hadoop、Oracle OCM等多項(xiàng)產(chǎn)品的技術(shù)認(rèn)證證書。曾創(chuàng)立國內(nèi)首家大數(shù)據(jù)校企合作大數(shù)據(jù)實(shí)驗(yàn)室平臺,現(xiàn)已推廣至全國高校,助力高校大數(shù)據(jù)學(xué)科的建設(shè)和研究,對國內(nèi)大中型企業(yè)的信息系統(tǒng)設(shè)計(jì)與實(shí)施有豐富的實(shí)踐經(jīng)驗(yàn)。曾在一線任職新奧集團(tuán)大數(shù)據(jù)平臺首席架構(gòu)師,京東萬象大數(shù)據(jù)平臺締造人之一,二六三網(wǎng)絡(luò)通信反垃圾郵件系統(tǒng)數(shù)據(jù)平臺項(xiàng)目經(jīng)理、中信銀行網(wǎng)銀數(shù)據(jù)平臺技術(shù)經(jīng)理等要職。

商品評論(0條)
暫無評論……
書友推薦
本類暢銷
返回頂部
中圖網(wǎng)
在線客服
主站蜘蛛池模板: 东莞爱加真空科技有限公司-进口真空镀膜机|真空镀膜设备|Polycold维修厂家 | 招商帮-一站式网络营销服务|搜索营销推广|信息流推广|短视视频营销推广|互联网整合营销|网络推广代运营|招商帮企业招商好帮手 | 无锡网站建设_企业网站定制-网站制作公司-阿凡达网络 | 实验室隔膜泵-无油防腐蚀隔膜泵-耐腐蚀隔膜真空泵-杭州景程仪器 电杆荷载挠度测试仪-电杆荷载位移-管桩测试仪-北京绿野创能机电设备有限公司 | 提升海外网站流量,增加国外网站访客UV,定制海外IP-访客王 | 粘度计维修,在线粘度计,二手博勒飞粘度计维修|收购-天津市祥睿科技有限公司 | 水稻烘干机,小麦烘干机,大豆烘干机,玉米烘干机,粮食烘干机_巩义市锦华粮食烘干机械制造有限公司 水环真空泵厂家,2bv真空泵,2be真空泵-淄博真空设备厂 | crm客户关系管理系统,销售管理系统,crm系统,在线crm,移动crm系统 - 爱客crm | 一体化净水器_一体化净水设备_一体化水处理设备-江苏旭浩鑫环保科技有限公司 | 屏蔽泵厂家,化工屏蔽泵_维修-淄博泵业| 对辊破碎机_四辊破碎机_双齿辊破碎机_华盛铭重工 | 茅茅虫AI论文写作助手-免费AIGC论文查重_写毕业论文降重 | 石家庄律师_石家庄刑事辩护律师_石家庄取保候审-河北万垚律师事务所 | 自恢复保险丝_贴片保险丝_力特保险丝_Littelfuse_可恢复保险丝供应商-秦晋电子 | 密集架|电动密集架|移动密集架|黑龙江档案密集架-大量现货厂家销售 | 国际金融网_每日财经新资讯网 | 南京欧陆电气股份有限公司-风力发电机官网 | 衬氟止回阀_衬氟闸阀_衬氟三通球阀_衬四氟阀门_衬氟阀门厂-浙江利尔多阀门有限公司 | 压砖机、液压制砖机、静压砖机、环保砖机生产厂家—杜甫机械 | 外观设计_设备外观设计_外观设计公司_产品外观设计_机械设备外观设计_东莞工业设计公司-意品深蓝 | 河南彩印编织袋,郑州饲料编织袋定制,肥料编织袋加工厂-盛军塑业 河南凯邦机械制造有限公司 | 湖南长沙商标注册专利申请,长沙公司注册代理记账首选美创! | 塑胶跑道施工-硅pu篮球场施工-塑胶网球场建造-丙烯酸球场材料厂家-奥茵 | 对夹式止回阀_对夹式蝶形止回阀_对夹式软密封止回阀_超薄型止回阀_不锈钢底阀-温州上炬阀门科技有限公司 | 欧景装饰设计工程有限公司-无锡欧景装饰官网 | 济南ISO9000认证咨询代理公司,ISO9001认证,CMA实验室认证,ISO/TS16949认证,服务体系认证,资产管理体系认证,SC食品生产许可证- 济南创远企业管理咨询有限公司 郑州电线电缆厂家-防火|低压|低烟无卤电缆-河南明星电缆 | 纯化水设备-纯水设备-超纯水设备-[大鹏水处理]纯水设备一站式服务商-东莞市大鹏水处理科技有限公司 | 济南侦探调查-济南调查取证-山东私家侦探-山东白豹调查咨询公司 密集架|电动密集架|移动密集架|黑龙江档案密集架-大量现货厂家销售 | 嘉兴恒升声级计-湖南衡仪声级计-杭州爱华多功能声级计-上海邦沃仪器设备有限公司 | 头条搜索极速版下载安装免费新版,头条搜索极速版邀请码怎么填写? - 欧远全 | 卫生纸复卷机|抽纸机|卫生纸加工设备|做卫生纸机器|小型卫生纸加工需要什么设备|卫生纸机器设备多少钱一台|许昌恒源纸品机械有限公司 | 万濠投影仪_瑞士TRIMOS高度仪_尼康投影仪V12BDC|量子仪器 | 电销卡 防封电销卡 不封号电销卡 电话销售卡 白名单电销卡 电销系统 外呼系统 | 上海网站建设-上海网站制作-上海网站设计-上海做网站公司-咏熠软件 | 浙江浩盛阀门有限公司 | 数控专用机床,专用机床,自动线,组合机床,动力头,自动化加工生产线,江苏海鑫机床有限公司 | 济南拼接屏_山东液晶拼接屏_济南LED显示屏—维康国际官网 | 上海乾拓贸易有限公司-日本SMC电磁阀_德国FESTO电磁阀_德国FESTO气缸 | 运动木地板价格,篮球馆体育运动木地板生产厂家_欧氏地板 | 智能风向风速仪,风速告警仪,数字温湿仪,综合气象仪(气象五要素)-上海风云气象仪器有限公司 | 碳纤维布-植筋胶-灌缝胶-固特嘉加固材料公司 |