掃一掃
關注中圖網
官方微博
本類五星書更多>
-
>
全國計算機等級考試最新真考題庫模擬考場及詳解·二級MSOffice高級應用
-
>
決戰行測5000題(言語理解與表達)
-
>
軟件性能測試.分析與調優實踐之路
-
>
第一行代碼Android
-
>
JAVA持續交付
-
>
EXCEL最強教科書(完全版)(全彩印刷)
-
>
深度學習
Spark原理.機制及應用 版權信息
- ISBN：9787111529286
- 條形碼：9787111529286 ; 978-7-111-52928-6
- 裝幀：暫無
- 冊數：暫無
- 重量：暫無
- 所屬分類：>>
Spark原理.機制及應用 本書特色
本書是一本以spark1.4為基礎，詳細介紹了spark技術的概況、內部機制和企業界的應用情況。作者結合國內外眾多資料和項目經驗，力求深入淺出地講解spark技術的生態應用和發展狀況，此外還選取了sparksummit中的典型案例進行解析，為讀者全面展現spark技術在企業界的應用情況。本書適合spark技術初學者、spark技術愛好者、spark運維工程師和開源軟件愛好者，也可以作為相關培訓學校和大專院校相關專業的教學用書。
Spark原理.機制及應用 內容簡介
spark是一個高效的分布式計算系統，相比hadoop，它在性能上比hadoop要高100倍。spark提供比hadoop更上層的api，同樣的算法在spark中實現往往只有hadoop的1/10或者1/100的長度。spark較大的集群來自騰訊――8000個節點，而單個較大的job分別是阿里巴巴和databricks――1pb，震撼人心！同時，截止2015年6月，spark的contributor比2014年漲了3倍，達到730人；總代碼行數也比2014年漲了2倍多，達到40萬行。本書是國內（包括github社區）較新的基于spark 1.4版本的技術書籍，涵蓋spark技術的環境搭建、rdd實操應用、內部機制、調優和企業應用等內容，具體如下。1）基于intellij idea的運行、開發和編譯環境的詳細搭建過程。2）詳細介紹spark技術基礎概念和應用實踐。3）基于spark 1.4官方文檔對spark四大應用框架進行解讀。4）基于源碼深入剖析spark的資源調度、任務調度和shuffle過程。5）深入解讀近兩年spark峰會和國內企業分享的典型應用案例。本書的編寫系統完整，力爭以通俗易懂的語言全方位精細解讀spark技術，本書主要針對大數據技術初學者，包括但不限于大學生、研究生和工程師。此外，spark應用開發人員、運維工程師和開源軟件愛好者也可以將本書作為參考用書。本書共分為概念、開發、機制和應用四篇，概念篇介紹spark的背景概念和環境配置方法，開發篇介紹了spark核心開發、四大應用框架和調優策略，機制篇則對spark的rdd、調度和shuffle等機制進行解讀，應用篇針對spark在業界的典型應用進行闡述。
Spark原理.機制及應用 目錄
目 錄前言**篇 概 念 篇第1章 spark概述21.1 spark初見21.1.1 spark的發展史及近況21.1.2 spark的特點51.1.3 spark的作用61.1.4 spark的體系結構61.1.5 spark的發展趨勢61.2 spark框架71.2.1 批處理框架71.2.2 流處理框架81.3 spark的生態系統81.4 spark的數據存儲111.5 本章小結11第2章 spark環境配置122.1 spark運行環境配置122.1.1 先決條件122.1.2 下載與運行 spark132.1.3 使用交互式 shell142.1.4 搭建sparkstandalone集群162.2 spark開發環境配置182.2.1 spark獨立應用程序182.2.2 構建ide開發環境242.3 spark編譯環境配置292.3.1 使用maven編譯項目源碼302.3.2 使用idea搭建源碼編譯與閱讀環境312.4 本章小結35第二篇 開 發 篇第3章 spark核心開發373.1 spark編程模型概述373.2 sparkcontext383.2.1 sparkcontext的作用383.2.2 sparkcontext的創建383.2.3 使用shell413.2.4 應用實踐413.3 rdd簡介423.3.1 rdd創建423.3.2 rdd轉換操作433.3.3 rdd動作操作443.3.4 rdd惰性計算443.3.5 rdd持久化443.3.6 rdd檢查點453.4 共享變量453.4.1 廣播變量453.4.2 累加器463.5 spark核心開發實踐463.5.1 單值型trasnformation算子463.5.2 鍵值對型transformation算子583.5.3 action算子643.6 本章小結72第4章 spark四大應用技術框架734.1 spark sql734.1.1 spark sql入門734.1.2 數據源754.1.3 性能調優814.1.4 分布式sql引擎824.1.5 shark遷移至sparksql指南824.1.6 hive的兼容性834.1.7 spark sql數據類型854.2 spark streaming864.2.1 spark streaming簡介874.2.2 入門實例874.2.3 基本概念894.3 spark graphx974.3.1 spark graphx簡介974.3.2 屬性圖984.3.3 圖操作1004.3.4 pregel api1084.3.5 圖構造器1104.3.6 頂點與邊相關rdd1114.3.7 *優化表示1134.3.8 圖算法1144.3.9 example1164.4 spark mllib1164.4.1 spark mllib簡介1164.4.2 數據類型1174.4.3 基本統計分析1214.4.4 分類與回歸1234.4.5 協同過濾1364.4.6 聚類1384.4.7 降維1394.4.8 特征提取與轉換1414.4.9 頻繁模式挖掘1464.4.10 *優化算法1474.4.11 導出pmml模式1494.5 sparkr1504.5.1 sparkr dataframe1504.5.2 dataframe的相關操作1524.5.3 從sparkr運行sql查詢153第5章 spark系統配置與調優1545.1 spark運行監控1545.2 spark配置參數1585.2.1 應用屬性1595.2.2 運行環境屬性1595.2.3 shuffle操作
展開全部
Spark原理.機制及應用 作者簡介
劉馳，博士，現任北京理工大學軟件學院教授，軟件服務工程系系主任。入選“北京理工大學杰出中青年支持與發展計劃”。主持了國家自然科學基金、工信部電子商務集成試點工程等多項國家省部級重點項目。分別于清華大學和英國帝國理工學院獲得學士和博士學位，后歷任德國電信研究院（柏林）博士后研究員、美國IBM TJ Watson研究中心研究員和IBM中國研究院研究主管。研究方向為：物聯網、云計算和大數據技術。
書友推薦
- >
朝聞道
- >
唐代進士錄
- >
李白與唐代文化
- >
羅曼·羅蘭讀書隨筆-精裝
- >
隨園食單
- >
上帝之肋:男人的真實旅程
- >
有舍有得是人生
- >
月亮虎
本類暢銷
