-
>
全國計算機等級考試最新真考題庫模擬考場及詳解·二級MSOffice高級應(yīng)用
-
>
決戰(zhàn)行測5000題(言語理解與表達)
-
>
軟件性能測試.分析與調(diào)優(yōu)實踐之路
-
>
第一行代碼Android
-
>
JAVA持續(xù)交付
-
>
EXCEL最強教科書(完全版)(全彩印刷)
-
>
深度學(xué)習(xí)
大數(shù)據(jù)技術(shù) 版權(quán)信息
- ISBN:9787547860984
- 條形碼:9787547860984 ; 978-7-5478-6098-4
- 裝幀:70g膠版紙
- 冊數(shù):暫無
- 重量:暫無
- 所屬分類:>
大數(shù)據(jù)技術(shù) 本書特色
適讀人群 :數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)學(xué)科專業(yè)的高等院校師生,從事各個領(lǐng)域大數(shù)據(jù)和數(shù)字化轉(zhuǎn)型的工程技術(shù)人員1. 概況 數(shù)據(jù)、技術(shù)、應(yīng)用,大數(shù)據(jù)三要素。信息化技術(shù)是生產(chǎn)數(shù)據(jù)的技術(shù),大數(shù)據(jù)技術(shù)則是開發(fā)數(shù)據(jù)的技術(shù)。本書完整地介紹了數(shù)據(jù)開發(fā)利用的技術(shù)體系,包括大數(shù)據(jù)計算、管理、安全、可視化、流通、挖掘分析等一系列技術(shù)。 2.特色 (1)全面介紹了數(shù)據(jù)開發(fā)利用技術(shù),還特別對數(shù)據(jù)產(chǎn)品生產(chǎn)技術(shù)進行了闡述,這是數(shù)據(jù)開發(fā)利用過程的必然選擇,也是數(shù)據(jù)市場建設(shè)發(fā)展的必然選擇。 (2)針對數(shù)字經(jīng)濟發(fā)展提供了系統(tǒng)性的數(shù)據(jù)開發(fā)利用技術(shù)知識。
大數(shù)據(jù)技術(shù) 內(nèi)容簡介
本書系統(tǒng)地介紹大數(shù)據(jù)的概念、原理、技術(shù)和應(yīng)用。內(nèi)容包括認識和理解大數(shù)據(jù);大數(shù)據(jù)的相關(guān)技術(shù)(大數(shù)據(jù)獲取技術(shù)、大數(shù)據(jù)存儲管理技術(shù)和大數(shù)據(jù)可視化技術(shù)等);大數(shù)據(jù)計算框架;大數(shù)據(jù)挖掘任務(wù)(關(guān)聯(lián)分析、聚類分析、分類分析、演變分析、特異群組分析和異常分析);大數(shù)據(jù)應(yīng)用實現(xiàn);大數(shù)據(jù)挖掘工具等。本書對大數(shù)據(jù)技術(shù)進行了全面而細致的定義和歸納,并將向讀者展現(xiàn)該領(lǐng)域近期新研究熱點和技術(shù)。關(guān)于大數(shù)據(jù)應(yīng)用實現(xiàn)章節(jié)的內(nèi)容將采用本套叢書編委們實際主持和完成的大數(shù)據(jù)項目為實際案例,闡述大數(shù)據(jù)應(yīng)用實現(xiàn)過程中的問題、解決方案和取得的成果。
大數(shù)據(jù)技術(shù) 目錄
第1章 緒論 1
1.1 大數(shù)據(jù)的技術(shù)挑戰(zhàn) 1
1.1.1 大數(shù)據(jù)的"大"1
1.1.2 數(shù)據(jù)"大"的技術(shù)挑戰(zhàn) 3
1.1.3 大數(shù)據(jù)決策的技術(shù)挑戰(zhàn) 5
1.1.4 數(shù)據(jù)安全的技術(shù)問題 7
1.2 大數(shù)據(jù)計算 8
1.2.1 大數(shù)據(jù)文件 9
1.2.2 大數(shù)據(jù)計算框架 10
1.2.3 大數(shù)據(jù)管理 11
1.3 數(shù)據(jù)開發(fā) 12
1.3.1 數(shù)據(jù)獲取 12
1.3.2 數(shù)據(jù)分析 13
1.3.3 數(shù)據(jù)可視化 14
1.4 數(shù)據(jù)產(chǎn)業(yè)支持 15
1.4.1 數(shù)據(jù)產(chǎn)業(yè)需要的技術(shù)支持 15
1.4.2 數(shù)據(jù)資產(chǎn)化 16
1.4.3 數(shù)據(jù)產(chǎn)品及其質(zhì)量 17
1.4.4 數(shù)據(jù)流通與安全 18
1.5 小結(jié) 19
參考文獻 19
第 2章 大數(shù)據(jù)計算 21
2.1 數(shù)據(jù)訪問21
2.1.1 安全模型 21
2.1.2 訪問控制策略 23
2.1.3 訪問控制與授權(quán) 24
2.1.4 訪問控制與審計 24
2.2 分布式文件系統(tǒng) 24
2.2.1 GoogleFS 25
2.2.2 HDFS 27
2.2.3 GlusterFS 28
2.2.4 CephFS 29
2.3 大數(shù)據(jù)計算框架 30
2.3.1 批處理 30
2.3.2 流數(shù)據(jù)計算 38
2.3.3 增量計算模型 41
2.3.4 新興計算框架 44
2.3.5 大數(shù)據(jù)計算框架的發(fā)展 46
2.4 多地計算異地計算模式 48
2.4.1 概念48
2.4.2 計算模型 49
2.4.3 特點 49 2.5 小結(jié) 49
參考文獻 49
第 3章 大數(shù)據(jù)管理 51
3.1 概述 51
3.2 分布式文件系統(tǒng) HDFS 52
3.2.1 前提和設(shè)計目標(biāo) 53
3.2.2 數(shù)據(jù)塊 53
3.2.3 HDFS架構(gòu) 54
3.2.4 HDFS容錯機制 54
3.3 列式存儲格式 Parquet 55
3.3.1 行存儲與列存儲文件格式 55
3.3.2 Parquet 概述 56
3.3.3 數(shù)據(jù)模型 56
3.3.4 Parquet 文件的存儲格式 57
3.4 NOSOL 58
3.4.1 鍵值對數(shù)據(jù)庫 58
3.4.2 基于列族的數(shù)據(jù)庫 59
3.4.3 基于文檔的數(shù)據(jù)庫 59
3.4.4 基于圖的數(shù)據(jù)庫 60
3.5 鍵值數(shù)據(jù)庫 Redis 60
3.5.1 Redis簡介 60
3.5.2 Redis數(shù)據(jù)類型 61 3.5.3 Redis事務(wù) 63
3.5.4 Redis 持久化機制 63
3.6 HBase 63
3.6.1 HBase簡介 63
3.6.2 HBase訪問接口 64
3.6.3 HBase數(shù)據(jù)模型 64
3.6.4 HBase系統(tǒng)架構(gòu) 65
3.6.5 HBase存儲格式 66
3.7 Dynamo67
3.7.1 Dynamo系統(tǒng)設(shè)計假設(shè)和前提 67
3.7.2 Dynamo數(shù)據(jù)分布策略 68
3.7.3 CAP原理 68
3.7.4 Dynamo 的一致性實現(xiàn)技術(shù) 69
3.7.5 Dynamo系統(tǒng)訪問接口 69
3.8 Cassandra 69
3.9 MongoDB 70
3.9.1 MongoDB簡介 70
3.9.2 MongoDB數(shù)據(jù)模型70
3.9.3 MongoDB基礎(chǔ)操作71
3.9.4 MongoDB聚集操作 73
3.9.5 MongoDB復(fù)制機制75
3.9.6 MongoDB分片機制 76
3.10 Neo4j 76
3.10.1 Neo4j簡介 76
3.10.2 Neo4j基礎(chǔ)概念 77
3.10.3 NeO4j的Cypher查詢語言和模式 78
......
大數(shù)據(jù)技術(shù) 作者簡介
朱揚勇,復(fù)旦大學(xué)計算機科學(xué)技術(shù)學(xué)院教授、學(xué)術(shù)委員會主任,上海市數(shù)據(jù)科學(xué)重點實驗室主任,上海市政府信息化專家委員會專家,中國計算機學(xué)會大數(shù)據(jù)專家委員會專家,美國馬里蘭大學(xué)客座教授。從事數(shù)據(jù)領(lǐng)域研究25年,是很早一批從事數(shù)據(jù)挖掘研究的學(xué)者,是數(shù)據(jù)科學(xué)研究的主要倡導(dǎo)者之一。主持過國家自然科學(xué)基金、國家863計劃項目、上海市科委重點等多項數(shù)據(jù)挖掘領(lǐng)域的研究課題,曾獲上海市科技進步一、二、三等獎。相關(guān)研究成果在具有影響力的外期刊或會議上發(fā)表論文100余篇,出版專著2本,教材3本。2009年發(fā)表了數(shù)據(jù)科學(xué)論文Data Explosion, Data Nature 等。
- >
伯納黛特,你要去哪(2021新版)
- >
人文閱讀與收藏·良友文學(xué)叢書:一天的工作
- >
我從未如此眷戀人間
- >
中國人在烏蘇里邊疆區(qū):歷史與人類學(xué)概述
- >
上帝之肋:男人的真實旅程
- >
名家?guī)阕x魯迅:故事新編
- >
企鵝口袋書系列·偉大的思想20:論自然選擇(英漢雙語)
- >
小考拉的故事-套裝共3冊