Spark快速數(shù)據(jù)處理

譯者序
作者簡(jiǎn)介
前言
第1章　安裝Spark以及構(gòu)建Spark集群 / 1
1.1　單機(jī)運(yùn)行Spark / 4
1.2　在EC2上運(yùn)行Spark / 5
1.3　在ElasticMapReduce上部署Spark / 11
1.4　用Chef(opscode)部署Spark / 12
1.5　在Mesos上部署Spark / 14
1.6　在Yarn上部署Spark / 15
1.7　通過(guò)SSH部署集群 / 16
1.8　鏈接和參考 / 21
1.9　小結(jié) / 21
第2章　Spark shell的使用 / 23
2.1　加載一個(gè)簡(jiǎn)單的text文件 / 24
2.2　用Spark shell運(yùn)行邏輯回歸 / 26
2.3　交互式地從S3加載數(shù)據(jù) / 28
2.4　小結(jié) / 30
第3章　構(gòu)建并運(yùn)行Spark應(yīng)用 / 31
3.1　用sbt構(gòu)建Spark作業(yè) / 32
3.2　用Maven構(gòu)建Spark作業(yè) / 36
3.3　用其他工具構(gòu)建Spark作業(yè) / 39
3.4　小結(jié) / 39
第4章　創(chuàng)建SparkContext / 41
4.1　Scala / 43
4.2　Java / 43
4.3　Java和Scala共享的API / 44
4.4　Python / 45
4.5　鏈接和參考 / 45
4.6　小結(jié) / 46
第5章　加載與保存數(shù)據(jù) / 47
5.1　RDD / 48
5.2　加載數(shù)據(jù)到RDD中 / 49
5.3　保存數(shù)據(jù) / 54
5.4　連接和參考 / 55
5.5　小結(jié) / 55
第6章　操作RDD / 57
6.1　用Scala和Java操作RDD / 58
6.2　用Python操作RDD / 79
6.3　鏈接和參考 / 83
6.4　小結(jié) / 84
第7章　Shark-Hive和Spark的綜合運(yùn)用 / 85
7.1　為什么用Hive/Shark / 86
7.2　安裝Shark / 86
7.3　運(yùn)行Shark / 88
7.4　加載數(shù)據(jù) / 88
7.5　在Spark程序中運(yùn)行HiveQL查詢 / 89
7.6　鏈接和參考 / 92
7.7　小結(jié) / 93
第8章　測(cè)試 / 95
8.1　用Java和Scala測(cè)試 / 96
8.2　用Python測(cè)試 / 103
8.3　鏈接和參考 / 104
8.4　小結(jié) / 105
第9章　技巧和竅門 / 107
9.1　日志位置 / 108
9.2　并發(fā)限制 / 108
9.3　內(nèi)存使用與垃圾回收 / 109
9.4　序列化 / 110
9.5　IDE集成環(huán)境 / 111
9.6　Spark與其他語(yǔ)言 / 112
9.7　安全提示 / 113
9.8　郵件列表 / 113
9.9　鏈接和參考 / 113
9.10　小結(jié) / 114