Spark核心技術(shù)與高級(jí)應(yīng)用是Spark領(lǐng)域少有的專注于核心原理與深度應(yīng)用的著作，由科大訊飛和百分點(diǎn)科技的4位大數(shù)據(jù)專家撰寫。不僅細(xì)致介紹了Spark的程序開發(fā)、編程模型、作業(yè)執(zhí)行解析等基礎(chǔ)知識(shí)，而且還深度講解了Spark SQL、Spark ML、Spark Streaming等大量內(nèi)部模塊和周邊模塊的原理與使用。除此之外，還從管理和性能優(yōu)化的角度對(duì)Spark進(jìn)行了深入探索。

本書分為四大部分，共計(jì)20章：
基礎(chǔ)篇（第1～10章），詳細(xì)說明什么是Spark、Spark的重要擴(kuò)展、Spark的部署和運(yùn)行、Spark程序開發(fā)、Spark編程模型，以及Spark作業(yè)執(zhí)行解析。通過閱讀本篇，讀者可以構(gòu)建更加清晰的Spark基礎(chǔ)知識(shí)體系，進(jìn)一步加深對(duì)大數(shù)據(jù)核心技術(shù)的理解。
實(shí)戰(zhàn)篇（第11～14章），本書重點(diǎn)篇章，重點(diǎn)講解Spark SQL與DataFrame、Spark Streaming、Spark MLlib與Spark ML、GraphX，以及基于以上內(nèi)容在大數(shù)據(jù)分析、系統(tǒng)資源統(tǒng)計(jì)、LR模型、二級(jí)鄰居關(guān)系圖獲取方面的實(shí)例。通過體察本篇的內(nèi)容，讀者可以掌握如何在實(shí)踐中應(yīng)用Spark，優(yōu)化自身的應(yīng)用場景，完善相應(yīng)的解決方案。
高級(jí)篇（第15～18章），深入講解Spark調(diào)度管理、存儲(chǔ)管理、監(jiān)控管理、性能調(diào)優(yōu)。本篇的內(nèi)容，為合理利用資源、有效進(jìn)行資源監(jiān)控、保障運(yùn)行環(huán)境的穩(wěn)定、平臺(tái)性能調(diào)優(yōu)、推進(jìn)企業(yè)級(jí)的大數(shù)據(jù)平臺(tái)管理提供了參考依據(jù)。
擴(kuò)展篇（第19～20章），介紹Jobserver和Tachyon在Spark上的使用情況。通過本篇，延續(xù)基礎(chǔ)、實(shí)戰(zhàn)、高級(jí)等環(huán)節(jié)，并進(jìn)一步擴(kuò)展，更好地管理好Job、更有效地利用內(nèi)存，為讀者拓展出更深入、更全面的思路。

為了讓讀者從更高的角度認(rèn)識(shí)與應(yīng)用大數(shù)據(jù)，從《道德經(jīng)》和《莊子》各精選10句，引導(dǎo)大家以老莊哲學(xué)的思考方式來認(rèn)識(shí)大數(shù)據(jù)的內(nèi)涵。本書不只是一本技術(shù)書，更是一本大數(shù)據(jù)哲學(xué)的思考之作。

目錄

第1章　Spark簡介 2
第2章　Spark部署和運(yùn)行 11
第3章　Spark程序開發(fā) 27
第4章　編程模型 44
第5章　作業(yè)執(zhí)行解析 59
第6章　Spark SQL與DataFrame 73
第7章　深入了解Spark Streaming 97
第8章　Spark MLlib與機(jī)器學(xué)習(xí) 116
第9章　GraphX圖計(jì)算框架與應(yīng)用 148
第10章　SparkR（R on Spark） 167
第11章　大數(shù)據(jù)分析系統(tǒng) 188
第12章　系統(tǒng)資源分析平臺(tái) 200
第13章　在Spark上訓(xùn)練LR模型 215
第14章　獲取二級(jí)鄰居關(guān)系圖 225
第15章　調(diào)度管理 238
第16章　存儲(chǔ)管理 254
第17章　監(jiān)控管理 264
第18章　性能調(diào)優(yōu) 273
第19章　Spark-jobserver實(shí)踐 282
第20章　Spark Tachyon實(shí)戰(zhàn) 292