關(guān)于我們
書單推薦
新書推薦

Spark性能調(diào)優(yōu)與原理分析

Spark性能調(diào)優(yōu)與原理分析

定  價:69.9 元

        

  • 作者:呂云翔 郭宇光
  • 出版時間:2020/9/1
  • ISBN:9787302555094
  • 出 版 社:清華大學出版社
  • 中圖法分類:TP274 
  • 頁碼:304
  • 紙張:
  • 版次:1
  • 開本:
9
7
5
8
5
7
5
3
0
0
9
2
4
本書主要介紹了Spark運行原理及性能調(diào)優(yōu)的相關(guān)實踐,
從Spark框架內(nèi)部及外部運行環(huán)境等不同角度分析Spark性能調(diào)優(yōu)的過程。
第1章介紹了Linux系統(tǒng)中各種監(jiān)控工具的使用,對CPU、內(nèi)存、網(wǎng)絡(luò)、I/O等方面進行介紹,
并提供了集群監(jiān)控報警的解決方案。
第2章介紹了Java虛擬機(JVM)的基本知識、垃圾回收機制,以及對JVM運行狀態(tài)的監(jiān)控。
第3章和第4章介紹了Spark內(nèi)核架構(gòu)、任務(wù)運行的流程,對各個組件的實現(xiàn)進行了深入的剖析。尤其在Spark
內(nèi)存管理、存儲原理、Shuffle階段,詳細介紹了每個實現(xiàn)的細節(jié),這些實現(xiàn)的細節(jié)為后期Spark性能調(diào)優(yōu)提供了參數(shù)調(diào)節(jié)的理論依據(jù)。
第5章介紹了Spark性能調(diào)優(yōu)的詳細實踐過程,首先介紹了SparkUI和Spark日志的使用,通過這兩項可以迅速定位瓶頸問題;
然后根據(jù)定位的問題,分別從程序調(diào)優(yōu)、資源調(diào)優(yōu)、Shuffle過程調(diào)優(yōu)等不同角度介紹了調(diào)優(yōu)的實踐過程。
本書在理論部分提供了大量的概念原理圖、運行流程圖,在實踐部分提供了大量的示例。讓讀者對性能的調(diào)節(jié)不
僅停留在參數(shù)調(diào)節(jié)的層面,而且能理解每個參數(shù)的修改對程序的內(nèi)部運行產(chǎn)生
的影響。
本書既可以作為Spark開發(fā)者的參考用書,也可以作為高等院校計算機與軟件相關(guān)專業(yè)的教材。
 你還可能感興趣
 我要評論
您的姓名   驗證碼: 圖片看不清?點擊重新得到驗證碼
留言內(nèi)容