易燃物匯聚 YouTube 有聲書與書評
深入理解Spark:核心思想與源碼分析 封面

深入理解Spark:核心思想與源碼分析

耿嘉安

1322人在讀
54.3萬字總字數
¥35定價

內容簡介

本書不會教你如何開發Spark應用程序,只是用一些經典例子演示。本書簡單介紹Hadoop MapReduce、Hadoop YARN、Mesos、Tachyon、ZooKeeper、HDFS、Amazon S3,但不會過多介紹這些框架的使用,因爲市場上已經有豐富的這類書籍供讀者挑選。本書也不會過多介紹Scala、Java、Shell的語法,讀者可以在市場上選擇適合自己的書籍閱讀。本書最後還添加了幾個附錄,包括:附錄A介紹的Spark中最常用的工具類Utils;附錄B是Akka的簡介與工具類AkkaUtils的介紹;附錄C爲Jetty的簡介和工具類JettyUtils的介紹;附錄D爲Metrics庫的簡介和測量容器MetricRegistry的介紹;附錄E演示了Hadoop1.0版本中的word count例子;附錄F介紹了工具類CommandUtils的常用方法;附錄G是關於Netty的簡介和工具類NettyUtils的介紹;附錄H列舉了筆者編譯Spark源碼時遇到的問題及解決辦法。

讀者書評

★★★★★

大概3年前了 感覺還是不錯的書 基於spark1.2.0版本剖析源碼 計算模型、存儲模型以及調度體系都給出了非常完備的介紹和解析 其實作者能給出這樣一個讀源碼的框架就很不錯了 貼代碼也是無奈之舉。 spark的shuffle邏輯是性能損耗的關鍵 針對這裏的優化也是重中之重。另外它的圖操作graphx也挺有意思的 只不過中國絕大多數互聯網公司沒有這方面的應用 graph裏面的核心算法還是用到了diijkstra算法

★☆☆☆☆

從安裝JDK開講Spark,貼的代碼就有一半字數(以上),全書內容基本可以從網上找來,沒有多少自己的經驗心得,完全不值得爲這種書花錢。

★★★★★

認識這個作者,很nice的一個人。謙虛,低調,看了下書的框架,中規中矩,然而我覺得能寫出來已經很厲害了。給個贊,繼續加油!

★★★★★

阿里巴巴集團專家鼎力推薦,阿里巴巴資深Java開發和大數據專家撰寫 結合大量圖和示例,對Spark的核心模塊、部署和協作模塊的實現原理與使用技巧進行了深入的剖析與解讀 本書特色: 按照源碼分析的習慣設計,條分縷析。 多圖、多示例,幫讀者快速在頭腦中“建模”。 原理與實現剖析,幫助讀者提升架構設計、程序設計等方面的能力。 儘可能保留較多的源碼,方便離線和移動環境的閱讀。

★★★☆☆

基礎的回顧,值得讚揚的是基於核心功能的基本梳理是比較合理的。

★☆☆☆☆

有點差,書中有錯,按照步驟可以做出來,但是講解不詳細,不是特別好的一本書。

★★★★★

無論是思路還是源碼講解部分都是我看的幾本講源碼的書裏面最好的。但是唯一的缺點是版本太低了。現在spark都到3了。但是思路太好了,跟着作者思路看源碼,雖然源碼不同,但是從思路中也能學到很多。

書籍信息

作者耿嘉安
出版社機械工業出版社
出版時間2015-12-01
ISBN9787111522348
分類計算機-計算機綜合
格式EPUB
完結狀態連載中
章節數133