
朱鋒
經過多年的發展,大數據處理技術逐步成熟。作爲業界大數據計算的事實標準,Apache Spark系統已經廣泛應用於各大企業與研究機構,並形成完整的生態系統。Spark系統包含了SQL、GraphX和R等各個子系統以支持不同業務領域的需求。作爲傳統關係數據庫/數據倉庫在大數據場景下的解決方案,Spark SQL已經成爲了業界的重要選擇方案,同時也成爲了Spark開源社區中最爲活躍的部分。本書聚焦於Spark SQL系統,對其整體架構、內部各個模塊的技術實現機制進行源碼級別的剖析,涉及到SQL編譯、邏輯計劃、物理執行計劃、重要查詢(如Aggregation與Join等)的技術細節。此外,本書內容上還會結合生產環境的海量應用,分享大量真實開發案例與實踐優化經驗。
好書 就是得多看幾遍 不然嚼不透
國內spark最好的一本書,沒有之一
Aggregate及之前的章節全部都精讀了一遍,看完對spark掌控力更近一步。只看書裏面的Tungsten這一塊,還是一知半解,需要再研究研究,另外shuffle相關細節和AQE都沒有,需要自己再鑽研一下。
讀過的最難的一本書,知識密度極大,全部是乾貨。對於現階段來說淺讀一遍已經感覺收穫很多