具成本效益的資料管道

　　開發雲端資料管道的權衡之計

　　「Sev Leonard的最佳實踐和策略可以為我的雇主節省數百萬美元。對比一本書的價格和閱讀時間而言，這是相當不錯的投資回報。」
　　—Bar Shirtcliff
　　軟體工程師

　　「這就是我們一直在等待的那本書，它為監控、控制和優化高效能雲端資料系統的成本，提供了清晰、有條不紊的指導。」
　　—Matthew Housley
　　首席技術長兼《資料工程基礎》的合著者

　　起初，雲端服務的成本看起來經濟實惠，但很容易在日後演變為一筆巨額開支。這對於開發資料管道的團隊來說是一個挑戰，特別是當技術和工作負載快速變化，而需要不斷重新設計週期，導致在開發、調試和停機方面產生額外的成本支出時，該如何提供可擴展、高度可用的產品，同時兼顧成本控制？

　　在這本實用指南中，Sev Leonard提供了適用於雲端環境設計下，一種可擴展資料管道的整體方法，幫助您在雲端運算和儲存、管道開發和測試、以及監控之間進行成本效能的權衡之計。透過專注於整個設計過程，資料工程師、軟體開發人員、架構師和管理人員可以交付具有成本效益的高品質產品。本書可以幫助您：

　　．透過具有成本意識的服務和智慧設計策略，降低雲端費用支出
　　．調整運算資源規模，在不犧牲效能的情況下，最大限度減少資源浪費
　　．推動資料管道發展防止效能問題，並透過有效監控來快速調試、除錯
　　．設定開發和測試環境，盡可能減少雲端服務依賴性
　　．建立可測試且可擴展的資料管道程式碼，降低開發成本並加速管道演進
　　．透過驗證和測試來提高資料品質和管道運行

第 1 章 為資料管道設計運算方式
第 2 章 根據需求變化調整運算資源的規模
第 3 章 雲端中的資料組織
第 4 章 具有經濟效率的資料管道
第 5 章 建立有效的開發環境
第 6 章 軟體開發策略
第 7 章 單元測試
第 8 章 模擬
第 9 章 測試資料
第 10 章 記錄
第 11 章 找到適合的監控方式
第 12 章 基本重點
附錄 A 規劃預算

 

作者簡介



Sev Leonard

　　Sev Leonard 在科技產業擁有20多年的經驗。在英特爾微處理器的電路設計、使用者驅動的應用程式開發、醫療保健和網路安全領域，從小規模到大規模的資料平台開發方面，都擁有豐富的經驗。在他的整個職業生涯中，Sev Leonard一直擔任作家、演說家和教師，致力於傳承他所學到的知識，讓所有人都能接受技術教育。