具成本效益的資料管道 (Cost-Effective Data Pipelines)

開發雲端資料管道的權衡之計

「Sev Leonard的最佳實踐和策略可以為我的雇主節省數百萬美元。對比一本書的價格和閱讀時間而言，這是相當不錯的投資回報。」
—Bar Shirtcliff
軟體工程師

「這就是我們一直在等待的那本書，它為監控、控制和優化高效能雲端資料系統的成本，提供了清晰、有條不紊的指導。」
—Matthew Housley
首席技術長兼《資料工程基礎》的合著者

起初，雲端服務的成本看起來經濟實惠，但很容易在日後演變為一筆巨額開支。這對於開發資料管道的團隊來說是一個挑戰，特別是當技術和工作負載快速變化，而需要不斷重新設計週期，導致在開發、調試和停機方面產生額外的成本支出時，該如何提供可擴展、高度可用的產品，同時兼顧成本控制？

在這本實用指南中，Sev Leonard提供了適用於雲端環境設計下，一種可擴展資料管道的整體方法，幫助您在雲端運算和儲存、管道開發和測試、以及監控之間進行成本效能的權衡之計。透過專注於整個設計過程，資料工程師、軟體開發人員、架構師和管理人員可以交付具有成本效益的高品質產品。本書可以幫助您：

‧透過具有成本意識的服務和智慧設計策略，降低雲端費用支出
‧調整運算資源規模，在不犧牲效能的情況下，最大限度減少資源浪費
‧推動資料管道發展防止效能問題，並透過有效監控來快速調試、除錯
‧設定開發和測試環境，盡可能減少雲端服務依賴性
‧建立可測試且可擴展的資料管道程式碼，降低開發成本並加速管道演進
‧透過驗證和測試來提高資料品質和管道運行