- 大數據處理框架Apache Spark設計與實現
- 許利杰等
- 16字
- 2024-01-19 16:36:18
第一部分 大數據處理框架的基礎知識
第1章 大數據處理框架概覽
本章主要介紹大數據處理框架的基本概念,包括大數據的概念、大數據處理框架的概念及其發(fā)展歷程。其中還介紹了大數據處理框架的編程模型和大數據應用運行時的四層結構,即用戶層、分布式數據并行處理層、資源管理與任務調度層、物理執(zhí)行層。在介紹這些技術內容的同時會總結相關的研究工作,擴充大數據處理框架的知識內容。
本章主要介紹大數據處理框架的基本概念,包括大數據的概念、大數據處理框架的概念及其發(fā)展歷程。其中還介紹了大數據處理框架的編程模型和大數據應用運行時的四層結構,即用戶層、分布式數據并行處理層、資源管理與任務調度層、物理執(zhí)行層。在介紹這些技術內容的同時會總結相關的研究工作,擴充大數據處理框架的知識內容。