大數據計算篇

第4章 YARN

學習目標

本章帶領讀者一起學習YARN，它是Hadoop分布式集群中負責資源管理和調度的重要模塊。為保證內容的權威性，本章主要以官方提供的資料為基礎，再結合實踐理解進行講述，從YARN的概述、主要組成模塊、調度器、RM高可用、節點標簽等方面對YARN展開詳細的說明。講述一個Application工作提交后，YARN的工作原理和數據流程。在本章的最后，將給出編寫YARN應用程序的實踐案例。

通過本章的學習，讀者應能夠掌握YARN如何對資源進行管理和調度，能夠掌握它的基本配置項，以及開啟、關閉相關的功能。

本章要點

■YARN概述及主要組成

■容量、公平調度器

■RM重啟、高可用

■節點標簽

■YARN服務注冊

■YARN應用編程