CentOS下安裝配置YARN工具，快速管理Apache Hadoop應用程序

一、YARN工具與Apache Hadoop

YARN（Yet Another Resource Negotiator）是Apache Hadoop框架中的一個資源管理系統，負責在大規模集群上分配資源與調度任務。通過使用YARN工具，您可以快速管理Apache Hadoop應用程序，提高集群任務的效率。

在開始安裝與配置YARN工具之前，您需要確保已經安裝並配置了Apache Hadoop軟體。

二、安裝YARN工具

在CentOS系統中安裝YARN工具非常簡單，您只需要使用以下命令即可：

sudo yum install -y hadoop-yarn

在執行此命令之前，請確保您的系統已經安裝了Apache Hadoop軟體。

三、配置YARN工具

1. 編輯hadoop-env.sh文件

在CentOS系統中，hadoop-env.sh文件位於/usr/hdp/current/hadoop-client/conf目錄下。請使用以下命令打開此文件：

sudo vi /usr/hdp/current/hadoop-client/conf/hadoop-env.sh

在文件末尾添加以下內容：

export HADOOP_YARN_HOME=/usr/hdp/current/hadoop-yarn-client
export YARN_CONF_DIR=$HADOOP_YARN_HOME/etc/hadoop

保存並退出文件。

2. 編輯yarn-site.xml文件

在CentOS系統中，yarn-site.xml文件位於/usr/hdp/current/hadoop-yarn-client/conf目錄下。請使用以下命令打開此文件：

sudo vi /usr/hdp/current/hadoop-yarn-client/conf/yarn-site.xml

在文件中添加以下內容：

  
    yarn.resourcemanager.hostname
    YOUR_RESOURCE_MANAGER_HOSTNAME
  
  
    yarn.resourcemanager.resource-tracker.address
    YOUR_RESOURCE_MANAGER_HOSTNAME:8031
  
  
    yarn.resourcemanager.scheduler.address
    YOUR_RESOURCE_MANAGER_HOSTNAME:8030
  
  
    yarn.resourcemanager.address
    YOUR_RESOURCE_MANAGER_HOSTNAME:8032
  

請將YOUR_RESOURCE_MANAGER_HOSTNAME替換為您的資源管理器的主機名。

四、啟動YARN工具

使用以下命令啟動YARN工具：

sudo systemctl start hadoop-yarn-resourcemanager
sudo systemctl start hadoop-yarn-nodemanager

請參照Apache Hadoop文檔中的說明，配置並啟動您的本地集群或雲上集群，以便開始使用YARN工具。

五、使用YARN工具管理Apache Hadoop應用程序

使用以下命令提交Apache Hadoop應用程序：

hadoop jar YOUR_HADOOP_APP.jar YOUR_APP_MAIN_CLASS_NAME args

請將YOUR_HADOOP_APP.jar替換為您的應用程序的jar包文件名，將YOUR_APP_MAIN_CLASS_NAME替換為您的應用程序的主類名，將args替換為應用程序的參數。

使用以下命令查看已提交的應用程序：

yarn application -list

使用以下命令查看特定應用程序的詳細信息：

yarn application -status YOUR_APPLICATION_ID

請將YOUR_APPLICATION_ID替換為您要查看的應用程序的ID。

六、總結

通過本文的闡述，您已經學會在CentOS系統中安裝與配置YARN工具，以及使用YARN工具管理Apache Hadoop應用程序。希望這些知識能夠幫助您更好地管理您的大規模集群。