YARN的命令

**YARN 命令大全**

Apache YARN（Yet Another Resource Negotiator）是Hadoop生态系统中的一个重要组件，负责管理计算资源和应用程序。YARN 提供了一个高级别的抽象层，使得开发者能够轻松地部署和管理大规模数据处理应用程序。

在本文中，我们将介绍 YARN 的基本概念、命令大全以及相关示例代码。

**1. YARN 基础**

YARN 是 Hadoop2.x 中的一个重要组件，负责管理计算资源和应用程序。它提供了一个高级别的抽象层，使得开发者能够轻松地部署和管理大规模数据处理应用程序。

**2. YARN 命令大全**

以下是 YARN 的一些常用命令：

###2.1 yarn jar`yarn jar` 命令用于运行 Hadoop 应用程序。它接受一个 JAR 文件作为参数，指定要执行的应用程序。

bashyarn jar /path/to/jar/file.jar [args]

示例代码：

java// MyHadoopApp.javapublic class MyHadoopApp {
 public static void main(String[] args) {
 // ...
 }
}

bash$ yarn jar MyHadoopApp.jar input output

###2.2 yarn run`yarn run` 命令用于运行 Hadoop 应用程序。它接受一个 JAR 文件作为参数，指定要执行的应用程序。

bashyarn run /path/to/jar/file.jar [args]

示例代码：

java// MyHadoopApp.javapublic class MyHadoopApp {
 public static void main(String[] args) {
 // ...
 }
}

bash$ yarn run MyHadoopApp.jar input output

###2.3 yarn logs`yarn logs` 命令用于查看 Hadoop 应用程序的日志。

bashyarn logs -applicationId <app_id>

示例代码：

bash$ yarn logs -applicationId application_1643723400000_0011

###2.4 yarn node`yarn node` 命令用于查看 Hadoop 应用程序的节点信息。

bashyarn node -applicationId <app_id>

示例代码：

bash$ yarn node -applicationId application_1643723400000_0011

###2.5 yarn queue`yarn queue` 命令用于查看 Hadoop 应用程序的队列信息。

bashyarn queue -queue 

示例代码：

bash$ yarn queue -queue default

**3. YARN 配置**

以下是 YARN 的一些常用配置：

###3.1 yarn-site.xml`yarn-site.xml` 是 Hadoop 应用的配置文件。

xml<configuration>
 <property>
 <name>yarn.resourcemanager.address</name>
 <value>localhost:8088</value>
 </property>
 <property>
 <name>yarn.app.mapreduce.am.env</name>
 <value>HADOOP_MAPRED_HOME=/usr/local/hadoop</value>
 </property>
 <property>
 <name>yarn.app.mapreduce.am.env</name>
 <value>HADOOP_CONF_DIR=/usr/local/hadoop/etc/hadoop</value>
 </property>
</configuration>

示例代码：

java// MyHadoopApp.javapublic class MyHadoopApp {
 public static void main(String[] args) {
 // ...
 }
}

bash$ yarn jar MyHadoopApp.jar input output

###3.2 mapred-site.xml`mapred-site.xml` 是 Hadoop 应用的配置文件。

xml<configuration>
 <property>
 <name>mapreduce.framework.name</name>
 <value>yarn</value>
 </property>
 <property>
 <name>mapreduce.jobtracker.address</name>
 <value>localhost:54311</value>
 </property>
 <property>
 <name>mapreduce.tasktracker.map.tasks.maximum</name>
 <value>3</value>
 </property>
</configuration>

示例代码：

java// MyHadoopApp.javapublic class MyHadoopApp {
 public static void main(String[] args) {
 // ...
 }
}

bash$ yarn jar MyHadoopApp.jar input output

**4. YARN 应用程序**

以下是 YARN 的一些常用应用程序：

###4.1 WordCountWordCount 是一个简单的 Hadoop 应用程序，用于统计文本中出现的单词数量。

java// WordCount.javapublic class WordCount {
 public static void main(String[] args) {
 // ...
 }
}

bash$ yarn jar WordCount.jar input output

###4.2 GrepGrep 是一个 Hadoop 应用程序，用于在文本中搜索特定模式。

java// Grep.javapublic class Grep {
 public static void main(String[] args) {
 // ...
 }
}

bash$ yarn jar Grep.jar input output

###4.3 JoinJoin 是一个 Hadoop 应用程序，用于将两个文本文件合并成一个。

java// Join.javapublic class Join {
 public static void main(String[] args) {
 // ...
 }
}

bash$ yarn jar Join.jar input1 input2 output

以上是 YARN 的一些常用命令、配置和应用程序的示例代码。这些示例代码可以帮助您快速上手 YARN 并使用它来管理您的 Hadoop 应用程序。