欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

idea写好的mapreduce程序跑在yarn上

程序员文章站 2024-02-22 12:16:29
...

添加配置到文件

  • core-site.xml
 <property>
        <name>fs.defaultFS</name>
	  <!--Yarn 需要使用 fs.defaultFS 指定NameNode URI -->
<!--	  # 配置自己机器的IP-->
        <value>hdfs://bigdata:9000</value>
    </property>
  • mared-site.xml
 <property>
        <!-- 配置 MapReduce Applications -->
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>

    <property>
        <!--        如果启用,用户可以提交跨平台应用程序,即从Windows客户端向Linux / Unix服务器提交应用程序,反之亦然。-->
        <name>mapreduce.app-submission.cross-platform</name>
        <value>true</value>
    </property>
  • yarn-site.xml
 <property>
        <!--        RM的主机名-->
        <name>yarn.resourcemanager.hostname</name>
        <value>bigdata</value>
    </property>

    <property>
        <!--           RM中应用程序管理器界面的地址。-->
        <name>yarn.resourcemanager.address</name>
        <value>${yarn.resourcemanager.hostname}:8023</value>
    </property>

完整的配置文件下载:http://img.heieasy.net/resources.zip
吧这几个文件直接放在项目下的resource文件夹下即可

idea写好的mapreduce程序跑在yarn上