配置Windows+Hadoop+IDEA+Maven开发环境
程序员文章站
2024-02-19 15:23:22
...
Hadoop版本:
3.1.3
Windows下使用IDEA+Maven搭建本地Hadoop开发环境
1、环境变量
-
控制面板\系统和安全\系统
->高级系统设置
->环境变量
->系统变量
-
HADOOP_HOME
设置值D:\coding\hadoop
-
Path
加入%HADOOP_HOME%\bin
2、解压
下载压缩包,然后解压
https://download.csdn.net/download/Yellow_python/16672738
解压到上述和环境变量一样的路径
D:\coding\hadoop
3、pom.xml 的 Hadoop依赖
<dependency>
<groupId>org.apache.hadoop</groupId>
<artifactId>hadoop-client</artifactId>
<version>3.1.3</version>
</dependency>
4、log4j2.xml(可选)
在src/main/resources
下新建一个log4j2.xml
文件,写入
<?xml version="1.0" encoding="UTF-8"?>
<Configuration status="error" strict="true" name="XMLConfig">
<Appenders>
<!-- 类型名为Console,名称为必须属性 -->
<Appender type="Console" name="STDOUT">
<!-- 布局为PatternLayout的方式,
输出样式为[INFO] [2018-01-22 17:34:01][org.test.Console]I'm here -->
<Layout type="PatternLayout"
pattern="[%p] [%d{yyyy-MM-dd HH:mm:ss}][%c{10}]%m%n"/>
</Appender>
</Appenders>
<Loggers>
<!-- 可加性为false -->
<Logger name="test" level="info" additivity="false">
<AppenderRef ref="STDOUT"/>
</Logger>
<!-- root loggerConfig设置 -->
<Root level="info">
<AppenderRef ref="STDOUT"/>
</Root>
</Loggers>
</Configuration>
pom.xml
加入依赖
<dependency>
<groupId>org.apache.logging.log4j</groupId>
<artifactId>log4j-slf4j-impl</artifactId>
<version>2.12.0</version>
</dependency>
上一篇: JDK安装配置
下一篇: linux连外网网络配置
推荐阅读
-
maven、eclipse配置hadoop开发环境
-
scala ide scalatest maven eclipse 开发环境配置
-
配置Windows+Hadoop+IDEA+Maven开发环境
-
windows下,IDEA中基于maven配置spark开发环境
-
opencv在Mac下的环境配置(最新版本的OpenCV安装配置,史上最简洁方便有效)
-
如何使用ESXi,vagrant,docker,virtualbox搭建php,mysql开发测试环境
-
Android学习笔记 - 开发环境配置问题记录
-
Java环境配置问题--window10
-
Mac OS 安装java 开发环境
-
Mac系统下使用brew搭建PHP(LNMP/LAMP)开发环境_PHP