hadoop client机搭建 博客分类: hadoop hadoop client机搭建
程序员文章站
2024-03-12 18:44:02
...
hadoop client机作为集群的堡垒机使用,使得集群环境和开发环境分离开来
选择集群外的一台机器,搭建client机,流程如下:
(1)配置单向(master可以ssh到client,client不可以ssh到master)ssh免登陆, 把master的id_rsa.pub内容添加到client机器的authorized_keys中
(2)修改client机器的 /etc/hosts 文件,添加master节点的ip和hostname
(3)把master节点的hadoop包scp到client机
(4)修改client机器的 /etc/profile 文件,添加HADOOP_HOME
(5)修改core-site.xml文件,其中 master_host:port 是NN的地址
<property> <name>fs.defaultFS</name> <value>hdfs://master_host:port</value> </property>
例如:
(6)测试是否成功
下一篇: Struts2 Result 参数详解
推荐阅读
-
hadoop client机搭建 博客分类: hadoop hadoop client机搭建
-
hadoop client机搭建 博客分类: hadoop hadoop client机搭建
-
Hadoop集群环境搭建 博客分类: HadoopLinux hadooplinux
-
Linux搭建Hadoop开发环境 博客分类: 大数据技术栈 Hadoop大数据环境搭建Liunx
-
关于hadoop完全分布式集群搭建 博客分类: hadoop hadoop完全分布式
-
关于hadoop完全分布式集群搭建 博客分类: hadoop hadoop完全分布式
-
Hadoop 集群 傻瓜式搭建手记 博客分类: hadoop
-
Hadoop配置文档 博客分类: 大数据 hadoopsshlinux虚拟机mapreduce
-
Spark集群搭建 & spark-shell & Master HA 博客分类: hadoop
-
hadoop的client搭建-即集群外主机访问hadoop