欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  后端开发

php通过shell调用Hadoop的方法

程序员文章站 2022-03-30 22:01:05
...
1.php代码(index.php)


";}?>


2.shell代码(hadoop.sh)

#!/bin/bashecho "wordCount test start"rm -rf ~/file_20141024mkdir ~/file_20141024cd ~/file_20141024echo "Hello World" > file1.txtecho "Hello China Beijing" > file2.txtcd /home/work/hadoop/bin ./hadoop dfs -rmr input_20141024./hadoop dfs -rmr output_20141024./hadoop fs -mkdir input_20141024#hadoop fs -chomod -R 777 /input_20141024./hadoop fs -put ~/file_20141024/file*.txt input_20141024./hadoop jar /home/work/hadoop/hadoop-examples-1.1.2.jar wordcount input_20141024 output_20141024./hadoop fs -ls output_20141024./hadoop fs -cat output_20141024/part-r-00000echo "wordCount test end"

3. 访问http://ip:8888/index.php?jiaoben=hadoop.sh

查询结果:

/user/work/output_20141024/part-r-00000 Beijing 1 China 1 Hello 2 World 1