首页 > 其他 > 详细

hadoop程序在本地模式调试作业

时间:2016-01-28 15:23:01      阅读:245      评论:0      收藏:0      [点我收藏+]

1.首先下载cygwin,例如安装在该目录下,D:\Program Files\cygwin\

2.copy linux上的jar包到D:\Program Files\cygwin\home\lib 下,并下载一个修改过的jar包hadoop-core-1.0.4.jar替换掉原来的jar包。  http://download.csdn.net/download/m_star_jy_sy/7376283

3.修改程序

在linux上运行,
* 输入文件、输出路径,可在Eclipse中Run Configurations中配Arguments,如:
* hdfs://master:9000/input/salary.txt
* hdfs://master:9000/output/
*/
在windows上运行,
"D:\\Program Files\\cygwin\\home\\input\\salary.txt",
"D:\\Program Files\\cygwin\\home\\output"


4.D:\Program Files\cygwin\home\lib 下的包到工程lib下。

5.运行即可。

 

hadoop程序在本地模式调试作业

原文:http://www.cnblogs.com/bob-wzb/p/5166265.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!