首页 > 其他 > 详细

MapReduce Streaming

时间:2016-06-21 14:08:29      阅读:210      评论:0      收藏:0      [点我收藏+]

一、Hadoop Streaming:

Hadoop Streaming是Hadoop发行包的一个功能。Hadoop Streaming的作用是,可以使用任何可运行程序或脚本作为Mapper和/或Reducer来创建和执行MapReduce作业。例如:

$HADOOP_HOME/bin/hadoop  jar $HADOOP_HOME/hadoop-streaming.jar -input myInputDirs -output myOutputDir -mapper /bin/cat -reducer /bin/wc


本文出自 “雪花” 博客,谢绝转载!

MapReduce Streaming

原文:http://6216083.blog.51cto.com/6206083/1791298

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!