菜鸟请教个hadoop streaming job 的问题 (转载) - 未名空间MITBBS历史存档

国际科技财经博客移民网络热点娱乐民生时事公众号

Redian新闻

>未名空间

>Java - 爪哇娇娃

菜鸟请教个hadoop streaming job 的问题 (转载)

菜鸟请教个hadoop streaming job 的问题 (转载)# Java - 爪哇娇娃

e*62010-02-20 08:02

1 楼

周末宅在家里，关门闭窗，大开空调。
做晚饭的时候，突然不知道从哪里冒出来一只苍蝇。
住在现在的房子有五六年了吧，这是第一只。
LPH卷了一张报纸，待苍蝇落在桌子一角，用力打过去。
苍蝇不见了。

b*n2010-02-20 08:02

2 楼

【以下文字转载自 SanFrancisco 讨论区】
发信人: babyfacenan (黑土), 信区: SanFrancisco
标题: 菜鸟请教个hadoop streaming job 的问题
发信站: BBS 未名空间站 (Sat Feb 20 19:53:34 2010, 美东)
我是hadoop 菜鸟，第一次用
我的job 就是个很简单的map job, no reducer，
mapper 也就是一些很简单的命令，会有一些输出到stderr, stdout
我的hadoop 命令output option：
"-outputformat org.apache.hadoop.mapred.lib.NullOutputFormat " .
"-output NONE " .
map 一直fail，error message 如下，不论我是否supress所有的stderr, stdout,一直
是下面相同的error message.
那位高手可不可以指点一二。谢谢
java.lang.RuntimeException: PipeMapRed.wai