忍不住说声 8年这个事件 (转载) - 未名空间MITBBS历史存档

国际科技财经博客移民网络热点娱乐民生时事公众号

Redian新闻

>未名空间

>Parenting - 为人父母

忍不住说声 8年这个事件 (转载)

忍不住说声 8年这个事件 (转载)# Parenting - 为人父母

A*g2014-05-03 07:05

1 楼

http://wiki.apache.org/hadoop/WordCount
这个程序的逻辑是看明白了，神奇的是在main里好像从来就没指定哪个是key，哪个是
value,就给了个输入输出文件名
这个map function
public void map(LongWritable key, Text value, Context context) throws
IOException, InterruptedException
还有reduce function是怎么知道那个是key 那个是value?
请大牛说说？

C*r2014-05-03 07:05

2 楼

【以下文字转载自 Dreamer 讨论区】
发信人: Dreamer (不要问我从哪里来), 信区: Dreamer
标题: 忍不住说声 8年这个事件
发信站: BBS 未名空间站 (Fri May 2 23:38:48 2014, 美东)
现在mitbbs上一边倒的样子，不过看那个男主人公，他老婆真的很可怜。他的回忆录里
面讽刺挖苦他老婆，虽然后面假惺惺地说理解他老婆，不过这是个睚眦必报的人，从他
威胁那个奶奶就能体现，这个老婆也太不容易了。
他们的结局非常不看好啊。

X*K2014-05-03 07:05

3 楼

我不懂瞎猜的
public static class Map extends Mapper>
就是说这个mapper把input pair
LongWritable, Text （行id，行文本）
map到output pair
Text, IntWritable（词，数字1）
而map function
public void map(LongWritable key, Text value, Context context) throws
IOException, InterruptedException
的前两个参数就是input pari，Context应该就是hadoop句柄，然后
context.write(word, one);
就是输出output pair.
reducer应该也类似

A*g2014-05-03 07:05

4 楼

有道理，所以map的input就是以input file的行读的

IntWritable

【在 X*K 的大作中提到】

: 我不懂瞎猜的
: public static class Map extends Mapper: >
: 就是说这个mapper把input pair
: LongWritable, Text （行id，行文本）
: map到output pair
: Text, IntWritable（词，数字1）
: 而map function
: public void map(LongWritable key, Text value, Context context) throws
: IOException, InterruptedException

A*g2014-05-03 07:05

5 楼

X*K2014-05-03 07:05

6 楼