avatar
电面被问到hadoop了# JobHunting - 待字闺中
b*y
1
一门户网站的电面
用hadoop做wordcount,输入是一个很大的文件,#distinct term小于100,最后的结果
不写到HDFS,要print到console。
mapper就跟wordcount例子一样啦。我说用1个reducer,用LOG.info 将count print到
console,他说这个可能只print在reducer的console,而这个reducer在哪个node无法确
定。
他提示到在mapper用counter,不过没有什么头绪。希望各位指点一下。
avatar
q*x
2
do you put hadoop as resume keyword?

【在 b******y 的大作中提到】
: 一门户网站的电面
: 用hadoop做wordcount,输入是一个很大的文件,#distinct term小于100,最后的结果
: 不写到HDFS,要print到console。
: mapper就跟wordcount例子一样啦。我说用1个reducer,用LOG.info 将count print到
: console,他说这个可能只print在reducer的console,而这个reducer在哪个node无法确
: 定。
: 他提示到在mapper用counter,不过没有什么头绪。希望各位指点一下。

avatar
b*y
4
一门户网站的电面
用hadoop做wordcount,输入是一个很大的文件,#distinct term小于100,最后的结果
不写到HDFS,要print到console。
mapper就跟wordcount例子一样啦。我说用1个reducer,用LOG.info 将count print到
console,他说这个可能只print在reducer的console,而这个reducer在哪个node无法确
定。
他提示到在mapper用counter,不过没有什么头绪。希望各位指点一下。
avatar
q*x
5
do you put hadoop as resume keyword?

【在 b******y 的大作中提到】
: 一门户网站的电面
: 用hadoop做wordcount,输入是一个很大的文件,#distinct term小于100,最后的结果
: 不写到HDFS,要print到console。
: mapper就跟wordcount例子一样啦。我说用1个reducer,用LOG.info 将count print到
: console,他说这个可能只print在reducer的console,而这个reducer在哪个node无法确
: 定。
: 他提示到在mapper用counter,不过没有什么头绪。希望各位指点一下。

相关阅读
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。