logo
Redian新闻
>未名空间
>JobHunting - 待字闺中
>
Hadoop输入文件是.gz files，一般怎么处理？
avatar
Hadoop输入文件是.gz files，一般怎么处理？# JobHunting - 待字闺中
j*v
1 楼
hadoop jar test.jar Test inputFileFolder outputFileFolder
inputFileFolder里存了5个9G左右的.gz files，想请问一下大家，用Hadoop处理这个
inputFileFolder里的文件，如果不解压缩文件一般采用什么方法？怎样配置参数比较
好？谢谢!
avatar
m*n
2 楼
http://stackoverflow.com/questions/26576985/mapreduce-in-java-g

【在 j********v 的大作中提到】
: hadoop jar test.jar Test inputFileFolder outputFileFolder
: inputFileFolder里存了5个9G左右的.gz files，想请问一下大家，用Hadoop处理这个
: inputFileFolder里的文件，如果不解压缩文件一般采用什么方法？怎样配置参数比较
: 好？谢谢!
avatar
C*e
3 楼
hadoop可以自动根据输入的后缀名来解压缩，用户什么都不用做。

【在 j********v 的大作中提到】
: hadoop jar test.jar Test inputFileFolder outputFileFolder
: inputFileFolder里存了5个9G左右的.gz files，想请问一下大家，用Hadoop处理这个
: inputFileFolder里的文件，如果不解压缩文件一般采用什么方法？怎样配置参数比较
: 好？谢谢!
相关阅读
这个题目什么意思我都看不懂！大家来帮忙看看如何提高刷题效率！M内推能保证面试吗？纽约附近的icc或者ccc急问，在线等……h1b身份转行能否做contactor?问一下关于401k vesting schedule的问题，谢谢！求指教- 准备面试 网络通信公司的 wireless LAN network engineer有已经在ITU上课的同学吗？郁闷中说说最近fail的面试吧careercup第五版 11.3的解答是不是有问题请教一题，关于intervalA家background checkingH1B RFEoffer file h1b transfer后反悔可以吗或者4个月申请2ci h1b transfer可以吗yelp一题，攒rp千老可以过的比绝大部分码工舒服 请转找工版 (转载)cdc的fellowship值不值的去公司微观管理太严重了！求解求STRING COMPRESSION一题C++解法(CC150 1.5)G终于悲剧
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章，不代表同意其说法或描述，仅为提供更多信息，也不构成任何建议。文章信息的合法性及真实性由其作者负责，与Redian.news及其运营公司无关。欢迎投稿，如发现稿件侵权，或作者不愿在本网发表文章，请版权拥有者通知本网处理。