Hadoop输入文件是.gz files，一般怎么处理？ - 未名空间MITBBS历史存档

国际科技财经博客移民网络热点娱乐民生时事公众号

Redian新闻

>未名空间

>JobHunting - 待字闺中

Hadoop输入文件是.gz files，一般怎么处理？

Hadoop输入文件是.gz files，一般怎么处理？# JobHunting - 待字闺中

j*v2015-11-05 08:11

1 楼

hadoop jar test.jar Test inputFileFolder outputFileFolder
inputFileFolder里存了5个9G左右的.gz files，想请问一下大家，用Hadoop处理这个
inputFileFolder里的文件，如果不解压缩文件一般采用什么方法？怎样配置参数比较
好？谢谢!

m*n2015-11-05 08:11

2 楼

http://stackoverflow.com/questions/26576985/mapreduce-in-java-g

【在 j********v 的大作中提到】

: hadoop jar test.jar Test inputFileFolder outputFileFolder
: inputFileFolder里存了5个9G左右的.gz files，想请问一下大家，用Hadoop处理这个
: inputFileFolder里的文件，如果不解压缩文件一般采用什么方法？怎样配置参数比较
: 好？谢谢!