由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
JobHunting版 - Hadoop输入文件是.gz files,一般怎么处理?
相关主题
file 输入和 stdin 输入发面经
谈谈找律师的体会想跳槽的硅工吱一声 - hadoop
版面热门话题索引 (updated by 04/26/08)职位要求跟我会的东西不搭, 为什么还要让我去面试呢
LIA发起关于反对滥用Multiple Filing的新CampaignApple Cloud Services Engineer
Huawei (USA) 招聘架构师 (转载)software engineer opportunity
同时多次file H1B transfer会不会有问题在等HM电话,求祝福
迟到的回馈(CS专业) - 经历、经验和感悟电面被问到hadoop了
Amazon组选择:EC2还是Elastic MapReducetwitter和Netflix的电话面经
相关话题的讨论汇总
话题: hadoop话题: gz
进入JobHunting版参与讨论
1 (共1页)
j********v
发帖数: 16
1
hadoop jar test.jar Test inputFileFolder outputFileFolder
inputFileFolder里存了5个9G左右的.gz files,想请问一下大家,用Hadoop处理这个
inputFileFolder里的文件,如果不解压缩文件一般采用什么方法?怎样配置参数比较
好?谢谢!
m*****n
发帖数: 204
2
http://stackoverflow.com/questions/26576985/mapreduce-in-java-g

【在 j********v 的大作中提到】
: hadoop jar test.jar Test inputFileFolder outputFileFolder
: inputFileFolder里存了5个9G左右的.gz files,想请问一下大家,用Hadoop处理这个
: inputFileFolder里的文件,如果不解压缩文件一般采用什么方法?怎样配置参数比较
: 好?谢谢!

C********e
发帖数: 492
3
hadoop可以自动根据输入的后缀名来解压缩,用户什么都不用做。

【在 j********v 的大作中提到】
: hadoop jar test.jar Test inputFileFolder outputFileFolder
: inputFileFolder里存了5个9G左右的.gz files,想请问一下大家,用Hadoop处理这个
: inputFileFolder里的文件,如果不解压缩文件一般采用什么方法?怎样配置参数比较
: 好?谢谢!

1 (共1页)
进入JobHunting版参与讨论
相关主题
twitter和Netflix的电话面经Huawei (USA) 招聘架构师 (转载)
有同学愿意拿open source项目练手吗?同时多次file H1B transfer会不会有问题
[apple面经] iOS software engineer迟到的回馈(CS专业) - 经历、经验和感悟
zz 2012年值得关注的12家Hadoop厂商Amazon组选择:EC2还是Elastic MapReduce
file 输入和 stdin 输入发面经
谈谈找律师的体会想跳槽的硅工吱一声 - hadoop
版面热门话题索引 (updated by 04/26/08)职位要求跟我会的东西不搭, 为什么还要让我去面试呢
LIA发起关于反对滥用Multiple Filing的新CampaignApple Cloud Services Engineer
相关话题的讨论汇总
话题: hadoop话题: gz