夏洛特猫 发表于 2016-09-05 09:07

HDFS上是否可以进行多个文件的合并

本帖最后由 夏洛特猫 于 2016-09-05 09:18 编辑

内容如标题所示,不知道hdfs是否可以满足这样的操作了,也谢谢各位的指导。HDFS上有三个文件,分别为1,2,3 ,是否可以直接在hdfs上进行文件合并(不需要从hdfs拷贝到本地之后在本地处理完再上传)
Hadoop版本为Hadoop-2.0以上

夏洛特猫 发表于 2016-09-05 10:40

hadoop dfs -cat /L/* | hadoop dfs -copyFromLocal -/K/cc
/L/*要合并的文件夹
/K/cc 是合并后的文件名

页: [1]
查看完整版本: HDFS上是否可以进行多个文件的合并