如何把hdfs上的多个目录下的文件合并为一个文件

 我来答
匿名用户
2017-07-25
展开全部
hdfs dfs -cat /folderpath/folder* | hdfs dfs -copyFromLocal - /newfolderpath/file
1
1
这样可以把文件hdfs上 /folderpath目录下的/folder开头的文件,还不合并到/newfolderpath目录下的file一个文件中 注意/folder*必须是文件,而不能是文件夹,如果是文件夹,可以/folder*/*

cat test.txt | ssh test@masternode "hadoop dfs -put - hadoopFoldername/"
1
1
可以这样把本机的文件put到HDFS上面,而不用先复制文件到集群机器上
背锅侠丶李达康
2017-07-25 · TA获得超过1311个赞
知道大有可为答主
回答量:2706
采纳率:96%
帮助的人:750万
展开全部
版本 2.程序集 窗口程序集1.子程序 __启动窗口_创建完毕编辑框1.是否允许多行 = 真编辑框1.内容 = 到文本 (读入文件 (取运行目录 () + “\指定文件.txt”))
本回答被提问者采纳
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式