欢迎光临
一直在努力

把csv入库到hadoop集群

[root@MASTER01 ~]# hadoop fs -copyFromLocal /root/008.csv /user/hive/warehouse/tmp.db/
[root@MASTER01 ~]# hadoop fs -ls hdfs://MASTER01:8020/user/hive/warehouse/tmp.db/008.csv
-rw-r–r–   3 root hive         48 2016-04-15 12:53 hdfs://MASTER01:8020/user/hive/warehouse/tmp.db/008.csv
[root@MASTER01 ~]#

在Hadoop处理的一些结果数据可能会直接被外部系统使用,可能需要其他系统做更进一步的处理,或者MapReduce处理框架根本就不符合该场景,任何类似的情况下都需要从HDFS上导出数据。下载数据最简单的办法就是使用Hadoop shell。

本站文章均为原创,转载请注明出处:运维资源 » 把csv入库到hadoop集群

评论 抢沙发

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址

QEDEV 运维分享 运维实战

联系我们关于作者