首页 > 其他 > 详细

sqoop 使用指定条件导入数据

时间:2014-06-08 04:57:35      阅读:565      评论:0      收藏:0      [点我收藏+]

在测试sqoop语句的时候,一定要限制记录数量,否则就像我刚才,等了1个多小时,才看到测试结果。

????sqoop-import --options-file media_options.txt --table my_table --where "ID = 2" --target-dir /user/jenkins/bigdata/import/20140607 -m 1 --fields-terminated-by ‘\001‘ --lines-terminated-by ‘\n‘

导入后,可以用hdfs dfs -get命令获取文件到本地目录

然后用bunzip2 命令解压,

最后用emacs的hexl-mode查看文件的16进制格式,检查分割符是否正确。

sqoop 使用指定条件导入数据,布布扣,bubuko.com

sqoop 使用指定条件导入数据

原文:http://blog.csdn.net/csfreebird/article/details/29210481

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!