首页 > 其他 > 详细

sqoop 关于 用查询语句全表导入对$condition的理解

时间:2020-04-04 12:37:43      阅读:263      评论:0      收藏:0      [点我收藏+]

使用查询语句来完成全表导入

当想使用查询语句来完成全表导入时,此时where 和$CONDITIONS 缺一不可,可以用以下语句

 import
--connect
jdbc:mysql://hadoop102:3306/gmall
--username
root
--password
123
--target-dir
/test_table
--delete-target-dir
--query
‘select id,spu_id,price,sku_name,sku_desc,weight,tm_id,category3_id,create_time from sku_info where 1=1 and $CONDITIONS--num-mappers
1
--fields-terminated-by
‘\t‘
--compress
--compression-codec
lzop

注意:这里用的是sqoop执行脚本的方式导入

查询语句需要用单引号,可能会有人想用双引号加转义符一样可以达到效果,即

"select id,spu_id,price,sku_name,sku_desc,weight,tm_id,category3_id,create_time from sku_info where 1=1 and \$CONDITIONS“

但执行时仍然会报错

技术分享图片

 

 具体原因还不知道,可能不是走的shell解析那一套

sqoop 关于 用查询语句全表导入对$condition的理解

原文:https://www.cnblogs.com/yangxusun9/p/12631169.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!