首页 > 其他 > 详细

Hive相关

时间:2019-05-07 15:41:43      阅读:155      评论:0      收藏:0      [点我收藏+]

# 注意事项:

-> Spark-SQL使用JDBC读取表, 默认使用一个executor去读, 如果转成并发, 需要设置分区索引去读;

 

 

1. 创建parquet存储表

CREATE TABLE IF NOT EXISTS bi_orginal.`param_code_dcs` (
`CODE_ID` string COMMENT ‘CODE ID‘,
`TYPE` string COMMENT ‘CODE类型‘,
`TYPE_NAME` string COMMENT ‘CODE类型中文说明‘,
`CODE_DESC` string COMMENT ‘CODE ID中文说明‘,
`NUM` string ,
`update_time` string
)
comment ‘param_code_dcs‘
STORED AS parquet

 

 

2.  向表中插入数据


insert overwrite table bi_orginal.`param_code_dcs`
SELECT CODE_ID, TYPE, TYPE_NAME, CODE_DESC, NUM, from_unixtime(unix_timestamp(),‘yyyy-MM-dd HH:mm:ss‘) FROM artemisdcs.d_f_artemisdcs_tc_code_dcs

Hive相关

原文:https://www.cnblogs.com/ruili07/p/10825767.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!