首页 > 数据库技术 > 详细

Spark 向数据库导出数据时,如何避免主键重复的问题

时间:2020-05-19 21:32:45      阅读:226      评论:0      收藏:0      [点我收藏+]

有一个需求是: 最近一小时内商品的点击次数

方案是用SparkStreaming 来做,利用窗口可以轻松达到目的,然后再将结果存入数据库,可问题就出现了,因为商品id为主键,这是不能重复的,如何更新呢?这就要用到以下的sql

"insert into ads_hour values(?, ?) on duplicate key update count=?"

on duplicate key update  意为  如果主键存在则更新

Spark 向数据库导出数据时,如何避免主键重复的问题

原文:https://www.cnblogs.com/yangxusun9/p/12919163.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!