首页 > 其他 > 详细

数据采集系统

时间:2019-10-28 18:38:57      阅读:114      评论:0      收藏:0      [点我收藏+]

1、如何保证执行脚本不重复

每个脚本都带有一个key.在执行脚本的时候,key都会维护到一个聊表中,在执行前,先确定列表中是否有这个key,对key的数量也有限制,防止太多语句执行

2、如何保证数据的同步

每天都会去查询业务库中的id,和绩效库匹配,如果没有这个id,就认为这条数据已删,每天都会采集两天的数据(因为有些表只到日期,没有小时),脚本设置业务主键,用于同步’

3、登录有效期是8小时,使用session和kokke实现自动登录

4、

数据采集系统

原文:https://www.cnblogs.com/zj-xu/p/11754063.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!