首页 > 其他 > 详细

SSIS 数据并发处理

时间:2015-11-09 20:55:43      阅读:261      评论:0      收藏:0      [点我收藏+]

1,利用优先约束来并发处理数据,Data Flow Task 和 Data Flow Task 1 是并发执行的,而 Data Flow Task2 必须等到 Data Flow Task 和 Data Flow Task 1 执行完成之后,才开始执行。

技术分享

 

2,如何从一个数据源表中并发处理数据,设计思路是

将一个表中的数据平均分成N份,各个数据流之间并发处理。

例如分为3份,可以使用%3,将数据分为三个子数据流并发处理数据。

select *
from dbo.SourceTable
where checksum(table_column)%3=0


select *
from dbo.SourceTable
where checksum(table_column)%3=1


select *
from dbo.SourceTable
where checksum(table_column)%3=2

技术分享

 

3,最大的并发程度

由于Server在同一时间执行的Process的最大数量是CPU的个数,一个CPU在某一时刻,只有一个Process处于Running状态,所以最大并发度不要超过CPU的个数。

 

并发度如何控制,后续会探究。。。

 

SSIS 数据并发处理

原文:http://www.cnblogs.com/ljhdo/p/4629407.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!