SqlServer 复制中将大事务分成小事务分发的方法

站长资源 2024/12/26 佚名

2 0 1

在sql server 复制中，当在发布数据库执行1个大事务时，如一次性操作十万或百万以上的数据。当操作数据在发布数据库执行完成后，日志读取器代理将扫描事务日志，一次性传递到分发数据库中。若上个事务未传递完成，连续执行多个事务，日志读取器代理将扫描日志中多个事务同时传递到分发数据库中，默认最大扫描500个事务。如果执行多次上百万或千万的数据将堵塞很久。

日志读取器代理可配置将大事务划分为多个小事务进行传递到分发数据库中，分发队列则按照小事务分发到订阅数据库中，这样数据就很快同步！

在没改代理参数之前，本人执行1次插入30万的数据到发布表中。插入完成后，监控发布到分发的记录如下：

可以看到，这1个事务的命令都得一次传递完才能分发，而分发又消耗时间，这里等待太久影响事务的实时性。
如果还有其他事务，默认500（参考参数：-ReadBatchSize），也将一起传递，耗时较长。

现在更改参数，扫描到 1000 左右的命令就即时分发，需要设置如下参数：
-MaxCmdsInTran number_of_commands

注：该参数只能添加到日志读取器代理中，在代理配置文件没有此参数的设置。

添加后重启日志读取器代理。

再次插入 30 万的数据！~到监视器查看

可以看到，命令达到 1000 左右就进行分发了，此时查看订阅数据库，数据也同步过来了，这样就省去了较多扫描命令的时间。
更详细查看每个事务的命令数，如下：

SELECT top 10 A.xact_seqno,A.entry_time,COUNT(*) AS cmds
FROM distribution.dbo.MSrepl_transactions A(NOLOCK) 
INNER JOIN distribution.dbo.MSrepl_commands B(NOLOCK) 
ON A.xact_seqno=B.xact_seqno
GROUP BY A.xact_seqno,A.entry_time
ORDER BY cmds DESC

这个参数虽好，但是也可能引起数据的一致性。

如：

在发布更新了一批数据，但是订阅查询时却有不同。

分发事务遇到冲突或者死锁，也导致这部分的数据不一致。

参考：复制日志读取器代理

大事务,小事务,分发

广告合作：本站广告合作请联系QQ：858582 申请时备注：广告合作（否则不回）
免责声明：本站资源来自互联网收集,仅供用于学习和交流,请遵循相关法律法规,本站一切资源不代表本站立场,如有侵权、后门、不妥请联系本站删除！

评论“SqlServer 复制中将大事务分成小事务分发的方法”

暂无评论...

P70系列延期，华为新旗舰将在下月发布

3月20日消息，近期博主@数码闲聊站透露，原定三月份发布的华为新旗舰P70系列延期发布，预计4月份上市。

而博主@定焦数码爆料，华为的P70系列在定位上已经超过了Mate60，成为了重要的旗舰系列之一。它肩负着重返影像领域顶尖的使命。那么这次P70会带来哪些令人惊艳的创新呢？
根据目前爆料的消息来看，华为P70系列将推出三个版本，其中P70和P70 Pro采用了三角形的摄像头模组设计，而P70 Art则采用了与上一代P60 Art相似的不规则形状设计。这样的外观是否好看见仁见智，但辨识度绝对拉满。

更新日志

2024年12月26日

SqlServer 复制中将大事务分成小事务分发的方法

浅述SQL Server的聚焦强制索引查询条件和Columnstore Index

浅析SQL Server的分页方式 ISNULL与COALESCE性能比较

评论“SqlServer 复制中将大事务分成小事务分发的方法”

P70系列延期，华为新旗舰将在下月发布

更新日志

友情链接