任务描述

1. 问题描述分析


  BulkCopyAddNew:RB_Product_Log,DataTable:Count:999,BatchSize:2000  批量插入产品日志表,每次插入999个,

很慢,每天出现在慢sql列表里,执行时间需588秒到298秒不等,并发是写日志排队,堆积了业务日志,增加了数据库的负荷。


23906803 BulkCopyAddNew:RB_Product_Log,DataTable:Count:701,BatchSize:2000 2022-05-17 03:03:52.670 588.117

23906611 BulkCopyAddNew:RB_Product_Log,DataTable:Count:830,BatchSize:2000 2022-05-17 03:02:15.453 239.660

23767635 BulkCopyAddNew:RB_Product_Log,DataTable:Count:169,BatchSize:2000 2022-05-14 02:59:32.667 298.661


2. 解决方案

  目前批量插入的size=2000条,批量插入很多慢sql,导致执行效率不高,并发时等待排队插入日志,

   建议,将批量插入日志的size 改为40 ,如每次批量插入40条,时间很短很快,其他插入日志的操作不用等待,提高了数据库的处理能力

 

   友军组已经缩小了批量插入的其他业务的批量插入的量,效果明显



历史记录  
  1. 2022-05-17 15:21:05, 由 陈少军 创建。
  2. 2022-05-17 15:21:24, 由 陈少军 指派给 何建宝。
    修改了 预计剩余,旧值为 "0",新值为 "2"。
    参考 解决方案 修改
  3. 2022-05-24 15:21:04, 由 何建宝 完成。
    修改了 总计消耗,旧值为 "0",新值为 "2"。
    修改了 指派给 ,旧值为 "hejianbao",新值为 "chenshaojun"。
    修改了 实际完成,旧值为 "",新值为 "2022-05-24 15:20:00"。
    修改了 任务状态,旧值为 "wait",新值为 "done"。
    修改了 实际开始,旧值为 "0000-00-00 00:00:00",新值为 "2022-05-24 15:21:04"。
    修改了 预计剩余,旧值为 "2",新值为 "0"。
    修改了 由谁完成,旧值为 "",新值为 "hejianbao"。

    已经将产品日志批量提交数量进行修改,每批次提交50条记录

  4. 2022-07-16 17:09:17, 由 zhengqiao 关闭。
    修改了 任务状态,旧值为 "done",新值为 "closed"。
    修改了 指派给 ,旧值为 "chenshaojun",新值为 "closed"。
    修改了 由谁关闭,旧值为 "",新值为 "zhengqiao"。
    修改了 关闭时间,旧值为 "0000-00-00 00:00:00",新值为 "2022-07-16 17:09:17"。
    修改了 关闭原因,旧值为 "",新值为 "done"。
所属迭代 系统管理部 - 系统服务优化
所属模块 /
相关需求 暂无
指派给 Closed 于 2022-07-16 17:09:17
任务类型 后端
任务标签 初始
开发组
任务状态 已关闭
进度 100%
优先级 P2
关键词
抄送给 刘灿 黄金龙 胡晓龙
由谁创建 陈少军 于 2022-05-17 15:21:05
由谁完成 何建宝 于 2022-05-24 15:20:00
由谁取消 暂无
由谁关闭 zhengqiao 于 2022-07-16 17:09:17
关闭原因 已完成
最后编辑 zhengqiao 于 2022-07-16 17:09:17
团队 最初预计 总计消耗 预计剩余
工时信息
最初预计 0工时
总计消耗 2工时
预计剩余 0工时
预计开始 2022-05-17
实际开始 2022-05-24
截止日期 2022-05-24