任务描述

任务背景：

美客多在完成运维任务：35665 美客多listingAPI数量与后台差异大问题修复 2，35630 美客多listingAPI数量与后台差异大问题修复



已安排2月10日周末开始执行数据同步，当前数据差异在：72.75W+ 比较周五（2月10日）的差异130W，差异在缩小，缩小了57W

说明现在的全量是有效果的，目前的问题是全量数据同步量过大，跑的比较慢


任务内容：

（1）按照平台+来源渠道+CBTID维度过滤重复数据，去重数据（保留日期最大的一条），快速执行完成（先通过SQL执行）

（2）改造美客多的全量同步服务逻辑，不在使用中间表：m_mercadolibre_listing_productid，而是使用MQ消息模式同步

注意：直接本地环境部署，完成快速上线并消费数据

（3）美客多新全量同步服务需按照平台+CBTID维度,去掉重复数据,将同步状态(status=0)的数据,导入到MQ消息队列中,执行同步



历史记录  
  1. 2023-02-17 08:59:42, 由 刘瀚泽 创建。
  2. 2023-02-17 09:15:18, 由 程伟 指派给 shilin。
    修改了 指派给 ，旧值为 "chengwei"，新值为 "shilin"。
    修改了 预计剩余，旧值为 "3"，新值为 "4"。
  3. 2023-02-17 09:30:45, 由 刘瀚泽 编辑。
    修改了 预计剩余，旧值为 "4"，新值为 "3"。
    修改了 任务描述，区别为：
    005- 已安排2月10日周末开始执行数据同步，当前数据差异在：72.75W+ 比较周五（2月10日）的差异130W，差异在缩小，搜小了57W
    005+ 已安排2月10日周末开始执行数据同步，当前数据差异在：72.75W+ 比较周五（2月10日）的差异130W，差异在缩小，缩小了57W
    013- <img src="/zentao/file-read-243192.png" alt="" />
    013+
    005- <p>已安排2月10日周末开始执行数据同步，当前数据差异在：72.75W+ 比较周五（2月10日）的差异130W，差异在缩小，搜小了57W</p>
    005+ <p>已安排2月10日周末开始执行数据同步，当前数据差异在：72.75W+ 比较周五（2月10日）的差异130W，差异在缩小，缩小了57W</p>
    013- <p><img src="/zentao/file-read-243192.png" alt="" /></p>
    013+ <p><img src="{243192.png}" alt="" /></p>
  4. 2023-02-17 17:20:43, 由 shilin 完成。
    修改了 总计消耗，旧值为 "0"，新值为 "3"。
    修改了 指派给 ，旧值为 "shilin"，新值为 "liuhanze"。
    修改了 实际完成，旧值为 ""，新值为 "2023-02-17 17:20:40"。
    修改了 任务状态，旧值为 "wait"，新值为 "done"。
    修改了 实际开始，旧值为 "0000-00-00 00:00:00"，新值为 "2023-02-17 17:20:43"。
    修改了 预计剩余，旧值为 "3"，新值为 "0"。
    修改了 由谁完成，旧值为 ""，新值为 "shilin"。
  5. 2023-03-12 15:40:32, 由 刘瀚泽 关闭。
    修改了 任务状态，旧值为 "done"，新值为 "closed"。
    修改了 指派给 ，旧值为 "liuhanze"，新值为 "closed"。
    修改了 由谁关闭，旧值为 ""，新值为 "liuhanze"。
    修改了 关闭时间，旧值为 "0000-00-00 00:00:00"，新值为 "2023-03-12 15:40:32"。
    修改了 关闭原因，旧值为 ""，新值为 "done"。
返回
所属迭代 技术研发中心 2月运维事项（2023年）
所属模块 /
相关需求 暂无
指派给 Closed 于 2023-03-12 15:40:32
任务类型 运维
任务标签 初始
开发组 有品开发组
任务状态 已关闭
进度 100%
优先级 P0
关键词
抄送给
由谁创建 刘瀚泽 于 2023-02-17 08:59:41
由谁完成 shilin 于 2023-02-17 17:20:40
由谁取消 暂无
由谁关闭 刘瀚泽 于 2023-03-12 15:40:32
关闭原因 已完成
最后编辑 刘瀚泽 于 2023-03-12 15:40:32
团队 最初预计 总计消耗 预计剩余
工时信息
最初预计 3工时
总计消耗 3工时
预计剩余 0工时
预计开始 2023-02-17
实际开始 2023-02-17
截止日期 2023-02-17