STORY #13415 美客多无效数据处理及站点listing同步逻辑优化 - 技术中心-需求池

业务需求

需求描述

需求背景

美客多正常情况下，一个站点对应一条可售卖的数据，当前发现同listing 会存在同site code 下多条平台ID，该问题的存在会造成无效的数据，浪费补货资源，也会导致系统统计listing的在线listing数与AP不一致！

需求内容

功能一

1.现有同步服务插入数据时判断（同SiteId + 同productID）是否存在SiteProductId,存在更新，不存在插入，避免脏数据产生（同SiteId + 同productID 下只有一笔 siteproductID数据）

2.现有存量数据的清理，新增一张临时表存储站点listing数据，多笔siteproductID只保留其中自增ID最大的一条数据（即更新时间最大），其余数据可直接清理删除！

案例：

m_mercadolibre_listing_site 存在同siteID 有多笔 siteproductid

例子：CBT1574085721 来源渠道 9675

验收标准

价值描述

控制风险：减少因为存在脏数据造成的，浪费资源，无效补货，无效调价等问题

历史记录

2023-01-19 16:40:13, 由 刘瀚泽 创建。
2023-01-28 08:55:49, 由 刘瀚泽 编辑。
修改了 预计工时，旧值为 "8"，新值为 "4"。
2023-01-28 10:35:19, 由刘灿记录评审结果，结果为 确认通过。
修改了 评审时间，旧值为 "0000-00-00"，新值为 "2023-01-28"。
修改了 指派给 ，旧值为 "Admin186"，新值为 "liuhanze"。
修改了 当前状态，旧值为 "draft"，新值为 "active"。
修改了 由谁评审，旧值为 ""，新值为 "Admin186"。
2023-01-28 14:36:55, 由 刘瀚泽 关联到迭代 综合平台智能刊登系统优化专项 。
2023-01-31 19:09:10, 由 刘瀚泽 编辑。
修改了 所处阶段 ，旧值为 "tested"，新值为 "released"。
修改了 设置阶段者，旧值为 ""，新值为 "liuhanze"。
2023-03-15 22:42:38, 由 刘瀚泽 关闭，原因为 已完成 。
修改了 由谁关闭，旧值为 ""，新值为 "liuhanze"。
修改了 关闭日期，旧值为 "0000-00-00 00:00:00"，新值为 "2023-03-15 22:42:38"。
修改了 指派给 ，旧值为 "liuhanze"，新值为 "closed"。
修改了 当前状态，旧值为 "active"，新值为 "closed"。
修改了 所处阶段，旧值为 "released"，新值为 "closed"。
修改了 关闭原因，旧值为 ""，新值为 "done"。
2023-11-16 20:31:18, 由周杰编辑。
修改了 所属模块，旧值为 "1659"，新值为 "1877"。