任务描述

需求背景

在跑通用场景时,发现渠道SKU的首单时间大部分都是为null,导致通用场景数据执行量少,需要重刷


需求内容

1.渠道sku首单时间为null重置
因4亿多的渠道sku,有首单和销量的占比极少,大部分都是无首单销量为0的数据,在条件过滤时会过滤不出来,所以对这些无首单的数据进行数据升级。


2.通用场景逻辑优化,减小对mongodb数据库压力
之前通用场景筛选时根据条件动态拼成mongodb语句去查询,而这些语句很难走索引和建索引,有些可能会对mongodb进行全表扫描,降低性能。所以对通用场景筛选逻辑进行优化,优先查询有索引且数据量较小的数据,在查数据量大的数据。


3.应运维要求,店铺末单/系统sku末单/站点sku末单读取数据源切换到erp读库。


4.渠道sku最后一次流量时间优化,恢复更新遗漏数据
之前渠道sku最后一次流量时间更新服务会漏数据, 导致时间不准,影响流量统计和通用场景筛选数据准确性,再加上统计数据源变更,由之前的Amazon_Reports_SalesTrafficReport变更为Amazon_Child_Reports_SalesTrafficReport,部分逻辑需要重写。并针对所有listing需要重新刷流量数据

需求描述

需求背景

在跑通用场景时,发现渠道SKU的首单时间大部分都是为null,导致通用场景数据执行量少,需要重刷


需求内容

1.渠道sku首单时间为null重置
因4亿多的渠道sku,有首单和销量的占比极少,大部分都是无首单销量为0的数据,在条件过滤时会过滤不出来,所以对这些无首单的数据进行数据升级。


2.通用场景逻辑优化,减小对mongodb数据库压力
之前通用场景筛选时根据条件动态拼成mongodb语句去查询,而这些语句很难走索引和建索引,有些可能会对mongodb进行全表扫描,降低性能。所以对通用场景筛选逻辑进行优化,优先查询有索引且数据量较小的数据,在查数据量大的数据。


3.应运维要求,店铺末单/系统sku末单/站点sku末单读取数据源切换到erp读库。


4.渠道sku最后一次流量时间优化,恢复更新遗漏数据
之前渠道sku最后一次流量时间更新服务会漏数据, 导致时间不准,影响流量统计和通用场景筛选数据准确性,再加上统计数据源变更,由之前的Amazon_Reports_SalesTrafficReport变更为Amazon_Child_Reports_SalesTrafficReport,部分逻辑需要重写。并针对所有listing需要重新刷流量数据

验收标准
渠道sku首单时间为null重置;重刷流量数据
历史记录  
  1. 2024-02-04 09:18:52, 由 商雷 创建。
  2. 2024-02-04 09:19:13, 由 刘学森 启动。
    修改了 实际开始,旧值为 "0000-00-00 00:00:00",新值为 "2024-02-04 09:19:12"。
    修改了 任务状态,旧值为 "wait",新值为 "doing"。
  3. 2024-02-04 09:34:23, 由 刘学森 记录工时,消耗 8 小时。
    1.渠道sku首单时间为null重置
  4. 2024-02-04 09:34:23, 由 刘学森 记录工时,消耗 24 小时。
    2.通用场景筛选逻辑优化
  5. 2024-02-04 09:34:23, 由 刘学森 记录工时,消耗 8 小时。
    修改了 总计消耗,旧值为 "0",新值为 "40"。
    3. 店铺末单/sku末单/站点sku末单时间统计数据源由主库切换到从库,并处理读库延迟时间
  6. 2024-02-04 09:36:12, 由 刘学森 记录工时,消耗 16 小时。
    修改了 总计消耗,旧值为 "40",新值为 "56"。
    4.渠道sku最后一次流量时间优化,填补之前漏数据逻辑,重新跑出完整数据,统计数据源变更逻辑重写等
  7. 2024-02-04 09:37:26, 由 刘学森 完成。
    修改了 总计消耗,旧值为 "56",新值为 "57"。
    修改了 指派给 ,旧值为 "liuxuesen",新值为 "shanglei"。
    修改了 实际完成,旧值为 "",新值为 "2024-02-04 09:36:36"。
    修改了 任务状态,旧值为 "doing",新值为 "done"。
    修改了 预计剩余,旧值为 "54",新值为 "0"。
    修改了 由谁完成,旧值为 "",新值为 "liuxuesen"。
    1月份已做完并上线
  8. 2024-02-05 08:32:35, 由 商雷 编辑。
    修改了 所属模块,旧值为 "1716",新值为 "0"。
    修改了 指派给 ,旧值为 "shanglei",新值为 "luoyoujun"。
  9. 2024-02-28 10:25:10, 由 刘霞 编辑。
    修改了 最初预计,旧值为 "54",新值为 "24"。
所属迭代 智能中心-智能刊登迭代
所属模块 /
相关需求 技术方案优化
指派给 罗友军 于 2024-02-05 08:32:34
任务类型 后端
任务标签 初始
开发组 仓储物流开发组
任务状态 已完成
进度 100%
优先级 P0
关键词
抄送给
由谁创建 商雷 于 2024-02-04 09:18:52
由谁完成 刘学森 于 2024-02-04 09:36:36
由谁取消 暂无
由谁关闭 暂无
关闭原因 暂无
最后编辑 刘霞 于 2024-02-28 10:25:10
团队 最初预计 总计消耗 预计剩余
工时信息
最初预计 24工时
总计消耗 57工时
预计剩余 0工时
预计开始 2024-02-04
实际开始 2024-02-04
截止日期 2024-02-29