目前亚马逊采集功能不稳定,采集逻辑需要统一管理。
业务价值:保证亚马逊采集稳定,预估30000.
验收人:李青
二、需求说明
亚马逊采集功能优化
操作位置:所有亚马逊采集功能(竞品店铺(003、001、010)、物流趋势、词搜、外部竞品、实验数据)
修改逻辑:
现有的亚马逊采集任务越来越多,asin详情采集会有大量的重复采集。需要整合整个亚马逊采集的项目,所有的详情采集采用一个公共表AmzAsinDetail,这样会节省大量的资源和时间
1、包括:竞品店铺(003、001、010)、物流趋势、词搜、外部竞品、实验数据。(图搜暂不改,因为有一个页面评论关键词需要额外采集,如果此字段没有用到,可以改过来)。
2、已asin+站点作为唯一键,各个服务采集到的asin,判断在AmzAsinDetail是否存在,存在则同步数据,不存在则插入一条新的记录,并用额外的服务定时去查询回写。
3、同步数据的过程中需要仔细核对每个需求的字段类型。
三、验收标准
1、亚马逊采集功能可以做到通用。
2、亚马逊采集功能稳定,采集输出数据准确。
