任务描述


需求描述
需求明细:https://v4mhnh.axshare.com/#g=1&p=%E5%90%8E%E5%8F%B0%E7%B1%BB%E7%9B%AE%E5%88%86%E6%9E%90%E9%87%87%E9%9B%86


一、背景
背景:目前智能选品的选品模型比较单一,每周推荐产品相似度比较高,需要增加推荐的多样性,后续优化模型时要考虑模型数据的多维性,比如考虑市场容量大小和上新竞争程度大小,产品定价区间等,即需要扩展关键词的指标维度,故需要运用到亚马逊官方的选品工具。

目的:为了差异和丰富每周推荐的产品,需要采集亚马逊后台官方的选品数据,用于新品推荐模型分析。

二、需求说明
2.1、后台类目分析采集

采集位置:
1)Amazon 后台--》增长--》选品指南针--》类目分析--》类目分析
2)Amazon 后台--》增长--》选品指南针--》类目分析--》产品表现
3)Amazon 后台--》增长--》选品指南针--》类目分析--》产品特征趋势

采集输入: 账号+站点,支持多账号采集。

采集输出:
1)类目分析表,字段见原型。
2)产品表现,字段见原型。
3)产品表现表日期表,字段见原型。
4)产品特征趋势,字段见原型。



验收标准
用于选品模型分析,用于建模验证。需便于查询分析
附件
历史记录  
  1. 2022-06-20 15:03:42, 由 罗友军 创建。
  2. 2022-06-22 17:19:05, 由 zhubin 添加备注。

    一级类目,二级类目,所有的关键词都在库里了

  3. 2022-06-22 17:23:21, 由 zhubin 添加备注。

    部分代码实现:

    1.第一步:抓包(900多次);

    2.第二步:解析原始json到本地csv;

    3.第三步:显示建立关键词对应的一级和二级类目关联关系;

    4.将csv导入到库里面;


  4. 2022-06-22 17:25:41, 由 zhubin 编辑。
    上传了附件 商店名称.csv,类别表.csv,商品类型表.csv,商品类型关键词.csv
  5. 2022-06-22 18:02:56, 由 zhubin 添加备注。

  6. 2022-06-28 16:33:42, 由 zhubin 添加备注。
  7. 2022-06-28 16:35:22, 由 zhubin 添加备注。

    根据一万多个关键词动态创建请求对象模拟请求一万多次产品表现和产品特征趋势:

  8. 2022-06-28 16:36:30, 由 zhubin 添加备注。

    爬取亚马逊后台数据工程地址:

    http://10.158.158.101:808/svn/zhcxkj2022/ZhcxkjSpidersCenter

  9. 2022-06-28 17:04:36, 由 zhubin 添加备注。

    因为需要累计模拟请求两万多次,中途可能会中断(也可能cookie过期了),如果中断了,可以在模板中找到关键词Value对应的那行,把已经执行的行数干掉,然后继续跑爬取服务:

  10. 2022-06-28 17:04:46, 由 zhubin 完成。
    修改了 总计消耗,旧值为 "0",新值为 "36"。
    修改了 指派给 ,旧值为 "zhubin",新值为 "luoyoujun"。
    修改了 实际完成,旧值为 "",新值为 "2022-06-28 17:04:41"。
    修改了 任务状态,旧值为 "wait",新值为 "done"。
    修改了 实际开始,旧值为 "0000-00-00 00:00:00",新值为 "2022-06-28 17:04:46"。
    修改了 预计剩余,旧值为 "36",新值为 "0"。
    修改了 由谁完成,旧值为 "",新值为 "zhubin"。
  11. 2022-09-05 17:29:19, 由 罗友军 关闭。
    修改了 任务状态,旧值为 "done",新值为 "closed"。
    修改了 指派给 ,旧值为 "luoyoujun",新值为 "closed"。
    修改了 由谁关闭,旧值为 "",新值为 "luoyoujun"。
    修改了 关闭时间,旧值为 "0000-00-00 00:00:00",新值为 "2022-09-05 17:29:19"。
    修改了 关闭原因,旧值为 "",新值为 "done"。
所属迭代 智能中心-智能选品迭代
所属模块 智能中心-需求池  战略独立项目   智能选品
相关需求 后台类目分析采集
指派给 Closed 于 2022-09-05 17:29:19
任务类型 后端
任务标签 初始
开发组
任务状态 已关闭
进度 100%
优先级 P2
关键词
抄送给
由谁创建 罗友军 于 2022-06-20 15:03:42
由谁完成 zhubin 于 2022-06-28 17:04:41
由谁取消 暂无
由谁关闭 罗友军 于 2022-09-05 17:29:19
关闭原因 已完成
最后编辑 罗友军 于 2022-09-05 17:29:19
团队 最初预计 总计消耗 预计剩余
工时信息
最初预计 36工时
总计消耗 36工时
预计剩余 0工时
预计开始 0000-00-00
实际开始 2022-06-28
截止日期 0000-00-00