需求背景:为了方便人工审核映射类目,需要采集类目排行榜的前四个商品信息,用于审核的时候参照
需求实现:
一、服务端
1、筛选多站点类目映射表,优先取有产品的类目(无产品的类目作为第二优先级采集)
2、将美国站类目和对应的映射站点类目都保存到采集表(需要包括站点,类目路径,末节点ID)
3、将采集到的数据写入到系统部的记录表
二、采集端
根据写入的类目采集数据,通过URL拼装的方式(参考上一个TOP采集需求),进入排行榜页面,采集排行榜前四的商品
1、采集缩略图,标题,url
2、根据采集的标题翻译成中文,也保存到采集表,即需要保存四个字段 缩略图,原标题,中文标题,url



