任务描述
需求描述
一、背景

修复AI重生标题量词 严重错误。
业务价值:修复标题,控制风险,预估50w+
验收人:张敏
二、需求说明
2.1、AI重生标题:新增修复量词服务
流程:获取含有量词的listing --》重新进行标题后处理过滤--》上传修改标题。
检测数据量:2000w+
获取含有量词的listing:
1)生成时间在25-4-18 00:00:00 到25-4-25 16:00:00
2)站点:"US", "GB", "CA", "AU"
3)检测 AI生成结果基础表 t_ai_title_N--> aiTitle 是否含有 量词(量词取过滤信息表 · 钉钉文档)

4)同时满足上述所有条件则进行重新进行标题后处理过滤(1、判断字符数:70(含)到180(含)个字符 2、生成标题特殊字符过滤 3、AI重复单词删除接口 4、逸飞多语种侵权禁售词过滤 5、公司级过滤接口 6、再次判断字符长度:70(含)到180(含)个字符)
5)数据验证(需要导出数据给业务验证):SKU,站点,ASIN,AI标题,修复后标题,标题添加时间。
6)没有问题则进行上传修复标题。
三、风险控制
先跑1000条数据,让业务审核:SKU,站点,ASIN,AI标题,清洗后标题,标题添加时间。
验收标准
按需求验收


1、增加服务:AIBuryWord_repairTitle
2、服务日志,
3、服务执行节点记录,db.getCollection("HotColdDictionary").find({"TypeName" : "AiTitleHandler:repairTitle"}).limit(100).skip(0)
4、自测,清洗过后有变化,则存入上架队列表,状态Status=0
2、增加临时表,Amazon_Common_Queue_Temp,上线前先跑一批数据给业务查看,后面用来记录失败数据:未包含量词、未获取到清洗结果、清洗异常跳过
临时加入字段TitleAi、TitleClean,用于业务排查,正式上线将会去除。