任务描述
需求描述
一、背景
目前标题推送任务匹配不及时,需要进行优化成分布式处理,现在推送任务是20张表 开了 20个线程 。
业务价值:加速标题生成速度,预估10w+
验收人:罗友军
二、需求说明
标题推送任务改成分布式推送
涉及功能:1)标题任务推送:导入任务--》标题生成。 2)标题匹配:标题库--》导入表。
优化逻辑:如果要加速需改为分布式按 来源渠道维度处理 (执行优化方案找罗友军沟通)。
三、验收标准
推送任务当天可以支持2000w的处理量
验收标准
推送任务当天可以支持2000w的处理量
修改点:
1.标题推送任务改为来源渠道分布式推送
2.AI重新标题提交服务性能优化
关键词组装增加多线程
关键词翻译改为异步翻译
词性还原接口增加重试
敏感词合并接口增加重试
批量翻译接口增加重试
标题AI检测增加多线程
敏感词接口增加多线程
关键词AI检测增加多线程
重生标题速度从1百万/天 提升到了4-5百万/天