任务描述
需求描述
一、背景
背景:需将商标词下的描述详情进行 【一个单词】【二个单词】【三个单词】 拆解,提炼出对应关键词用于与亚马逊类目进行关联,建立商标词描述高频词库,针对亚马逊类目进行敏感词过滤,
业务价值:减少敏感词误杀,提升敏感词过滤准确度。
二、需求说明
2.1、从商标词库对应商标词描述详情提炼高频关键词
方案:所有商标词描述提炼拆解--》TOP高频词(从高到低)
1、所有商标词描述详情提炼拆解
提炼逻辑:用词频统计功能将所有商标库下描述详情字段分词得到【1个单词高频词】、【2个单词高频词】、【3个单词高频词】,增量服务。
商标词库:找育贵协调
商标描述字段:categorydesc
3、筛选出商标词描述详情高频词
3.1、输出数据:
1)总表:高频关键词,出现次数,商标词个数,更新时间。
2)明细:高频关键词,商标词,商标词描述详情,语种,更新时间。
3)排除介词,特殊符号:一个单词全是介词或者特殊符号则排除,两个单词全是介词或者特殊符号则排除,三个单词全是介词或者特殊符号则排除,
注:1、所有商标词详情需要进行统计高频词,数据增量存储用于数据分析。2、预估上千万的数据,需考虑性能问题及存储问题。

验收标准
暂无