暂无
任务描述
需求描述
一、背景
新关键词分级总表,由于数据库将一个SKU的关键词用一个字段存储,导致数据分析直接使用数据困难,需要将数据处理之后同步到bi库。
业务价值:快速应用关键词,预估100000.
验收人:刘昊林
二、需求说明
2.1、将关键词进行拆分同步到BI库
操作位置:关键词分级总表
逻辑:将关键词拆分成站点+SKU+关键词维度同步到BI库。
同步频率:每周1同步一次。
更新逻辑:先全量更新,后续则增量更新数据。
同步数据:
主键 SiteCode+Sku+Keyword
SiteCode
Sku
ExternalAsinNum
AddTime
UpdateTime
Keyword
AsinOrderType
AdOrderType
AsinMoreType
AbaType
SameLangType
ExternalRankType
ExternalAdType
AdRecomType
LikeSkuType
ListingOrderType
ExternalTitleType
AuditAccurateType
AuditSTType
BuryListingNum
OrderListingNum
AbaCartCount
AdOrderNum
KeywordAsinNum
SimilarityAsin6
SimilarityAsin7
SimilarityAsin8
SimilarityAsin9
AsinTitleNum6
AsinTitleNum7
AsinTitleNum8
AsinTitleNum9
UnMatchSkuType
三、验收标准
按需求将数据同步到BI库
新关键词分级总表,由于数据库将一个SKU的关键词用一个字段存储,导致数据分析直接使用数据困难,需要将数据处理之后同步到bi库。
业务价值:快速应用关键词,预估100000.
验收人:刘昊林
二、需求说明
2.1、将关键词进行拆分同步到BI库
操作位置:关键词分级总表
逻辑:将关键词拆分成站点+SKU+关键词维度同步到BI库。
同步频率:每周1同步一次。
更新逻辑:先全量更新,后续则增量更新数据。
同步数据:
主键 SiteCode+Sku+Keyword
SiteCode
Sku
ExternalAsinNum
AddTime
UpdateTime
Keyword
AsinOrderType
AdOrderType
AsinMoreType
AbaType
SameLangType
ExternalRankType
ExternalAdType
AdRecomType
LikeSkuType
ListingOrderType
ExternalTitleType
AuditAccurateType
AuditSTType
BuryListingNum
OrderListingNum
AbaCartCount
AdOrderNum
KeywordAsinNum
SimilarityAsin6
SimilarityAsin7
SimilarityAsin8
SimilarityAsin9
AsinTitleNum6
AsinTitleNum7
AsinTitleNum8
AsinTitleNum9
UnMatchSkuType
三、验收标准
按需求将数据同步到BI库
验收标准
按需求导出数据
1、每周按照id同步,4天可以同步完成
2、直接用datax同步,3小时能同步一个站点,但是会造成内存崩溃(超大字段)