任务描述
需求描述
需求背景：
目前业务反馈刊登组装资料时，存在很多问题，需要排查原因。
需求内容：
1、针对刊登成功的，将刊登资料数据同步到MySQL
2、数据按listing维度记录， 记录字段：渠道ID、渠道SKU 、来源渠道、标题、关键词、亮点、描述
3、数据同步频率、范围：每天同步，获取近7天刊登成功的资料数据
注意：只需要保留最近7天的数据。
验收标准
验收人：戴宝山
数据正常同步
历史记录
- 2023-05-24 11:23:02, 由 罗友军 创建。
-
2023-05-25 18:39:30, 由 张家添 完成。
修改了 总计消耗，旧值为 "0"，新值为 "9"。
修改了 指派给 ，旧值为 "zhangjiatian"，新值为 "luoyoujun"。
修改了 实际完成，旧值为 ""，新值为 "2023-05-25 18:31:19"。
修改了 任务状态，旧值为 "wait"，新值为 "done"。
修改了 实际开始，旧值为 "0000-00-00 00:00:00"，新值为 "2023-05-25 18:39:30"。
修改了 预计剩余，旧值为 "9"，新值为 "0"。
修改了 由谁完成，旧值为 ""，新值为 "zhangjiatian"。
-
2023-05-25 18:39:42, 由 张家添 编辑。
修改了 任务描述，区别为：
001-
<img src="/zentao/file-read-268449.png" alt="" />
001+001-
<p><img src="/zentao/file-read-268449.png" alt="" /></p>
001+ <p><img src="{268449.png}" alt="" /></p>可提测 -
2023-05-26 11:19:43, 由 张家添 编辑。
修改了 任务描述，区别为：
001-
<img src="/zentao/file-read-268449.png" alt="" />
001+001-
<p><img src="/zentao/file-read-268449.png" alt="" /></p>
001+ <p><img src="{268449.png}" alt="" /></p>DROP TABLE IF EXISTS `Amazon_AutoPublishListingInfo`;
CREATE TABLE `Amazon_AutoPublishListingInfo` (
`OrderSourceSkuId` int NOT NULL COMMENT 'listingId',
`OrderSourceId` int NOT NULL COMMENT '渠道ID',
`OrderSourceName` varchar(100) NULL COMMENT '来源渠道',
`OrderSourceSku` varchar(100) NULL COMMENT '渠道SKU',
`SiteCode` varchar(10) NULL COMMENT '站点',
`Sku` varchar(50) NULL COMMENT '系统sku',
`Asin` varchar(50) NULL COMMENT 'Asin',
`Title` varchar(500) NULL COMMENT '标题',
`Keyword` varchar(1000) NULL COMMENT '关键词',
`BulletPoint1` varchar(2000) NULL COMMENT '亮点1',
`BulletPoint2` varchar(2000) NULL COMMENT '亮点2',
`BulletPoint3` varchar(2000) NULL COMMENT '亮点3',
`BulletPoint4` varchar(2000) NULL COMMENT '亮点4',
`BulletPoint5` varchar(2000) NULL COMMENT '亮点5',
`Description` varchar(8000) NULL COMMENT '描述',
`PublishAddTime` datetime NULL COMMENT '刊登记录的修改时间',
`AddTime` datetime NULL COMMENT '入库时间'
) ENGINE = OLAP PRIMARY KEY(`OrderSourceSkuId`) COMMENT "刊登成功记录"
DISTRIBUTED BY HASH(`OrderSourceSkuId`) BUCKETS 8 -- 重要就是这一句，需要分桶
PROPERTIES(
"replication_num" = "3", -- 测试机没有副本，所以用1，生产用3
"in_memory" = "false",
"storage_format" = "DEFAULT",
"enable_persistent_index" = "false",
"compression" = "LZ4"
);
生产需要执行语句
-
2023-10-31 16:48:40, 由 周杰 关闭。
修改了 任务状态，旧值为 "done"，新值为 "closed"。
修改了 指派给 ，旧值为 "luoyoujun"，新值为 "closed"。
修改了 由谁关闭，旧值为 ""，新值为 "zhoujie"。
修改了 关闭时间，旧值为 "0000-00-00 00:00:00"，新值为 "2023-10-31 16:48:40"。
修改了 关闭原因，旧值为 ""，新值为 "done"。
| 所属迭代 | 智能中心-智能刊登迭代 |
|---|---|
| 所属模块 | 智能中心-需求池 战略独立项目 智能刊登 |
| 相关需求 | 刊登成功资料数据同步服务 |
| 指派给 | Closed 于 2023-10-31 16:48:40 |
| 任务类型 | 后端 |
| 任务标签 | 初始 |
| 开发组 | 仓储物流开发组 |
| 任务状态 | 已关闭 |
| 进度 | 100% |
| 优先级 | P2 |
| 关键词 | |
| 抄送给 |
| 由谁创建 | 罗友军 于 2023-05-24 11:23:02 |
|---|---|
| 由谁完成 | 张家添 于 2023-05-25 18:31:19 |
| 由谁取消 | 暂无 |
| 由谁关闭 | 周杰 于 2023-10-31 16:48:40 |
| 关闭原因 | 已完成 |
| 最后编辑 | 周杰 于 2023-10-31 16:48:40 |
| 团队 | 最初预计 | 总计消耗 | 预计剩余 |
|---|
工时信息
| 最初预计 | 9工时 |
|---|---|
| 总计消耗 | 9工时 |
| 预计剩余 | 0工时 |
| 预计开始 | 2023-05-24 |
| 实际开始 | 2023-05-25 |
| 截止日期 | 2023-05-27 |
2、bi库，增加表amazon_autopublishlistinginfo。
增加服务：AutoPublishListingToBiJob，生产已加，等待开启
3、核心代码4、自测数据