4.2 KiB
4.2 KiB
id, title, status, phase, deps, created
| id | title | status | phase | deps | created |
|---|---|---|---|---|---|
| T-662a | 商品状态领域模型、数据库迁移与采集检测 | TODO | 7 | 2026-07-18 |
T-662a 商品状态领域模型、数据库迁移与采集检测
问题 / 背景
编辑页仍可打开的「未上架」「审核中」商品当前会被当作普通商品采集,后续可能继续消耗 AI 点数或进入更新流程。真实证据见:
docs/html/未上架商品提示.htmldocs/html/审核中商品提示.html
两份样本均使用 Shopee EDS alert 组件;原「审核中」样本文件名尾部空格已移除,后续文档和测试统一使用无空格路径。
状态契约
- 新增共享领域模块
app/product_status.py,作为①②③唯一状态事实来源,避免各 Tab 重复定义枚举、显示文字和异常判断。 - SQLite 保存稳定代码,不保存中文枚举:
normal:未发现已知异常横幅;界面显示「正常」,不宣称一定在售;unlisted:未上架;reviewing:审核中;unknown:历史 NULL、DOM 检测失败或出现未识别状态横幅。
NULL和非法历史值统一按unknown读取;unlisted/reviewing属于异常状态,normal/unknown默认可继续后续流程。- 文本归一化:trim、连续空白折叠、繁简白名单兼容;禁止依赖
data-v-*。
DOM 检测规则
- 编辑页就绪后一次读取
.eds-alert.eds-alert--warning下的.eds-alert-title与.eds-alert-desc,返回结构化文本列表,不保存整段 HTML。 - 白名单:
審核中/审核中→reviewing;您的商品未上架→unlisted。
- 查询成功且没有 warning 横幅 →
normal。 - 有 warning 横幅但没有白名单命中 →
unknown,不得保留旧的normal或误判正常。 - DOM 查询抛错或返回结构非法 →
unknown,但不使标题/封面采集失败;错误写脱敏诊断日志。 - 多横幅时跳过无关警告,取 DOM 顺序中第一个白名单命中项;没有命中则为
unknown。 product_status_note只保存归一化后的 title/desc 摘要,最多 2000 字符;product_status_at记录本次检测时间。- 现有
PRODUCT_UNAVAILABLE_TEXT_MARKERS和商品失效 toast 逻辑保持不变。
数据模型与采集接入
tasksadditive 新增:product_status TEXT NULL;product_status_note TEXT NULL;product_status_at TEXT NULL。
db.init_db()使用幂等原位迁移;Taskdataclass 暴露三字段。- 扩展
db.set_collected()时使用新增 keyword-only 参数,保持现有位置参数调用兼容;标题、封面与商品状态在同一事务写入。 editor.collect()在同一编辑页会话中读取状态,返回状态快照;CollectWorker 透传到 DB。重新采集覆盖三字段。- 状态检测失败时仍可成功采集标题/封面,保存
unknown与当前检测时间。
验收标准
- 两份真实样本分别识别为
unlisted/reviewing;title 尾部空格与繁简不影响结果。 - 无 warning 为
normal;未知 warning、DOM 异常和非法返回均为unknown。 - 多横幅共存按约定选择,note 规范化且受长度限制。
- 旧库迁移幂等,历史 NULL 显示语义为「未知」。
- 重新采集覆盖状态、note 和时间;检测失败不阻断标题/封面采集。
- 不改变商品失效判断、Chrome/CDP 页面打开关闭和 Shopee 更新逻辑。
测试与文档
tests/test_editor_login.py:样本结构、无横幅、未知横幅、多横幅、异常降级与 collect 回归。tests/test_db.py:迁移幂等、NULL 语义、keyword-only 写入与重新采集覆盖。- 更新
docs/04-architecture.md第七节和docs/api.md;登记样本路径、选择器纪律和状态代码。
验证
py -3.10 -m unittest tests.test_editor_login tests.test_db
py -3.10 -m unittest discover -s tests
py -3.10 -m ruff check app tests main.py
py -3.10 -m compileall app main.py
git diff --check
非目标
- 不识别无样本的售罄、违规、禁卖等状态;未知横幅先归
unknown。 - 不新增 GUI,不过滤任务,不回写 Excel,不做定时刷新。
执行记录
- 待实现。