From f9c6dd3331843ead4ee9ce44b2dd6b82b44989aa Mon Sep 17 00:00:00 2001 From: chengma Date: Thu, 2 Jul 2026 14:02:53 +0800 Subject: [PATCH] feat: add generate progress and readable logs --- app/ai.py | 104 ++++++++++++++++++++++-- app/gui.py | 182 ++++++++++++++++++++++++++++++++++++++---- docs/06-tasks.md | 1 + docs/current-state.md | 17 ++-- progress.md | 14 ++++ tests/test_ai.py | 11 +++ tests/test_gui.py | 42 +++++++++- 7 files changed, 337 insertions(+), 34 deletions(-) diff --git a/app/ai.py b/app/ai.py index e3ba634..d6ea449 100644 --- a/app/ai.py +++ b/app/ai.py @@ -62,6 +62,14 @@ def gen_title( cfg, attempts, request_kind="json", + on_retry=lambda attempt, total_attempts, exc: _notify_retry( + on_step, + "title_request", + attempt, + total_attempts, + exc, + model, + ), ) _notify_step(on_step, "title_parse_response") text = _extract_text(data).strip() @@ -110,11 +118,33 @@ def gen_cover( attempts, request_kind="multipart", content_type=content_type, + on_retry=lambda attempt, total_attempts, exc: _notify_retry( + on_step, + "cover_request", + attempt, + total_attempts, + exc, + model, + ), ) else: payload = _image_chat_payload(model, cover_prompt, old_cover_path, resolution) _notify_step(on_step, "cover_request") - data = _call_with_retry(model, payload, cfg, attempts, request_kind="json") + data = _call_with_retry( + model, + payload, + cfg, + attempts, + request_kind="json", + on_retry=lambda attempt, total_attempts, exc: _notify_retry( + on_step, + "cover_request", + attempt, + total_attempts, + exc, + model, + ), + ) _notify_step(on_step, "cover_parse_response") image_bytes = _extract_image_bytes(data, model, cfg) @@ -131,6 +161,23 @@ def _notify_step(callback, step): pass + +def _notify_retry(callback, step, attempt, attempts, exc, model): + if callback is None: + return + try: + callback( + { + "step": step, + "result": "retry", + "attempt": attempt, + "attempts": attempts, + "detail": _redact(str(exc), model), + } + ) + except Exception: + pass + def generate_batch(tasks, prompts, ai_cfg=None, on_progress=None, should_stop=None): """Generate titles first, then covers, and persist each successful task.""" @@ -186,9 +233,25 @@ def generate_batch(tasks, prompts, ai_cfg=None, on_progress=None, should_stop=No return step_by_task.get(getattr(task, "id", None), fallback) def step_callback(task, phase): - def callback(step): - set_step(task, step) - _emit_generation_event(on_event, task, phase, step, "start") + def callback(event): + if isinstance(event, dict): + step = event.get("step") or "unknown" + result = event.get("result") or "start" + set_step(task, step) + _emit_generation_event( + on_event, + task, + phase, + step, + result, + detail=event.get("detail"), + level=event.get("level") or ("warning" if result == "retry" else "info"), + attempt=event.get("attempt"), + attempts=event.get("attempts"), + ) + return + set_step(task, event) + _emit_generation_event(on_event, task, phase, event, "start") return callback with ThreadPoolExecutor( @@ -300,7 +363,7 @@ def generate_batch(tasks, prompts, ai_cfg=None, on_progress=None, should_stop=No "new_cover_path": new_cover_path, }, ) - _emit_generation_event(on_event, task, "cover", "db_write", "success") + _emit_generation_event(on_event, task, "cover", "db_write", "success", detail=new_cover_path) except CancelledError: summary["cancelled"] = True _emit_generation_event(on_event, task, "cover", get_step(task, "cover_request"), "cancelled", level="warning") @@ -401,7 +464,17 @@ def _mark_generate_failed(task, exc, db_path, on_task_update): return error -def _emit_generation_event(callback, task, phase, step, result, detail=None, level="info"): +def _emit_generation_event( + callback, + task, + phase, + step, + result, + detail=None, + level="info", + attempt=None, + attempts=None, +): if callback is None: return payload = { @@ -413,6 +486,10 @@ def _emit_generation_event(callback, task, phase, step, result, detail=None, lev } if detail is not None: payload["detail"] = diagnostics.redact_log_text(detail) + if attempt is not None: + payload["attempt"] = attempt + if attempts is not None: + payload["attempts"] = attempts try: callback(payload) except Exception: @@ -475,7 +552,15 @@ def _headers(model, content_type): } -def _call_with_retry(model, body, config, attempts, request_kind, content_type=None): +def _call_with_retry( + model, + body, + config, + attempts, + request_kind, + content_type=None, + on_retry=None, +): last_exc = None for index in range(attempts): try: @@ -484,6 +569,11 @@ def _call_with_retry(model, body, config, attempts, request_kind, content_type=N last_exc = exc if index + 1 >= attempts: break + if on_retry is not None: + try: + on_retry(index + 1, attempts, exc) + except Exception: + pass time.sleep(min(2.0, 0.4 * (index + 1))) raise AIError( "AI 调用失败（已尝试 %s 次）: %s" diff --git a/app/gui.py b/app/gui.py index 5275b83..2267fb5 100644 --- a/app/gui.py +++ b/app/gui.py @@ -30,6 +30,7 @@ try: QMenu, QMessageBox, QPlainTextEdit, + QProgressBar, QPushButton, QScrollArea, QSplitter, @@ -829,6 +830,22 @@ if QT_IMPORT_ERROR is None: self.reset_generate_button.setObjectName("resetGenerateButton") self.stop_generate_button.setEnabled(False) self.progress_label = QLabel("进度：标题0/0 · 封面0/0 · 失败0") + self.title_progress_label = QLabel("标题 0/0") + self.title_progress_label.setObjectName("generateTitleProgressLabel") + self.title_progress_bar = QProgressBar() + self.title_progress_bar.setObjectName("generateTitleProgressBar") + self.title_progress_bar.setTextVisible(False) + self.title_progress_bar.setRange(0, 1) + self.title_progress_bar.setValue(0) + self.cover_progress_label = QLabel("图片 0/0") + self.cover_progress_label.setObjectName("generateCoverProgressLabel") + self.cover_progress_bar = QProgressBar() + self.cover_progress_bar.setObjectName("generateCoverProgressBar") + self.cover_progress_bar.setTextVisible(False) + self.cover_progress_bar.setRange(0, 1) + self.cover_progress_bar.setValue(0) + self.failed_progress_label = QLabel("失败 0") + self.failed_progress_label.setObjectName("generateFailedProgressLabel") left_panel = QWidget() left_layout = QVBoxLayout(left_panel) @@ -916,12 +933,26 @@ if QT_IMPORT_ERROR is None: self.splitter.setStretchFactor(1, 3) self.splitter.setSizes([280, 860]) + title_progress_layout = QHBoxLayout() + title_progress_layout.addWidget(self.title_progress_label) + title_progress_layout.addWidget(self.title_progress_bar, 1) + cover_progress_layout = QHBoxLayout() + cover_progress_layout.addWidget(self.cover_progress_label) + cover_progress_layout.addWidget(self.cover_progress_bar, 1) + cover_progress_layout.addWidget(self.failed_progress_label) + progress_layout = QVBoxLayout() + progress_layout.addLayout(title_progress_layout) + progress_layout.addLayout(cover_progress_layout) + + button_layout = QHBoxLayout() + button_layout.addStretch(1) + button_layout.addWidget(self.generate_button) + button_layout.addWidget(self.stop_generate_button) + button_layout.addWidget(self.reset_generate_button) + bottom_layout = QHBoxLayout() - bottom_layout.addWidget(self.progress_label) - bottom_layout.addStretch(1) - bottom_layout.addWidget(self.generate_button) - bottom_layout.addWidget(self.stop_generate_button) - bottom_layout.addWidget(self.reset_generate_button) + bottom_layout.addLayout(progress_layout, 1) + bottom_layout.addLayout(button_layout) layout = QVBoxLayout(self) layout.setContentsMargins(18, 18, 18, 18) @@ -961,6 +992,8 @@ if QT_IMPORT_ERROR is None: def _append_generate_log(self, message): self.run_log_view.appendPlainText(str(message)) + scroll_bar = self.run_log_view.verticalScrollBar() + scroll_bar.setValue(scroll_bar.maximum()) def _load_latest_generate_run_log(self): try: @@ -972,9 +1005,11 @@ if QT_IMPORT_ERROR is None: return lines = [ f"{event.created_at} [{event.level}] {event.message}" - for event in events + for event in reversed(events) ] self.run_log_view.setPlainText("\n".join(lines)) + scroll_bar = self.run_log_view.verticalScrollBar() + scroll_bar.setValue(scroll_bar.maximum()) def save_title_prompt(self, checked=False): try: @@ -1159,6 +1194,7 @@ if QT_IMPORT_ERROR is None: def stop_generate(self, checked=False): if self.generate_worker is not None: self.generate_worker.cancel() + self._append_generate_log("[停止] 已收到停止请求，当前正在运行的任务结束后停止") self._set_status("正在停止 AI 生成...") def reset_generated_result(self, checked=False): @@ -1312,7 +1348,22 @@ if QT_IMPORT_ERROR is None: self._set_status("AI 生成已停止：" + self._generate_progress_text(payload)) def _update_generate_progress(self, payload): + total = max(0, int(payload.get("total", 0) or 0)) + title_done = max(0, int(payload.get("title_done", 0) or 0)) + cover_done = max(0, int(payload.get("cover_done", 0) or 0)) + failed = max(0, int(payload.get("failed", 0) or 0)) self.progress_label.setText("进度：" + self._generate_progress_text(payload)) + self.title_progress_label.setText(f"标题 {title_done}/{total}") + self.cover_progress_label.setText(f"图片 {cover_done}/{total}") + self.failed_progress_label.setText(f"失败 {failed}") + self._set_progress_bar(self.title_progress_bar, title_done, total) + self._set_progress_bar(self.cover_progress_bar, cover_done, total) + + def _set_progress_bar(self, bar, done, total): + maximum = max(1, int(total or 0)) + value = min(max(0, int(done or 0)), maximum) + bar.setRange(0, maximum) + bar.setValue(value) def _generate_progress_text(self, payload): return "标题{title}/{total} · 封面{cover}/{total} · 失败{failed}".format( @@ -2108,9 +2159,11 @@ if QT_IMPORT_ERROR is None: return lines = [ f"{event.created_at} [{event.level}] {event.message}" - for event in events + for event in reversed(events) ] self.run_log_view.setPlainText("\n".join(lines)) + scroll_bar = self.run_log_view.verticalScrollBar() + scroll_bar.setValue(scroll_bar.maximum()) def _show_apply_blocked(self, payload): lines = ["更新前检查未通过。"] @@ -2453,9 +2506,11 @@ if QT_IMPORT_ERROR is None: return lines = [ f"{event.created_at} [{event.level}] {event.message}" - for event in events + for event in reversed(events) ] self.run_log_view.setPlainText("\n".join(lines)) + scroll_bar = self.run_log_view.verticalScrollBar() + scroll_bar.setValue(scroll_bar.maximum()) def _log_collect_run_event(self, run_id, message, level="info"): safe_message = diagnostics.redact_log_text(message) @@ -3215,6 +3270,9 @@ if QT_IMPORT_ERROR is None: self.config = config self.diagnostic_log_dir = diagnostic_log_dir self._run_id = None + self._account_by_alias = {} + self._task_positions = {} + self._eligible_total = 0 def execute(self): account_rows = accounts.list_accounts(path=self.db_path, config=self.config) @@ -3223,14 +3281,25 @@ if QT_IMPORT_ERROR is None: for account in account_rows if str(account.alias).strip() } + self._account_by_alias = account_by_alias eligible = [ task for task in self.tasks if getattr(task, "stage", None) == "collected" ] + self._eligible_total = len(eligible) + self._task_positions = { + getattr(task, "id", None): index + for index, task in enumerate(eligible, start=1) + } batch_ids = self._batch_ids(eligible) self._run_id = self._create_run_log(eligible, batch_ids) + ai_cfg = appconfig.ai_config(self.config) self._log_run_event( - f"phase=preflight step=start result=start detail=AI生成开始 total={len(eligible)}" + "[开始] 本轮生成 {total} 条：标题{total}，图片{total}；标题并发{title_concurrency}，图片并发{image_concurrency}".format( + total=len(eligible), + title_concurrency=ai_cfg.get("title_concurrency", 1), + image_concurrency=ai_cfg.get("image_concurrency", 1), + ) ) try: summary = ai.generate_batch( @@ -3260,7 +3329,7 @@ if QT_IMPORT_ERROR is None: "cancelled": self.should_cancel(), } self._log_run_event( - f"phase=worker step=execute result=failed detail={error}", + f"[失败] AI 生成运行失败：{error}", level="error", ) self._write_diagnostic_log( @@ -3273,6 +3342,8 @@ if QT_IMPORT_ERROR is None: summary["run_id"] = self._run_id summary["batch_ids"] = batch_ids status = "cancelled" if summary.get("cancelled") else "done" + level = "warning" if summary.get("cancelled") or summary.get("error") else "info" + self._log_run_event(self._format_generate_completion(summary), level=level) self._finish_run_log(status, summary) return summary @@ -3280,15 +3351,96 @@ if QT_IMPORT_ERROR is None: self.row_updated.emit(int(task_id), dict(fields or {})) def _on_generation_event(self, payload): + task = payload.get("task") + message = self._format_generation_event(payload) + if not message: + return + self._log_run_event(message, task=task, level=payload.get("level") or "info") + + def _format_generation_event(self, payload): task = payload.get("task") phase = payload.get("phase") or "generate" step = payload.get("step") or "unknown" result = payload.get("result") or "start" - detail = payload.get("detail") - message = f"phase={phase} step={step} result={result}" - if detail: - message += f" detail={detail}" - self._log_run_event(message, task=task, level=payload.get("level") or "info") + detail = self._short_detail(payload.get("detail")) + if phase == "title": + if result == "start" and step == "title_submit": + return f"[标题] {self._task_progress_label(task)} 开始生成" + if result == "success" and step == "title_done": + return f"[标题] {self._task_progress_label(task)} 成功" + if result == "retry": + return self._retry_message("标题", task, payload, detail) + if result == "failed": + return f"[失败] {self._task_plain_label(task)} 标题生成失败：{detail or '未知错误'}" + if result == "cancelled": + return f"[停止] {self._task_plain_label(task)} 标题生成已取消" + return None + if phase == "cover": + if result == "start" and step == "cover_submit": + return f"[图片] {self._task_progress_label(task)} 开始生成" + if result == "success" and step == "db_write": + suffix = f"，已保存 {detail}" if detail else "" + return f"[图片] {self._task_progress_label(task)} 成功{suffix}" + if result == "retry": + return self._retry_message("图片", task, payload, detail) + if result == "failed": + return f"[失败] {self._task_plain_label(task)} 图片生成失败：{detail or '未知错误'}" + if result == "cancelled": + return f"[停止] {self._task_plain_label(task)} 图片生成已取消" + return None + return None + + def _retry_message(self, label, task, payload, detail): + attempt = int(payload.get("attempt", 0) or 0) + attempts = int(payload.get("attempts", 0) or 0) + max_retries = max(0, attempts - 1) + retry_text = f"准备重试 {attempt}/{max_retries}" if max_retries else "准备重试" + reason = f"：{detail}" if detail else "" + return f"[{label}] {self._task_progress_label(task)} 调用失败，{retry_text}{reason}" + + def _task_progress_label(self, task): + index = self._task_positions.get(getattr(task, "id", None), 0) + total = self._eligible_total or 0 + item_id = getattr(task, "item_id", "") or "未知商品" + shop = self._task_shop_label(task) + shop_text = f"（{shop}）" if shop else "" + return f"{index}/{total} 商品 {item_id}{shop_text}" + + def _task_plain_label(self, task): + item_id = getattr(task, "item_id", "") or "未知商品" + shop = self._task_shop_label(task) + return f"商品 {item_id}（{shop}）" if shop else f"商品 {item_id}" + + def _task_shop_label(self, task): + alias = str(getattr(task, "alias", "") or "").strip() + account = self._account_by_alias.get(alias) + if account is not None: + return getattr(account, "account_name", None) or getattr(account, "alias", None) or alias + return getattr(task, "account_name", None) or alias + + def _short_detail(self, detail): + if detail is None: + return "" + text = diagnostics.redact_log_text(str(detail)).replace("\r", " ").replace("\n", " ").strip() + if len(text) > 180: + return text[:177] + "..." + return text + + def _format_generate_completion(self, summary): + progress = self._summary_text(summary) + if summary.get("cancelled"): + return f"[停止] AI 生成已停止：{progress}" + if summary.get("error"): + return f"[失败] AI 生成失败：{summary.get('error')}，{progress}" + return f"[完成] AI 生成完成：{progress}" + + def _summary_text(self, summary): + return "标题{title}/{total}，图片{cover}/{total}，失败{failed}".format( + title=summary.get("title_done", 0), + cover=summary.get("cover_done", 0), + total=summary.get("total", 0), + failed=summary.get("failed", 0), + ) def _on_generation_error(self, payload): task = payload.get("task") diff --git a/docs/06-tasks.md b/docs/06-tasks.md index 7c238d5..04928a2 100644 --- a/docs/06-tasks.md +++ b/docs/06-tasks.md @@ -102,6 +102,7 @@ | T-516 | ①筛选对齐②③ | T-202, T-303b | 依据 `docs/ux-review.md` P2。① 导入采集补齐与②③一致的店铺、商品ID、状态筛选，保持三个列表页筛选心智一致。筛选栏顺序为批次/店铺/商品ID/状态；当前筛选结果用于①表格显示与「采集旧标题/旧封面」作用范围；导入汇总栏、批次进度总览、未匹配数量仍按当前批次全量任务统计，未匹配按钮继续筛出当前筛选结果中的未匹配任务；不改导入、采集、回写、CDP 或 Shopee 更新逻辑 | DONE | | T-517 | ⑤设置分区 + 清理兼容字段 | T-506, T-507 | 依据 `docs/ux-review.md` P2。⑤ 视觉分区：将高频「Shopee 更新安全 / 执行模式」前置成独立分区，低频「基础设施（Chrome路径/端口/DB路径）」独立后置；彻底隐藏 `test_item_id`、`dry_run` 用户入口，不再占用可见表单位置，但保留 `config.json` 内部兼容字段与③「检查本轮更新」语义。只改⑤设置页 UI 分区、保存/加载展示和 GUI 测试，不改配置 schema，不改 Shopee/CDP 更新流程 | DONE | | T-518 | ②左栏提示词区组件密度优化 | T-302p, T-303, T-517 | 依据 `docs/ux-review.md` P2。② AI生成左栏保留高频「模板选择、编辑内容、保存当前模板/开始生成」可见入口；将封面模板低频操作「另存为、重命名、删除」收敛进一个「模板操作」菜单/小按钮，避免左栏按钮堆叠和误点。第一版不迁移到⑤设置，不改 prompts 数据结构，不改 AI 生成 HTTP、DB schema、Excel、Shopee/CDP 流程；删除仍保留现有二次确认，保存/重命名/删除行为和错误处理不变。同步 GUI 测试覆盖菜单入口、动作触发和旧低频按钮不再平铺 | DONE | +| T-519 | ②AI生成长任务进度条 + 用户可读滚动日志 | T-303, T-505, T-518 | 问题：批量生成几十/上百个标题或图片超时重试时，仅底部文字 `进度：标题x/y · 封面x/y · 失败z` 和技术型结构化日志不足以让用户判断剩余量、是否卡住、慢在哪一步。方案：②底部操作区增加标题/图片两条独立 `QProgressBar`，分两行显示 `标题 x/y`、`图片 x/y`，标题阶段结束后保持 100%，图片进度按本轮总任务口径显示并在旁边保留失败数；现有「AI生成运行日志」改为用户可读自动滚动日志，显示本轮开始、标题/图片开始与成功、商品ID/店铺、图片超时/重试、失败原因、停止请求和完成汇总。日志不得显示 API Key、密码、Cookie、token、完整请求体、base64 图片或超长 prompt；保留 DB `run_logs/run_log_events` 脱敏记录。只改②生成 UI、`GenerateWorker`/AI 生成事件文案和 GUI/AI 单测，不改 AI HTTP 协议、DB schema、Excel、Shopee/CDP 流程 | DONE | ## 里程碑 diff --git a/docs/current-state.md b/docs/current-state.md index afc99e7..7810d39 100644 --- a/docs/current-state.md +++ b/docs/current-state.md @@ -6,10 +6,10 @@ ## 当前快照 - 日期：2026-07-02 -- 阶段：V0 单账号 CDP 流程已验证；V1 已完成 T-000 正式代码包结构、T-001 `app/editor.py` 模块化、T-002 `app/appconfig.py` 应用配置、T-003 SQLite 持久化地基、T-004 本地数据忽略规则、T-005 AI 模型清单后端、T-006 单元测试基座、T-101 账号 user-data-dir 工具、T-102 Chrome 启动器、T-103 登录保活与检测、T-104 PySide6 主窗口骨架、T-104b PySide6 worker 基座、T-105 Tab④ 账号管理、T-106 账号快捷方式、T-201 Excel 导入入库、T-202 Tab① 任务列表与导入按钮、T-202b Tab① 导入汇总栏、T-203 采集旧标题旧封面、T-204 回写旧字段到原 Excel、T-204b 采集完成自动回写、T-205 首次未配账号/Chrome 未启动/未登录引导保护、T-205b 采集后关闭自动新建商品页 tab、T-206 Tab① 删除指定批次软删除、T-301 AI 生成接口、T-302 Tab② AI 生成布局与任务列表、T-302p 提示词管理、T-303 Tab② 开始生成/停止/进度、T-303b ②/③ 商品ID筛选、T-401 Tab③ 更新列表筛选与开始更新确认、T-402 Tab③ 确认后串行更新、T-403 Tab③ 结果回写与结束汇总、T-501 Tab⑤ AI 模型管理 UI、T-501b Tab⑤ 角色与生成参数、T-501c Tab⑤ Shopee 更新安全开关、T-502 换封面删第一张再上传、T-503 敏感信息本地明文保存提示与日志脱敏、T-504 多账号并行/dry-run/运行日志、T-207 ①采集诊断日志、② AI生成图片失败诊断日志补丁、T-404a ②/③ 选中记录重置、T-404 真实 Shopee 单条更新冒烟验收、T-506 正式使用批量更新体验、T-507 正式批量更新移除普通流程测试商品 ID 限制、T-508 ③ 更新shopee生产化操作区、T-509 ② 新标题人工微调、T-510 ③ 检查本轮更新文案统一、T-505 全流程诊断日志扩展、T-511 语义色板与任务状态列上色、T-512 ③高风险按钮上色与①导入校验数字标红、T-513 登录点/③Tab危险标识/破坏性按钮上色、T-514 ①②③ 首次空状态引导卡片、T-515 批次阶段进度总览、T-516 ①筛选对齐②③、T-517 ⑤设置分区与兼容字段清理、T-518 ②左栏提示词区组件密度优化。 +- 阶段：V0 单账号 CDP 流程已验证；V1 已完成 T-000 正式代码包结构、T-001 `app/editor.py` 模块化、T-002 `app/appconfig.py` 应用配置、T-003 SQLite 持久化地基、T-004 本地数据忽略规则、T-005 AI 模型清单后端、T-006 单元测试基座、T-101 账号 user-data-dir 工具、T-102 Chrome 启动器、T-103 登录保活与检测、T-104 PySide6 主窗口骨架、T-104b PySide6 worker 基座、T-105 Tab④ 账号管理、T-106 账号快捷方式、T-201 Excel 导入入库、T-202 Tab① 任务列表与导入按钮、T-202b Tab① 导入汇总栏、T-203 采集旧标题旧封面、T-204 回写旧字段到原 Excel、T-204b 采集完成自动回写、T-205 首次未配账号/Chrome 未启动/未登录引导保护、T-205b 采集后关闭自动新建商品页 tab、T-206 Tab① 删除指定批次软删除、T-301 AI 生成接口、T-302 Tab② AI 生成布局与任务列表、T-302p 提示词管理、T-303 Tab② 开始生成/停止/进度、T-303b ②/③ 商品ID筛选、T-401 Tab③ 更新列表筛选与开始更新确认、T-402 Tab③ 确认后串行更新、T-403 Tab③ 结果回写与结束汇总、T-501 Tab⑤ AI 模型管理 UI、T-501b Tab⑤ 角色与生成参数、T-501c Tab⑤ Shopee 更新安全开关、T-502 换封面删第一张再上传、T-503 敏感信息本地明文保存提示与日志脱敏、T-504 多账号并行/dry-run/运行日志、T-207 ①采集诊断日志、② AI生成图片失败诊断日志补丁、T-404a ②/③ 选中记录重置、T-404 真实 Shopee 单条更新冒烟验收、T-506 正式使用批量更新体验、T-507 正式批量更新移除普通流程测试商品 ID 限制、T-508 ③ 更新shopee生产化操作区、T-509 ② 新标题人工微调、T-510 ③ 检查本轮更新文案统一、T-505 全流程诊断日志扩展、T-511 语义色板与任务状态列上色、T-512 ③高风险按钮上色与①导入校验数字标红、T-513 登录点/③Tab危险标识/破坏性按钮上色、T-514 ①②③ 首次空状态引导卡片、T-515 批次阶段进度总览、T-516 ①筛选对齐②③、T-517 ⑤设置分区与兼容字段清理、T-518 ②左栏提示词区组件密度优化、T-519 ②AI生成长任务进度条与用户可读滚动日志。 - 技术栈：Python 3.10+，自研 CDP（websocket-client + requests），SQLite（sqlite3）+ `config.json` + openpyxl + AI（`config/ai_models.json` 通用 HTTP，chat JSON / images_edits），GUI PySide6 5 Tab（已定）。 -- 生产代码：已建立 `app/` 包 + 根入口 `main.py`；`app/cdp.py` 为已验证 CDP 底座，已区分 `CDP.close()` 断开 WebSocket 与 `close_tab()` 关闭浏览器 target；`app/editor.py` 已封装登录状态检测、标题/封面/采集/更新按钮能力，并在采集结束后只关闭本轮自动新建的商品编辑页 tab、保留用户已有 tab，更新提交成功且设置开启时可关闭本轮自动新建商品页，确认后跳回商品列表页时关闭前等待 2 秒；`click_update()` 已补 Shopee 站点侧确认框处理，页面主「更新」后若出现 `確定您要更新商品嗎?` modal（`.eds-modal__content` / `.eds-modal__box`），只点击弹窗主按钮「更新」并避开「立即優化」，且记录确认后是否跳回商品列表页；`replace_cover()` 已实现更新封面统一先校验本地旧封面备份，再点第一张删除、可见确认框、等待图片管理器稳定和上传 input 恢复，随后先点击上传块模拟人工入口、短暂等待、重新获取 input、注入文件上传新图并等待 Shopee CDN 后拖到第一位的代码路径；已修正 2026-06-30 稳定等待回归：删除第一张前不要求上传 input 可用，只等图片列表稳定；删除后再等上传入口恢复；`重複/重复/duplicate` 上传 toast 会立即判为新封面重复错误；`app/image_paths.py` 已统一新采集/新生成图片路径为 `images///__old/new.jpg`，历史 DB 路径继续按原路径读取；`app/appconfig.py` 已实现 `config.json` 默认值/读写/更新、AI 参数、端口读取、Shopee 更新安全与执行模式默认值，`config/ai_models.json` 模型清单 CRUD/过滤/打码/测试连接与 OpenAI-compatible base URL 自动补 endpoint，以及 `mask_secret()`、`sanitize_for_log()`、`redact_secrets()` 敏感信息脱敏工具；`app/ai.py` 已实现 `gen_title()`/`gen_cover()`/`generate_batch()`，按默认文本/图片模型发起通用 HTTP 调用，支持重试、错误脱敏、图片 URL/base64 解析、resolution resize、jpg_quality 保存、先并发标题再并发封面、逐条 `set_generated`、失败 `mark_failed`、步骤级事件/错误回调与停止取消未开始项；`app/prompts.py` 已实现标题提示词读写、封面模板 CRUD 与变量替换；`app/db.py` 已实现 SQLite schema、连接 PRAGMA、批次/账号/任务与阶段写库函数、T-206 批次软删除标记与默认业务查询过滤、T-404a 本地生成结果/更新状态重置函数、T-509 `update_generated_title()` 本地新标题微调函数，以及 `run_logs/run_log_events` 运行日志函数；`app/diagnostics.py` 已实现 gitignore 本地诊断日志、滚动写入、结构化 payload 和自由文本脱敏；T-505 已把 Excel 导入/回写、③更新shopee、④Chrome 启动/登录检测、⑤AI模型测试连接接入 `run_logs/run_log_events` 与本地脱敏诊断日志；`app/excel.py` 已实现多 Excel 输入列解析、整文件列校验、脏行统计跳过、导入批次与任务入库、别名匹配统计、旧标题/旧封面路径回写原 Excel、更新结果回写原 Excel 与另存副本；`app/config.py` 已实现账号 slug 与 user-data-dir 创建；`app/accounts.py` 已实现账号 CRUD 服务、端口默认分配、启动登录、检测登录、生成快捷方式；`app/chrome.py` 已实现 Chrome 参数拼装、启动、CDP 端口探测、PowerShell `.lnk` 快捷方式生成；`app/gui.py` 已实现 PySide6 `MainWindow`、五 Tab、顶部 Tab 栏防误点样式、统一语义色板、①②③任务状态列前景色、③「开始更新」warning 描边/文字色和①导入校验数字标红、④登录状态点上色、③更新shopee Tab warning 小圆点和删除类按钮 danger 样式、①②③首次空状态引导卡片、①②③批次阶段进度总览、① 导入采集的 Excel 导入按钮/导入汇总栏/批次筛选与删除批次软删除入口/QTableView 任务列表/未匹配筛选与略过标记/采集旧标题旧封面 worker/采集前账号就绪预检与④引导/采集完成自动回写/旧数据回写重试按钮与 worker/采集运行日志视图、② AI生成左右布局/标题与封面提示词管理/批次/店铺/商品ID/状态筛选/任务列表/新标题列本地微调/变量预览/开始生成/停止/进度/双击新旧封面预览/AI生成运行日志/重置生成结果与 `GenerateWorker`、③ 更新shopee批次/店铺/商品ID/状态筛选栏/任务列表/开始更新主按钮/重置更新状态右键菜单/更新安全开关拦截与「前往设置」跳转/「检查本轮更新」按钮/开始更新确认弹窗/确认后 `ApplyWorker` 按每批最大更新条数分批执行当前筛选全部可更新记录/账号就绪和端口冲突预检/按账号并行可选/逐条 `set_applied`/运行日志/自动回写结果到 Excel/结束汇总弹窗/手动回写重试按钮、④ 账号管理表格/弹窗/按钮/快捷方式与状态栏、密码明文保存提示、⑤ 设置 AI 模型同列上下布局、居中内容区、三列详情/参数表单、API Key 明文保存提示、`AIModelTestWorker` 后台测试连接、角色/生成参数/路径/端口配置、Shopee 更新安全与多账号并行设置并持久化 `config.json`，保存成功后弹轻量提示框；⑤ 设置页已将「Shopee 更新安全 / 执行模式」前置、将「基础设施（路径与端口）」后置，`test_item_id` 与 `dry_run` 不再有用户可操作控件，保存时保留 `test_item_id` 兼容值并固定 `dry_run=false`；③ 普通正式更新不再用 `test_item_id` 阻断非测试商品，确认弹窗不再显示测试商品 ID；`app/workers.py` 已实现 `BaseWorker`、通用 signals、取消标记和 `QThread` 启动包装。 -- 测试：`tests/` 已建立；T-006 后纯逻辑改动必须运行 `python -m unittest discover -s tests`，当前覆盖 appconfig/db/config/accounts/chrome 启动与快捷方式/editor 登录检测与商品 tab 生命周期、更新成功后关闭本轮新开 tab、更新封面备份缺失阻断/8张与9张先删第一张/删除确认/上传入口初始不可用/重复图片 toast/物流错误不阻断上传/删图后稳定等待/上传状态诊断/拖首位 mock 路径/Shopee 更新确认框、成功跳回商品列表和残留错误 toast 不覆盖成功 mock 路径/excel 导入/旧字段与更新结果回写/ai 标题与封面 HTTP 解析/`generate_batch` 正常、失败与停止/prompts 读写与渲染/gui ① 导入采集、删除批次软删除与采集诊断日志/gui ② AI生成布局与批次/店铺/商品ID/状态筛选、提示词管理、生成 worker、图片失败诊断日志、双击预览、重置生成结果与新标题本地编辑/gui ③ 更新shopee批次/店铺/商品ID/状态筛选列表、确认弹窗、开始更新主按钮、重置更新状态右键菜单、Shopee 更新安全拦截与前往设置、`ApplyWorker` 串行/检查/分批/按账号并行/端口冲突预检、运行日志、结果回写与汇总/gui ④ 账号管理、密码打码与明文保存提示/gui ⑤ AI 模型管理、API Key 打码与明文保存提示、角色/生成参数设置、Shopee 更新安全设置、检查按钮/每批最大更新条数/多账号并行设置、测试商品 ID 限制移除/worker signal 与线程包装、T-505 全流程诊断日志（import/write_back/apply/chrome_launch/login_check/ai_model_test）与本地日志脱敏、gui T-511 语义色板和任务状态列前景色、T-512 高风险按钮与导入校验数字样式、T-513 登录状态/Tab 标识/删除按钮样式、T-514 首次空状态引导卡片、T-515 批次阶段进度总览、T-516 ①筛选对齐②③、T-517 ⑤设置分区与兼容字段清理、T-518 ②左栏提示词区组件密度优化；2026-07-01 已完成 5 个真实商品的 T-404 更新验收，后续 CDP/Shopee 改动仍需测试商品手动验证。 +- 生产代码：已建立 `app/` 包 + 根入口 `main.py`；`app/cdp.py` 为已验证 CDP 底座，已区分 `CDP.close()` 断开 WebSocket 与 `close_tab()` 关闭浏览器 target；`app/editor.py` 已封装登录状态检测、标题/封面/采集/更新按钮能力，并在采集结束后只关闭本轮自动新建的商品编辑页 tab、保留用户已有 tab，更新提交成功且设置开启时可关闭本轮自动新建商品页，确认后跳回商品列表页时关闭前等待 2 秒；`click_update()` 已补 Shopee 站点侧确认框处理，页面主「更新」后若出现 `確定您要更新商品嗎?` modal（`.eds-modal__content` / `.eds-modal__box`），只点击弹窗主按钮「更新」并避开「立即優化」，且记录确认后是否跳回商品列表页；`replace_cover()` 已实现更新封面统一先校验本地旧封面备份，再点第一张删除、可见确认框、等待图片管理器稳定和上传 input 恢复，随后先点击上传块模拟人工入口、短暂等待、重新获取 input、注入文件上传新图并等待 Shopee CDN 后拖到第一位的代码路径；已修正 2026-06-30 稳定等待回归：删除第一张前不要求上传 input 可用，只等图片列表稳定；删除后再等上传入口恢复；`重複/重复/duplicate` 上传 toast 会立即判为新封面重复错误；`app/image_paths.py` 已统一新采集/新生成图片路径为 `images///__old/new.jpg`，历史 DB 路径继续按原路径读取；`app/appconfig.py` 已实现 `config.json` 默认值/读写/更新、AI 参数、端口读取、Shopee 更新安全与执行模式默认值，`config/ai_models.json` 模型清单 CRUD/过滤/打码/测试连接与 OpenAI-compatible base URL 自动补 endpoint，以及 `mask_secret()`、`sanitize_for_log()`、`redact_secrets()` 敏感信息脱敏工具；`app/ai.py` 已实现 `gen_title()`/`gen_cover()`/`generate_batch()`，按默认文本/图片模型发起通用 HTTP 调用，支持重试、错误脱敏、图片 URL/base64 解析、resolution resize、jpg_quality 保存、先并发标题再并发封面、逐条 `set_generated`、失败 `mark_failed`、步骤级事件/错误回调与停止取消未开始项；`app/prompts.py` 已实现标题提示词读写、封面模板 CRUD 与变量替换；`app/db.py` 已实现 SQLite schema、连接 PRAGMA、批次/账号/任务与阶段写库函数、T-206 批次软删除标记与默认业务查询过滤、T-404a 本地生成结果/更新状态重置函数、T-509 `update_generated_title()` 本地新标题微调函数，以及 `run_logs/run_log_events` 运行日志函数；`app/diagnostics.py` 已实现 gitignore 本地诊断日志、滚动写入、结构化 payload 和自由文本脱敏；T-505 已把 Excel 导入/回写、③更新shopee、④Chrome 启动/登录检测、⑤AI模型测试连接接入 `run_logs/run_log_events` 与本地脱敏诊断日志；`app/excel.py` 已实现多 Excel 输入列解析、整文件列校验、脏行统计跳过、导入批次与任务入库、别名匹配统计、旧标题/旧封面路径回写原 Excel、更新结果回写原 Excel 与另存副本；`app/config.py` 已实现账号 slug 与 user-data-dir 创建；`app/accounts.py` 已实现账号 CRUD 服务、端口默认分配、启动登录、检测登录、生成快捷方式；`app/chrome.py` 已实现 Chrome 参数拼装、启动、CDP 端口探测、PowerShell `.lnk` 快捷方式生成；`app/gui.py` 已实现 PySide6 `MainWindow`、五 Tab、顶部 Tab 栏防误点样式、统一语义色板、①②③任务状态列前景色、③「开始更新」warning 描边/文字色和①导入校验数字标红、④登录状态点上色、③更新shopee Tab warning 小圆点和删除类按钮 danger 样式、①②③首次空状态引导卡片、①②③批次阶段进度总览、① 导入采集的 Excel 导入按钮/导入汇总栏/批次筛选与删除批次软删除入口/QTableView 任务列表/未匹配筛选与略过标记/采集旧标题旧封面 worker/采集前账号就绪预检与④引导/采集完成自动回写/旧数据回写重试按钮与 worker/采集运行日志视图、② AI生成左右布局/标题与封面提示词管理/批次/店铺/商品ID/状态筛选/任务列表/新标题列本地微调/变量预览/开始生成/停止/标题与图片双进度条/双击新旧封面预览/用户可读自动滚动AI生成运行日志/重置生成结果与 `GenerateWorker`、③ 更新shopee批次/店铺/商品ID/状态筛选栏/任务列表/开始更新主按钮/重置更新状态右键菜单/更新安全开关拦截与「前往设置」跳转/「检查本轮更新」按钮/开始更新确认弹窗/确认后 `ApplyWorker` 按每批最大更新条数分批执行当前筛选全部可更新记录/账号就绪和端口冲突预检/按账号并行可选/逐条 `set_applied`/运行日志/自动回写结果到 Excel/结束汇总弹窗/手动回写重试按钮、④ 账号管理表格/弹窗/按钮/快捷方式与状态栏、密码明文保存提示、⑤ 设置 AI 模型同列上下布局、居中内容区、三列详情/参数表单、API Key 明文保存提示、`AIModelTestWorker` 后台测试连接、角色/生成参数/路径/端口配置、Shopee 更新安全与多账号并行设置并持久化 `config.json`，保存成功后弹轻量提示框；⑤ 设置页已将「Shopee 更新安全 / 执行模式」前置、将「基础设施（路径与端口）」后置，`test_item_id` 与 `dry_run` 不再有用户可操作控件，保存时保留 `test_item_id` 兼容值并固定 `dry_run=false`；③ 普通正式更新不再用 `test_item_id` 阻断非测试商品，确认弹窗不再显示测试商品 ID；`app/workers.py` 已实现 `BaseWorker`、通用 signals、取消标记和 `QThread` 启动包装。 +- 测试：`tests/` 已建立；T-006 后纯逻辑改动必须运行 `python -m unittest discover -s tests`，当前覆盖 appconfig/db/config/accounts/chrome 启动与快捷方式/editor 登录检测与商品 tab 生命周期、更新成功后关闭本轮新开 tab、更新封面备份缺失阻断/8张与9张先删第一张/删除确认/上传入口初始不可用/重复图片 toast/物流错误不阻断上传/删图后稳定等待/上传状态诊断/拖首位 mock 路径/Shopee 更新确认框、成功跳回商品列表和残留错误 toast 不覆盖成功 mock 路径/excel 导入/旧字段与更新结果回写/ai 标题与封面 HTTP 解析/`generate_batch` 正常、失败与停止/prompts 读写与渲染/gui ① 导入采集、删除批次软删除与采集诊断日志/gui ② AI生成布局与批次/店铺/商品ID/状态筛选、提示词管理、生成 worker、图片失败诊断日志、双击预览、重置生成结果与新标题本地编辑/gui ③ 更新shopee批次/店铺/商品ID/状态筛选列表、确认弹窗、开始更新主按钮、重置更新状态右键菜单、Shopee 更新安全拦截与前往设置、`ApplyWorker` 串行/检查/分批/按账号并行/端口冲突预检、运行日志、结果回写与汇总/gui ④ 账号管理、密码打码与明文保存提示/gui ⑤ AI 模型管理、API Key 打码与明文保存提示、角色/生成参数设置、Shopee 更新安全设置、检查按钮/每批最大更新条数/多账号并行设置、测试商品 ID 限制移除/worker signal 与线程包装、T-505 全流程诊断日志（import/write_back/apply/chrome_launch/login_check/ai_model_test）与本地日志脱敏、gui T-511 语义色板和任务状态列前景色、T-512 高风险按钮与导入校验数字样式、T-513 登录状态/Tab 标识/删除按钮样式、T-514 首次空状态引导卡片、T-515 批次阶段进度总览、T-516 ①筛选对齐②③、T-517 ⑤设置分区与兼容字段清理、T-518 ②左栏提示词区组件密度优化、T-519 ②AI生成长任务进度条与用户可读滚动日志；2026-07-01 已完成 5 个真实商品的 T-404 更新验收，后续 CDP/Shopee 改动仍需测试商品手动验证。 - 数据：`config.json`、`config/ai_models.json`、`cmshopee.db`、`cmshopee.db-*`、`chrome_user_data_dir/`、`images/`、`logs/` 已由 `.gitignore` 排除；密码与 API Key 本地明文保存但保存/变更时提示，UI 打码，日志/导出必须脱敏；运营填写后的 Excel 业务文件默认忽略，标准空模板 `shopee待处理任务模板.xlsx` 可提交；`app/appconfig.py` 首次读取缺失的 `config.json` 时会在本地写默认配置，`app/db.py` 调用 `init_db()` 时会在本地创建 SQLite DB。 ## 既定设计要点（文档已定） @@ -33,19 +33,19 @@ | `chrome-remote-debug-lan.md` | 已有 | WSL→Windows CDP 转发排查记录 | | `docs/troubleshooting.md` | 已有 | 常见问题排查；已记录 `config/ai_models.json` 缺失 `category` 导致 GUI 启动报 “AI 模型 category 必须是 text 或 image” 的原因、修复和验证步骤 | | `app/__init__.py` / `app/__main__.py` / `main.py` | 已有 | 正式包与启动入口；`python main.py` / `python -m app` 可运行占位入口 | -| `app/gui.py` | 已有 | T-104/T-105/T-106/T-202/T-202b/T-203/T-204/T-204b/T-205/T-206/T-207/T-302/T-302p/T-303/T-303b/T-401/T-402/T-403/T-404a/T-501/T-501b/T-501c/T-503/T-504/T-506/T-507/T-508/T-509/T-510/T-505/T-511/T-512/T-513/T-514/T-515/T-516/T-517/T-518 产出：PySide6 `QMainWindow` + 五 Tab；顶部 Tab 栏防误点样式；统一语义色板、①②③状态列前景色、③开始更新 warning 样式、①导入校验数字标红、④登录状态点、③Tab warning 小圆点、删除按钮 danger 样式、①②③首次空状态引导卡片和批次阶段进度总览；① 导入采集导入按钮、导入汇总栏、批次/店铺/商品ID/状态筛选、删除批次软删除按钮、`QTableView` 任务列表、未匹配筛选与略过标记、采集旧标题旧封面 worker（旧封面路径按批次/店铺/任务细分）、采集前账号就绪预检与④引导、采集完成自动回写与手动重试、采集运行日志视图；② AI生成左右布局、提示词管理、批次/店铺/商品ID/状态筛选栏、任务列表、新标题列本地编辑、开始生成/停止/进度、双击新旧封面预览、AI生成运行日志、重置生成结果与 `GenerateWorker`；③ 更新shopee批次/店铺/商品ID/状态筛选栏、任务列表、开始更新主按钮、重置更新状态右键菜单、Shopee 更新安全拦截与「前往设置」跳转、「检查本轮更新」按钮、开始更新确认弹窗、`ApplyWorker` 检查/分批串行/按账号并行、账号与端口预检、运行日志、逐条 `set_applied`、自动回写结果到 Excel、结束汇总弹窗与手动回写重试；④ 账号管理表格、账号弹窗、密码本地明文保存提示、启动登录、检测登录、快捷方式；⑤ 设置 AI 模型下拉、新增/删除、详情编辑、密钥打码与本地明文保存提示、测试连接 worker、默认角色下拉、生成参数、路径端口配置、三列 Shopee 更新安全与执行模式设置，高频安全/执行模式分区前置、基础设施分区后置，`test_item_id`/`dry_run` 兼容字段无用户入口且普通更新不再阻断正式更新；②封面模板「另存为/重命名/删除」低频操作已收敛进「模板操作」菜单 | +| `app/gui.py` | 已有 | T-104/T-105/T-106/T-202/T-202b/T-203/T-204/T-204b/T-205/T-206/T-207/T-302/T-302p/T-303/T-303b/T-401/T-402/T-403/T-404a/T-501/T-501b/T-501c/T-503/T-504/T-506/T-507/T-508/T-509/T-510/T-505/T-511/T-512/T-513/T-514/T-515/T-516/T-517/T-518/T-519 产出：PySide6 `QMainWindow` + 五 Tab；顶部 Tab 栏防误点样式；统一语义色板、①②③状态列前景色、③开始更新 warning 样式、①导入校验数字标红、④登录状态点、③Tab warning 小圆点、删除按钮 danger 样式、①②③首次空状态引导卡片和批次阶段进度总览；① 导入采集导入按钮、导入汇总栏、批次/店铺/商品ID/状态筛选、删除批次软删除按钮、`QTableView` 任务列表、未匹配筛选与略过标记、采集旧标题旧封面 worker（旧封面路径按批次/店铺/任务细分）、采集前账号就绪预检与④引导、采集完成自动回写与手动重试、采集运行日志视图；② AI生成左右布局、提示词管理、批次/店铺/商品ID/状态筛选栏、任务列表、新标题列本地编辑、开始生成/停止/标题与图片双进度条、双击新旧封面预览、用户可读自动滚动AI生成运行日志、重置生成结果与 `GenerateWorker`；③ 更新shopee批次/店铺/商品ID/状态筛选栏、任务列表、开始更新主按钮、重置更新状态右键菜单、Shopee 更新安全拦截与「前往设置」跳转、「检查本轮更新」按钮、开始更新确认弹窗、`ApplyWorker` 检查/分批串行/按账号并行、账号与端口预检、运行日志、逐条 `set_applied`、自动回写结果到 Excel、结束汇总弹窗与手动回写重试；④ 账号管理表格、账号弹窗、密码本地明文保存提示、启动登录、检测登录、快捷方式；⑤ 设置 AI 模型下拉、新增/删除、详情编辑、密钥打码与本地明文保存提示、测试连接 worker、默认角色下拉、生成参数、路径端口配置、三列 Shopee 更新安全与执行模式设置，高频安全/执行模式分区前置、基础设施分区后置，`test_item_id`/`dry_run` 兼容字段无用户入口且普通更新不再阻断正式更新；②封面模板「另存为/重命名/删除」低频操作已收敛进「模板操作」菜单；②AI生成底部已增加标题/图片双进度条，运行日志已改为用户可读、自动滚动、脱敏的长任务日志 | | `app/workers.py` | 已有 | T-104b 产出：`BaseWorker` + 通用 signals + 取消标记 + `run_worker()` QThread 包装 | | `app/accounts.py` | 已有 | T-105/T-106 产出：账号 CRUD 服务、目录创建、端口分配、启动登录、检测登录、快捷方式 | | `app/editor.py` | 已有 | T-001/T-103/T-205b/T-207/T-501c/T-502 + T-404 补丁产出：登录状态检测、打开商品页、读/写标题、读/下载封面、采集步骤回调、更新步骤回调、采集后关闭自动新建商品页 tab、上传前等待图片管理器稳定、点击上传块后注入文件并检测 CDN 后拖封面、更新封面统一先校验旧封面备份再删线上第一张、重复图片 toast 明确失败、页面主更新按钮、Shopee 站点侧确认框主按钮、apply_task；更新成功后可按设置关闭本轮自动新建商品页 | | `app/appconfig.py` | 已有 | T-002/T-501c/T-503/T-504 产出：`config.json` 默认值、读写、更新、路径/端口/AI 参数读取、Shopee 更新安全与 dry-run/多账号并行默认值；拒绝敏感字段写入；提供敏感值打码、结构化日志脱敏与自由文本替换工具 | | `app/diagnostics.py` | 已有 | T-207 + AI生成诊断补丁 + T-505 产出：本地 `logs/cmshopee.log` 诊断日志、大小滚动、异常类型/traceback/step/耗时记录，结构化 payload 和自由文本脱敏后写入 | -| `app/ai.py` | 已有 | T-301/T-303 + AI生成诊断补丁产出：`gen_title()`/`gen_cover()`/`generate_batch()`；读取默认模型；通用 HTTP 调用；失败重试；错误脱敏；标题/封面步骤级回调；封面按 resolution/jpg_quality 保存并按批次/店铺/任务路径落盘；批量生成先标题后封面、进度回调、逐条落库、失败标记、事件/错误回调、停止取消未开始项 | +| `app/ai.py` | 已有 | T-301/T-303 + AI生成诊断补丁 + T-519 产出：`gen_title()`/`gen_cover()`/`generate_batch()`；读取默认模型；通用 HTTP 调用；失败重试；错误脱敏；标题/封面步骤级回调；调用失败但仍可重试时上报 `retry` 事件；封面按 resolution/jpg_quality 保存并按批次/店铺/任务路径落盘；批量生成先标题后封面、进度回调、逐条落库、失败标记、事件/错误回调、停止取消未开始项 | | `app/prompts.py` | 已有 | T-302p 产出：标题提示词读写、封面模板列表/读取/保存/重命名/删除、变量替换 | | `app/db.py` | 已有 | T-003/T-206/T-404a/T-504/T-509 产出：batches/accounts/tasks schema；batches 软删除字段与默认业务查询过滤；run_logs/run_log_events；WAL/busy_timeout/foreign_keys；账号/批次/任务与 set_* 阶段写库；生成结果/更新状态本地重置；`update_generated_title()` 本地新标题微调；运行日志写入与查询 | | `app/config.py` | 已有 | T-101 产出：别名→稳定 slug；创建并返回绝对 user-data-dir | | `app/image_paths.py` | 已有 | 本地图片路径 helper：新采集旧封面和新生成封面统一写入 `images///__old/new.jpg`；历史 DB 已存路径继续按原路径读取 | | `app/chrome.py` | 已有 | T-102/T-106 产出：Chrome 启动参数、`subprocess.Popen` 启动、`/json/version` 端口探测、PowerShell `.lnk` 快捷方式 | -| `tests/` | 已有 | T-006/T-201/T-202/T-202b/T-203/T-204/T-204b/T-205/T-206/T-207/T-301/T-302/T-302p/T-303/T-303b/T-401/T-402/T-403/T-501/T-501b/T-501c/T-502/T-503/T-504/T-506/T-507/T-508/T-509/T-510/T-505/T-511/T-512/T-513/T-514/T-515/T-516/T-517/T-518 产出：stdlib unittest 基座；覆盖 appconfig/db/config/accounts/chrome/editor/excel/ai/image_paths/prompts/gui/workers | +| `tests/` | 已有 | T-006/T-201/T-202/T-202b/T-203/T-204/T-204b/T-205/T-206/T-207/T-301/T-302/T-302p/T-303/T-303b/T-401/T-402/T-403/T-501/T-501b/T-501c/T-502/T-503/T-504/T-506/T-507/T-508/T-509/T-510/T-505/T-511/T-512/T-513/T-514/T-515/T-516/T-517/T-518/T-519 产出：stdlib unittest 基座；覆盖 appconfig/db/config/accounts/chrome/editor/excel/ai/image_paths/prompts/gui/workers | | `app/excel.py` | 已有 | T-201/T-204/T-403 产出：多文件 Excel 输入列解析、必需列整文件拒绝、脏行逐行跳过、批次/任务入库、匹配统计；按源文件/工作表/行号回写旧标题与旧封面路径；按源文件/工作表/行号回写新标题、新封面路径、更新状态；支持原文件被占用时另存副本 | | `shopee待处理任务模板.xlsx` | 已有，已提交 | 标准空 Excel 模板；单工作表 `待处理任务`，表头 `账号名 | 别名 | 商品id | 旧标题 | 旧封面图片路径 | 新标题 | 新封面图片路径 | 更新状态`；运营复制后填写，填写副本不提交 | | `config.json` / `config/ai_models.json` / `cmshopee.db` / `cmshopee.db-*` / `chrome_user_data_dir/` / `images/` / `logs/` | 本地存在或按需生成，已忽略 | 含配置、密钥、业务、登录态、图片、本地诊断日志，不提交版本库；密码/API Key 保存或变更时提示，展示/日志/导出脱敏 | @@ -63,8 +63,8 @@ 任务状态以 [`06-tasks.md`](06-tasks.md) 为准，历史记录见 [`../progress.md`](../progress.md)。 -- 已完成：T-000（正式代码包结构）、T-001（`app/editor.py` 模块化）、T-002（`app/appconfig.py` + `config.json`）、T-003（SQLite 建表）、T-004（本地数据 gitignore）、T-005（AI 模型清单后端）、T-006（单元测试基座）、T-101（账号 slug/user-data-dir）、T-102（Chrome 启动器）、T-103（登录保活与检测）、T-104（PySide6 五 Tab 主窗口骨架）、T-104b（PySide6 worker 基座）、T-105（Tab④ 账号管理）、T-106（账号快捷方式）、T-201（Excel 导入：解析多文件输入列入库）、T-202（Tab① 任务列表 + 导入按钮 + 别名匹配标记）、T-202b（Tab① 导入汇总栏）、T-203（采集旧标题+旧封面）、T-204（回写旧字段到原 Excel）、T-204b（采集完成自动回写旧字段）、T-205（首次未配账号 / Chrome 未启动 / 未登录引导保护）、T-205b（采集后关闭自动新建商品页 tab）、T-206（Tab① 删除指定批次软删除）、T-301（AI 生成接口）、T-302（Tab② 左右布局与任务列表）、T-302p（提示词管理）、T-303（Tab② 开始生成 + 停止 + 进度）、T-303b（②/③ 商品ID筛选）、T-401（Tab③ 更新列表筛选 + 开始更新确认弹窗）、T-402（Tab③ 确认后串行更新）、T-403（Tab③ 结果回写与结束汇总）、T-501（Tab⑤ AI 模型管理 UI）、T-501b（Tab⑤ 角色与生成参数）、T-501c（Tab⑤ Shopee 更新安全开关）、T-502（换封面删第一张再上传）、T-503（敏感信息本地明文保存提示与日志脱敏）、T-504（多账号并行 / dry-run / 运行日志）、T-207（①采集诊断日志）、② AI生成图片失败诊断日志补丁、T-404a（②/③ 选中记录重置）、T-404（真实 Shopee 单条更新冒烟验收）、T-506（正式使用批量更新体验）、T-507（正式批量更新：移除普通流程测试商品 ID 限制）、T-508（③ 更新shopee生产化操作区）、T-509（② 新标题人工微调）、T-510（③ 检查本轮更新文案统一）、T-505（全流程诊断日志扩展）、T-511（语义色板 + ①②③任务状态列上色）、T-512（③高风险按钮上色 + ①导入校验数字标红）、T-513（登录点 / ③Tab危险标识 / 破坏性按钮上色）、T-514（①②③ 首次空状态引导卡片）、T-515（批次阶段进度总览）、T-516（①筛选对齐②③）、T-517（⑤设置分区 + 清理兼容字段）、T-518（②左栏提示词区组件密度优化）。 -- 下一个可领取任务：暂无 TODO（当前任务看板已完成到 T-518；后续从 Backlog/UX review 继续拆任务）。 +- 已完成：T-000（正式代码包结构）、T-001（`app/editor.py` 模块化）、T-002（`app/appconfig.py` + `config.json`）、T-003（SQLite 建表）、T-004（本地数据 gitignore）、T-005（AI 模型清单后端）、T-006（单元测试基座）、T-101（账号 slug/user-data-dir）、T-102（Chrome 启动器）、T-103（登录保活与检测）、T-104（PySide6 五 Tab 主窗口骨架）、T-104b（PySide6 worker 基座）、T-105（Tab④ 账号管理）、T-106（账号快捷方式）、T-201（Excel 导入：解析多文件输入列入库）、T-202（Tab① 任务列表 + 导入按钮 + 别名匹配标记）、T-202b（Tab① 导入汇总栏）、T-203（采集旧标题+旧封面）、T-204（回写旧字段到原 Excel）、T-204b（采集完成自动回写旧字段）、T-205（首次未配账号 / Chrome 未启动 / 未登录引导保护）、T-205b（采集后关闭自动新建商品页 tab）、T-206（Tab① 删除指定批次软删除）、T-301（AI 生成接口）、T-302（Tab② 左右布局与任务列表）、T-302p（提示词管理）、T-303（Tab② 开始生成 + 停止 + 进度）、T-303b（②/③ 商品ID筛选）、T-401（Tab③ 更新列表筛选 + 开始更新确认弹窗）、T-402（Tab③ 确认后串行更新）、T-403（Tab③ 结果回写与结束汇总）、T-501（Tab⑤ AI 模型管理 UI）、T-501b（Tab⑤ 角色与生成参数）、T-501c（Tab⑤ Shopee 更新安全开关）、T-502（换封面删第一张再上传）、T-503（敏感信息本地明文保存提示与日志脱敏）、T-504（多账号并行 / dry-run / 运行日志）、T-207（①采集诊断日志）、② AI生成图片失败诊断日志补丁、T-404a（②/③ 选中记录重置）、T-404（真实 Shopee 单条更新冒烟验收）、T-506（正式使用批量更新体验）、T-507（正式批量更新：移除普通流程测试商品 ID 限制）、T-508（③ 更新shopee生产化操作区）、T-509（② 新标题人工微调）、T-510（③ 检查本轮更新文案统一）、T-505（全流程诊断日志扩展）、T-511（语义色板 + ①②③任务状态列上色）、T-512（③高风险按钮上色 + ①导入校验数字标红）、T-513（登录点 / ③Tab危险标识 / 破坏性按钮上色）、T-514（①②③ 首次空状态引导卡片）、T-515（批次阶段进度总览）、T-516（①筛选对齐②③）、T-517（⑤设置分区 + 清理兼容字段）、T-518（②左栏提示词区组件密度优化）、T-519（②AI生成长任务进度条 + 用户可读滚动日志）。 +- 下一个可领取任务：暂无 TODO（当前任务看板已完成到 T-519；后续从 Backlog/UX review 继续拆任务）。 ## 当前已知限制 @@ -83,6 +83,7 @@ - T-516 已完成：①导入采集补齐店铺、商品ID、状态筛选，筛选栏与②③对齐；当前筛选结果用于①表格显示和「采集旧标题/旧封面」作用范围，导入汇总栏、批次进度总览和未匹配数量仍按当前批次全量任务统计；未匹配按钮继续在当前筛选结果内筛出未匹配任务。 - T-517 已完成：⑤设置页将「Shopee 更新安全 / 执行模式」前置为独立分区，将「基础设施（路径与端口）」后置；`test_item_id`、`dry_run` 不再有用户可操作控件，保存设置仍保留 `test_item_id` 兼容字段并固定 `dry_run=false`，③「检查本轮更新」语义不变。 - T-518 已完成：②AI生成左栏保留模板选择、编辑内容、新建/保存等高频入口，把封面模板「另存为 / 重命名 / 删除」收敛进②本页「模板操作」菜单；动作仍调用原有保存/重命名/删除方法，删除二次确认、错误处理和 prompts 文件结构不变，不涉及 AI/Shopee/CDP。 +- T-519 已完成：②AI生成底部增加标题/图片两条独立进度条，现有「AI生成运行日志」改为用户可读、自动滚动、脱敏的长任务日志；日志显示本轮开始、标题/图片开始与成功、商品ID/店铺、调用失败重试、失败、停止请求和完成汇总，不显示 API Key、密码、Cookie、token、完整请求体、base64 图片或超长 prompt，不改变 AI/DB/Excel/Shopee/CDP 核心流程。 - T-301/T-303 已完成通用 HTTP AI 接口、批量生成编排和 GUI 接入 mock 单测；真实 AI 生成还需要在 `config/ai_models.json` 填入可用 url/model/api_key 后做一次成本可控的小样本实测；URL 可填完整 endpoint 或 OpenAI-compatible base URL。 - 本地 `config/ai_models.json` 若由旧版本或手工维护，可能缺少 `category`；启动报 “AI 模型 category 必须是 text 或 image” 时，按 [`troubleshooting.md`](troubleshooting.md) 只补 `category` / `enabled` 等非密钥字段，保留 API Key，且不要提交该文件。 - T-403/T-501c 已完成③更新结果回写、结束汇总与真实更新安全开关；2026-06-29 已用测试商品跑到真实编辑页并完成标题/封面替换、页面主「更新」点击，但被 Shopee 站点侧确认框拦住。当前代码已补确认框处理、确认后列表页跳转观测、上传状态诊断、删除后稳定等待和 mock 单测；2026-06-30 用户复跑发现稳定等待顺序回归：满 9 张时删除前要求上传 input 可用，导致不删除第一张图；当前已修正为删除前只等图片列表稳定、删除后再等上传入口恢复，并补 mock 回归测试；2026-06-30 又发现物流/备货页面级校验 toast 会被误判成封面上传失败，当前已修复为上传阶段只识别图片/文件/上传相关错误，物流错误留到提交阶段处理。2026-06-30 用户复跑确认浏览器已成功更新标题/图片并跳转商品列表，但 GUI 仍报 `POST_UPDATE_ERROR`；已修正提交后观测优先级：列表页跳转优先判成功，残留 error toast 不再覆盖成功跳转，错误 toast 仅在未跳转且持续存在时判失败。当前又发现商品 26887160467 手动上传 220KB 新图成功，但代码直接注入文件后上传组件长期转圈；T-404 当前补丁已让 `replace_cover()` 上传前先点击上传块模拟人工入口、短暂等待、重新获取 input 后再 `DOM.setFileInputFiles`，并补 mock 回归测试。25120403046 只有 8 张商品图时未删除第一张导致 Shopee 提示 `有1張重複的圖片`；当前已落地为更新封面统一先删当前第一张再上传，并把 `重複/重复/duplicate` toast 识别为封面上传失败。新采集/新生成图片路径已改为按批次细分，避免同一账号多批次图片混放；历史 DB 已存路径继续可用。确认后若返回我的商品列表页且设置了成功后关闭本次新开编辑页，关闭前等待 2 秒。2026-07-01 用户已用包含 5 个商品 ID 的 Excel 完成导入、AI 生成标题/图片、Tab③ 更新到 Shopee 的真实链路验收，T-404 判定完成。 diff --git a/progress.md b/progress.md index 0c99c27..41f9b05 100644 --- a/progress.md +++ b/progress.md @@ -992,3 +992,17 @@ - 范围控制：不迁移到⑤设置，不改 prompts 数据结构，不改 AI 生成 HTTP、DB schema、Excel 或 Shopee/CDP 流程。 - 测试：`tests/test_gui.py` 覆盖「模板操作」菜单入口、菜单 action 触发原有行为，以及旧低频按钮不再平铺。 - 验证：`python -m py_compile app\gui.py tests\test_gui.py` 通过；`python -m unittest discover -s tests -p "test_gui.py"` 通过（68 tests）；`python -m compileall app main.py` 通过；`python -m unittest discover -s tests` 通过（156 tests）。Qt 仍有本机字体目录提示，不影响测试结果。 +## 【2026-07-02】T-519 文档启动 · ②AI生成长任务进度条与用户日志 + +- 背景：用户反馈批量生成几十/上百个标题或图片超时重试时耗时较长，需要在②AI生成里更清楚地看到剩余量、是否卡住、慢在哪一步。 +- 文档：`docs/06-tasks.md` 新增 T-519 并标记 DOING，明确②底部增加标题/图片两条独立进度条，现有「AI生成运行日志」增强为用户可读自动滚动日志；日志展示本轮开始、标题/图片开始与成功、商品ID/店铺、图片超时/重试、失败原因、停止请求和完成汇总，同时禁止显示 API Key、密码、Cookie、token、完整请求体、base64 图片或超长 prompt。 +- 范围：只改②生成 UI、`GenerateWorker`/AI 生成事件文案和测试；不改 AI HTTP 协议、DB schema、Excel、Shopee/CDP 流程。 +- 验证：文档-only 更新，未运行单元测试。 +- 下一步：按 T-519 文档更新 `app/gui.py`、`app/ai.py` 和相关测试。 +## 【2026-07-02】T-519 完成 · ②AI生成长任务进度条与用户日志 + +- 代码：`app/gui.py` 在②AI生成底部增加标题/图片两条独立 `QProgressBar`，分别显示 `标题 x/y`、`图片 x/y` 和失败数；保留原进度文本用于状态汇总；现有「AI生成运行日志」追加后自动滚到底部，加载最近一次日志时按时间顺序显示。 +- 日志：`GenerateWorker` 将生成事件转为用户可读短句，显示本轮开始、标题/图片开始与成功、商品ID/店铺、调用失败重试、失败、停止请求和完成汇总；日志继续通过脱敏工具处理并写入 `run_logs/run_log_events`。 +- AI事件：`app/ai.py` 的 `_call_with_retry()` 支持 `on_retry` 回调，标题/图片请求失败但仍会重试时上报 `retry` 事件；不改 AI HTTP 协议、DB schema、Excel 或 Shopee/CDP 流程。 +- 测试：`tests/test_gui.py` 覆盖双进度条初始状态、用户可读日志、重试日志脱敏和旧日志加载；`tests/test_ai.py` 覆盖标题生成重试事件上报。 +- 验证：`python -m py_compile app\ai.py app\gui.py tests\test_ai.py tests\test_gui.py` 通过；`python -m unittest discover -s tests -p "test_ai.py"` 通过（7 tests）；`python -m unittest discover -s tests -p "test_gui.py"` 通过（68 tests）；`python -m compileall app main.py` 通过；`python -m unittest discover -s tests` 通过（156 tests）。Qt 仍有本机字体目录提示，不影响测试结果。 diff --git a/tests/test_ai.py b/tests/test_ai.py index ca52c05..c673136 100644 --- a/tests/test_ai.py +++ b/tests/test_ai.py @@ -99,6 +99,7 @@ class AITests(TempDirMixin, unittest.TestCase): models_path = os.path.join(temp_dir, "ai_models.json") self._write_models(models_path) calls = [] + steps = [] def fake_urlopen(request, timeout=None): calls.append((request, timeout)) @@ -112,10 +113,18 @@ class AITests(TempDirMixin, unittest.TestCase): "旧标题", config=self._config(), models_path=models_path, + on_step=steps.append, ) self.assertEqual("新标题", title) self.assertEqual(2, len(calls)) + retry_events = [step for step in steps if isinstance(step, dict)] + self.assertEqual(1, len(retry_events)) + self.assertEqual("title_request", retry_events[0]["step"]) + self.assertEqual("retry", retry_events[0]["result"]) + self.assertEqual(1, retry_events[0]["attempt"]) + self.assertEqual(2, retry_events[0]["attempts"]) + self.assertNotIn("sk-text-secret", retry_events[0]["detail"]) body = json.loads(calls[-1][0].data.decode("utf-8")) self.assertEqual("text-model", body["model"]) self.assertEqual(0, body["temperature"]) @@ -143,6 +152,7 @@ class AITests(TempDirMixin, unittest.TestCase): }, ) calls = [] + steps = [] def fake_urlopen(request, timeout=None): calls.append(request) @@ -154,6 +164,7 @@ class AITests(TempDirMixin, unittest.TestCase): "旧标题", config=self._config(), models_path=models_path, + on_step=steps.append, ) self.assertEqual("新标题", title) diff --git a/tests/test_gui.py b/tests/test_gui.py index 2b4667f..67522a8 100644 --- a/tests/test_gui.py +++ b/tests/test_gui.py @@ -17,7 +17,7 @@ if gui.QT_IMPORT_ERROR is not None: raise unittest.SkipTest("PySide6 未安装") from PySide6.QtGui import QTextCursor -from PySide6.QtWidgets import QApplication, QLineEdit, QPlainTextEdit, QTableView +from PySide6.QtWidgets import QApplication, QLineEdit, QPlainTextEdit, QProgressBar, QTableView from app.gui import ( AccountDialog, @@ -696,6 +696,15 @@ class GuiTests(TempDirMixin, unittest.TestCase): self.assertEqual("重置生成结果", tab.reset_generate_button.text()) self.assertFalse(tab.stop_generate_button.isEnabled()) self.assertEqual("进度：标题0/0 · 封面0/0 · 失败0", tab.progress_label.text()) + self.assertIsInstance(tab.title_progress_bar, QProgressBar) + self.assertIsInstance(tab.cover_progress_bar, QProgressBar) + self.assertEqual("标题 0/0", tab.title_progress_label.text()) + self.assertEqual("图片 0/0", tab.cover_progress_label.text()) + self.assertEqual("失败 0", tab.failed_progress_label.text()) + self.assertEqual(0, tab.title_progress_bar.value()) + self.assertEqual(0, tab.cover_progress_bar.value()) + self.assertEqual(1, tab.title_progress_bar.maximum()) + self.assertEqual(1, tab.cover_progress_bar.maximum()) self.assertEqual("默认", tab.cover_template_combo.currentText()) self.assertEqual("模板操作", tab.cover_template_actions_button.text()) self.assertIs(tab.cover_template_actions_menu, tab.cover_template_actions_button.menu()) @@ -905,6 +914,7 @@ class GuiTests(TempDirMixin, unittest.TestCase): tasks = db.list_tasks(batch_id=batch_id, path=cfg["db_path"]) progress = [] rows = [] + logs = [] def fake_generate_batch(tasks_arg, prompt_values, ai_cfg=None, on_progress=None, should_stop=None): self.assertEqual(tasks, tasks_arg) @@ -919,10 +929,22 @@ class GuiTests(TempDirMixin, unittest.TestCase): { "task": tasks[0], "phase": "cover", - "step": "cover_request", + "step": "cover_submit", "result": "start", } ) + ai_cfg["on_event"]( + { + "task": tasks[0], + "phase": "cover", + "step": "cover_request", + "result": "retry", + "attempt": 1, + "attempts": 3, + "detail": "timeout token=SECRET-TOKEN", + "level": "warning", + } + ) ai_cfg["on_task_update"](tasks[0].id, {"stage": "generated"}) return {"ok": True, "total": 1, "title_done": 1, "cover_done": 1, "failed": 0} @@ -934,6 +956,7 @@ class GuiTests(TempDirMixin, unittest.TestCase): ) worker.progress.connect(progress.append) worker.row_updated.connect(lambda task_id, fields: rows.append((task_id, fields))) + worker.log.connect(logs.append) with mock.patch("app.gui.ai.generate_batch", side_effect=fake_generate_batch): summary = worker.execute() @@ -945,8 +968,17 @@ class GuiTests(TempDirMixin, unittest.TestCase): self.assertEqual([(tasks[0].id, {"stage": "generated"})], rows) run_log = db.list_run_logs(limit=1, run_type="generate", path=cfg["db_path"])[0] self.assertEqual(summary["run_id"], run_log.id) + joined_logs = "\n".join(logs) + self.assertIn("[开始] 本轮生成 1 条", joined_logs) + self.assertIn("[图片] 1/1 商品 51100639510", joined_logs) + self.assertIn("准备重试 1/2", joined_logs) + self.assertIn("token=***", joined_logs) + self.assertNotIn("SECRET-TOKEN", joined_logs) + self.assertIn("[完成] AI 生成完成：标题1/1，图片1/1，失败0", joined_logs) events = db.list_run_log_events(summary["run_id"], path=cfg["db_path"]) - self.assertTrue(any("phase=cover step=cover_request result=start" in event.message for event in events)) + event_messages = "\n".join(event.message for event in events) + self.assertIn("[图片] 1/1 商品 51100639510", event_messages) + self.assertIn("准备重试 1/2", event_messages) self.assert_removed(temp_dir) @@ -1010,7 +1042,8 @@ class GuiTests(TempDirMixin, unittest.TestCase): events = db.list_run_log_events(summary["run_id"], path=cfg["db_path"]) messages = "\n".join(event.message for event in events) - self.assertIn("phase=cover step=cover_request result=failed", messages) + self.assertIn("[失败] 商品 51100639510", messages) + self.assertIn("图片生成失败", messages) self.assertIn("token=***", messages) self.assertNotIn("SECRET-TOKEN", messages) @@ -1596,6 +1629,7 @@ class GuiTests(TempDirMixin, unittest.TestCase): close_flags = [] progress = [] rows = [] + logs = [] def fake_apply(account, task, close_success_tab=False, on_step=None): applied_aliases.append(account.alias)