时间:2026-09 交付状态:已交付类型:桌面工具 / 数据采集
客户在热***推(r***.com)选品,需要批量按关键词采集商品数据(标题/价格/销量/佣金等)导出 Excel,供线下选品分析。
浏览器渲染 + CDP 网络监听架构:启动用户本机 Edge/Chrome 渲染网站(保留登录态),CDP 监听商品接口响应提取数据,本地控制台页 iframe 嵌站点 + 数据表格 + 自动采集。已抽离为通用框架 templates/web-collector。
功能清单
- 登录态采集:用户在页面登录一次,监听接口持续采数据
- 批量关键词自动搜索:CDP 可信输入 + 搜索确认 + 无限滚动自动加载
- 请求超时检测:网站限流时自动跳过当前关键词继续,不卡死
- 实时数据表格(虚拟滚动)+ Excel 导出 + 每条数据带来源关键词
- 采集进度显示:[序号/总数] 关键词,停止后保留进度
- 按商品 ID 全局去重
- 交付为免安装 exe,客户无需 Python 环境
成果指标
- 交付包 9***.1MB(对比 QtWebEngine 方案 213MB)
- Excel 流式导出 10 万行约 7 秒
- 表格虚拟滚动,数千行数据 UI 不卡
演示截图