石家庄本地爬虫外包:采集电商商品数据并清洗入库
软件研发服务 / 数据采集与爬虫
任务详情
| 分类 | 软件研发服务 / 数据采集与爬虫 |
|---|---|
| 任务描述 | 现有一个电商价格监控项目,需要采集多个主流电商平台的商品详情数据(包括商品标题、价格、销量、评价数、店铺信息等),并清洗后存入MySQL数据库。目标网站包括京东、天猫、拼多多,要求遵守robots协议,控制请求频率,避免被封IP。交付物包括爬虫源代码(Python)、数据库设计文档、部署说明文档,以及至少一周的稳定运行测试报告。注意:不得使用任何破解验证码或绕过反爬机制的手段,采集频率需可配置,数据需去重。项目周期约2周,希望有爬虫经验的朋友联系。 |
| 截止日期 | 2026/11/28 |
| 发包方 | 雾里看花的猫 |
项目预算
| 结算方式 | 按里程碑结算 |
|---|---|
| 项目当前阶段 | 数据采集与爬虫 |
| 预计投入周期 | 2 周 |
| 现金预算 | ¥22,000 |
验收标准
1. 成果与范围 验收时需检查爬虫源代码是否完整、可运行,代码结构清晰,有必要的注释。 数据库设计文档需包含表结构、字段说明及索引设计。 部署说明文档需详细说明环境依赖、配置项及启动步骤。 2. 质量与文件 测试报告需体现连续7天运行无重大故障,数据采集量达到约定标准(如每日至少5000条有效数据),数据去重率100%,且未触发目标网站封禁。 所有交付物需以电子文件形式提交,源代码需通过基本代码审查,确保无硬编码敏感信息。 功能上需支持多平台采集,频率可配置,数据入库前完成清洗(去除HTML标签、统一价格格式等)。 3. 节点与交付 修改范围限于本项目需求,交付清单包括源代码、文档、测试报告。
发包方情况

雾里看花的猫 VIP