深圳地区电商平台商品数据爬虫开发与定期采集
软件研发服务 / 数据采集与爬虫
任务详情
| 分类 | 软件研发服务 / 数据采集与爬虫 |
|---|---|
| 任务描述 | 需要一套能稳定运行的爬虫程序，定期采集深圳地区主流电商平台（如京东、天猫）上指定品类的商品数据，包括商品名称、价格、销量、店铺信息等，用于市场分析。要求使用Python编写，具备反爬应对措施，数据存储到MySQL数据库，并支持定时任务。交付源码、部署文档和数据库设计。注意遵守相关法律法规，不得采集用户隐私数据。 |
| 截止日期 | 2026/11/27 |
| 发包方 | 南风知意 |
项目预算
| 结算方式 | 按里程碑结算 |
|---|---|
| 项目当前阶段 | 开发与交付 |
| 预计投入周期 | 2 周 |
| 现金预算 | ¥11,500 |
验收标准
1. 爬虫程序能稳定采集指定电商平台（至少两个）的指定品类商品数据，单次采集不少于500条记录，字段完整率100%。 2. 数据存储到MySQL数据库，表结构设计合理，包含商品ID、名称、价格、销量、店铺、采集时间等字段。 3. 提供完整的部署文档，包括环境依赖、配置说明、运行步骤。 4. 源码结构清晰，有必要的注释，通过提供的测试用例。 5. 具备反爬策略（如IP代理、请求头随机化、限速等），在测试期间未被封禁。 6. 支持定时任务配置（如每日凌晨执行），并提供日志记录功能。 7. 交付物包括源码、数据库脚本、部署文档、测试报告。 8. 修改范围限于本项目代码，不涉及第三方系统。
发包方情况
