广州地区求Python爬虫脚本修复,数据抓取异常
软件研发服务 / 应用与代码开发
任务详情
| 分类 | 软件研发服务 / 应用与代码开发 |
|---|---|
| 任务描述 | 现有爬虫脚本抓取某公开电商页面时频繁触发反爬,导致数据缺失和报错。需要修复脚本,增加请求头轮换、代理IP池和简单图形验证码识别,让商品列表页和详情页能稳定抓取。脚本用Python 3,依赖requests、BeautifulSoup和Selenium。交付修复后的完整代码、依赖清单和运行说明,并保证本地测试通过。不要使用真实用户隐私数据,只针对公开信息。 |
| 截止日期 | 2026/11/24 |
| 发包方 | 第七个黄昏 |
项目预算
| 结算方式 | 按里程碑结算 |
|---|---|
| 项目当前阶段 | 开发实施 |
| 预计投入周期 | 3 天 |
| 现金预算 | ¥7,000 |
验收标准
1. 通用验收 修复后的脚本要能连续稳定跑30分钟,抓取成功率达到95%以上,且不触发目标网站封禁。;代码需包含请求头轮换、代理IP池(至少5个可用代理)和简单图形验证码识别,验证码识别准确率不低于80%。;交付物包括完整源代码、requirements.txt、README.md(含环境配置和运行步骤)和测试报告(记录30分钟运行日志及成功率统计)。;代码需通过flake8基本检查,无严重错误。;修改范围仅限爬虫脚本及相关配置,不要改动其他无关文件。;验收时现场演示抓取过程并展示数据完整性。 2. 脚本修复与功能增强 (一) 脚本能稳定运行30分钟,抓取成功率达95%以上,验证码识别准确率≥80%,代码通过flake8检查,交付物齐全。
发包方情况