线上服务日志分析脚本开发:从海量日志中自动提取错误链路
软件研发服务 / 日志与故障分析
任务详情
| 分类 | 软件研发服务 / 日志与故障分析 |
|---|---|
| 任务描述 | 最近排查线上故障时,发现日志分散在多个文件中,人工逐条检索效率太低。需要开发一个分析脚本,能够读取指定目录下的日志文件(格式为常见的文本日志或 JSON 行),自动提取错误码、异常堆栈和关键请求 ID,并按照请求链路聚合输出摘要报告。脚本要求用 Python 3 编写,具备命令行参数(输入目录、输出文件、时间过滤),对无法解析的行跳过并记录警告。交付物包括脚本源码、README 说明文档和针对样例日志的测试报告。注意脚本需兼容 Linux 环境,处理大文件时避免内存溢出。 |
| 截止日期 | 2026/11/30 |
| 发包方 | 青苔与尺 |
项目预算
| 结算方式 | 按里程碑结算 |
|---|---|
| 项目当前阶段 | 开发实施 |
| 预计投入周期 | 7 天 |
| 现金预算 | ¥24,000 |
验收标准
脚本能够成功读取样例日志目录,正确解析文本和 JSON 行格式,对无法解析的行输出警告且不中断。 按请求 ID 聚合错误链路,输出摘要报告包含每个链路的错误码、异常堆栈和出现次数,格式为可读的文本或 JSON。 命令行参数支持输入目录、输出文件和可选的时间过滤(按时间戳范围),参数说明清晰。 测试报告需包含样例日志的运行结果和边界情况(如空文件、超大文件)的验证记录,且脚本在 4GB 内存环境下处理 1GB 日志文件不崩溃。 交付物包括源码、README 和测试报告,源码注释完整,README 包含安装依赖和运行示例。
发包方情况
