- 新增专业日志系统:集成 Winston 日志框架,支持按天轮转和分级存储 - 增强反爬虫能力:集成 puppeteer-extra-plugin-stealth 插件,提升隐蔽性 - 新增独立爬虫脚本:可通过 npm run crawl 命令单独执行爬虫任务 - 优化前端日期筛选:添加日期范围选择器,支持3天/7天快速筛选 - 改进爬虫统计功能:详细记录每个平台的成功/失败情况和执行时间 - 移除默认关键词初始化:避免重复创建预设关键词 - 扩展环境配置:新增 LOG_LEVEL 日志级别配置选项 - 增强.gitignore:添加日志目录、构建产物等忽略规则 - 升级执行时间限制:将最大执行时间从1小时延长至3小时 - 完善错误处理:更好的异常捕获和日志记录机制
- 新增爬虫状态检测:前端实时检测爬虫运行状态,防止重复点击 - 添加来源筛选功能:可按采购平台来源筛选招标信息 - 实现关键字过滤:支持多选关键字过滤今日招标,结果保存到localStorage - 添加分页功能:招标列表支持分页显示,可调整每页数量 - 优化关键字管理:将表格形式改为标签云形式,更直观易用 - 改进UI布局:优化标题栏布局,添加筛选控件,提升用户体验 - 调整定时任务:将爬虫频率从每30分钟改为每天午夜执行,减少服务器压力 - 增强交互体验:添加加载状态、空状态处理、标签颜色区分等细节优化