日志全量记录
记录蜘蛛名称、访问 IP、请求 URL、HTTP 状态码与时间戳，并建立索引保证查询速度。
插件简介
蜘蛛来没来、来了多少次、爬了哪些页面、返回什么状态码——这些直接影响 SEO 判断。 插件把每次蜘蛛访问写入独立数据表，再用图表把数据讲清楚， 同时提供防火墙对恶意抓取做基础拦截。
数据概览
今日抓取
实时统计
累计抓取
全量汇总
活跃蜘蛛
按 UA 归并
核心特色
可视化统计
基于 ECharts 输出今日抓取排行与蜘蛛分布图，谁来得勤一目了然。
趋势分析
近 7 天蜘蛛抓取趋势曲线，判断收录活跃度变化与异常波动。
访问日志查询
分页浏览原始访问记录，支持按条件筛查定位具体抓取行为。
防火墙
对异常高频或可疑抓取做规则拦截，减轻服务器压力。
服务状态
统计面板展示服务运行状态，方便快速确认记录功能是否正常。
功能清单
- 蜘蛛识别：按 UA 匹配主流搜索引擎蜘蛛
- 自定义数据表：激活时自动建表并创建索引
- 今日排行：按抓取次数对蜘蛛排序展示
- 蜘蛛分布：各蜘蛛占比可视化
- 7 天趋势：抓取量随时间变化曲线
- 日志明细：IP / URL / 状态码逐条可查
- 防火墙规则：拦截策略可配置
- 系统设置：开关、保留周期等参数
后台入口
| 菜单 | 说明 |
|---|---|
| my蜘蛛Pro → 数据统计 | 今日抓取、累计抓取、活跃蜘蛛、服务状态 + 图表 |
| my蜘蛛Pro → 趋势分析 | 近 7 天抓取趋势图 |
| my蜘蛛Pro → 访问日志 | 原始抓取记录分页查询 |
| my蜘蛛Pro → 防火墙 | 异常抓取拦截规则 |
| my蜘蛛Pro → 系统设置 | 插件参数配置 |