蜘蛛统计与访问统计
GOCO 提供两个互补的统计模块:蜘蛛统计回答「搜索引擎和 AI 蜘蛛有没有来爬、爬了什么」,访问统计回答「真实访客有多少、从哪来」。两者都自动采集,无需在站点里埋任何代码。
蜘蛛统计:谁在爬你的站
Section titled “蜘蛛统计:谁在爬你的站”「蜘蛛统计」读取服务器的访问日志,自动识别 Googlebot、Bingbot、GPTBot 等搜索引擎与 AI 蜘蛛,并验证真伪。数据每小时采集一次。
- 概览指标:总爬取次数、活跃蜘蛛、被爬站点、唯一路径、可疑爬取,可按「今日 / 昨日 / 近 7 天 / 近 30 天 / 全部」切换时间窗。
- 爬取趋势:按小时(北京时间)或按天的柱状趋势,加一张「蜘蛛占比」饼图,看清哪家蜘蛛来得最多。
- 蜘蛛类别:每个蜘蛛都归入类别——中国搜索、国际搜索、中国AI、国际AI、社交、SEO、安全、采集、未知——可按类别筛选,也可按服务器、站点域名过滤。
- 真伪验证:每条爬取标注「已验证 / 可疑 / 未验证」。「已验证」表示来源 IP 确认属于该引擎官方;「可疑」表示有人伪装成蜘蛛的 UA,并非真实引擎。
频次怎么读、对收录有什么意义
Section titled “频次怎么读、对收录有什么意义”- 有已验证的搜索蜘蛛来爬(如 Googlebot、Bingbot、百度蜘蛛)说明搜索引擎已经发现了你的站点——这是收录的前提。
- 爬取频次上升通常出现在内容持续更新之后:发文越规律,蜘蛛回访越勤,新页面被收录得越快。
- 长期零爬取的站点值得排查:域名是否已生效、robots 是否放行、站点是否可正常访问(可到监控页确认)。
- 可疑爬取偏多不影响收录,它统计的是伪装 UA 的流量,仅供了解站点被采集的情况。
爬取明细与蜘蛛排行
Section titled “爬取明细与蜘蛛排行”页面下方有两个标签页:
- 爬取明细:逐条记录站点 / 路径、蜘蛛、类别、方法、状态码、IP、归属地、验证等,可搜索路径、自选列、导出 CSV。
- 蜘蛛排行:按蜘蛛聚合的爬取次数、覆盖站点数、可疑数与最近爬取时间;点击某个蜘蛛可下钻看它的按站点分布、热门路径与爬取流水。
点击右上角「配置」可按服务器开启 / 关闭蜘蛛分析:添加服务器成功即默认开启,系统每小时自动采集;可调整扫描间隔,非标准面板还可在「高级」里覆盖日志路径。云托管站点由平台网关自动采集,无需任何配置。
刚开启时会显示「正在首次采集…」,蜘蛛数据通常在下一次采集后出现。
访问统计:真实访客有多少
Section titled “访问统计:真实访客有多少”「访问统计」汇总你名下所有站点的访问数据,每 15 分钟采集一次。
- 浏览量 PV:页面被打开的总次数。
- 访客数 UV:去重后的访客人数。
- IP 数:去重后的访问 IP 数。
- 有访问站点:时间窗内产生过访问的站点数量。
概况页还有「访问趋势」「访问占比」图表,以及按站点的明细表(PV / UV / IP 数 / 跳出率 / 平均访问时长 / 最近访问 / 状态),支持按服务器、分组筛选与导出 CSV。每行可「查看详情」下钻单站,或「立即采集」触发一次即时采集。
来源与更多维度
Section titled “来源与更多维度”- 来源:来源类型分为直接访问、搜索引擎、社交媒体、外部链接、站内来源、其它;还能看具体的来源网站(referrer)。
- 受访:入口页面与受访页面排行,看清访客都在看哪些页。
- 访客:设备(桌面 / 移动 / 平板)、浏览器、操作系统分布。
- 地域:访客的地域分布。
点击任意维度值可打开钻取弹窗,查看该维度下各站点占比与访问明细样本。
数据来源徽章
Section titled “数据来源徽章”每个站点行会带一个数据来源标记:
| 徽章 | 含义 |
|---|---|
| 日志 | 数据来自服务器访问日志(默认方式) |
| CF | 数据来自 Cloudflare 边缘,仅对已开启 CF 代理(橙色云朵)的站点有效,反映代理站真实流量 |
| 探针 | 数据来自 JS 探针 |
| CF 采集中 | 代理站的 Cloudflare 数据还在采集,暂用服务器日志(可能低估) |
外部站点(JS 接入)
Section titled “外部站点(JS 接入)”「外部站点」标签页可以统计不是用 GOCO 建的网站:添加域名后把生成的代码贴到该网站每个页面的头部即可,数据每分钟汇总,显示在「概况」里。
数据延迟与保留
Section titled “数据延迟与保留”| 数据 | 更新频率 |
|---|---|
| 蜘蛛统计 | 每小时采集一次 |
| 访问统计(服务器日志) | 每 15 分钟采集一次 |
| 外部站点(JS 接入) | 每分钟汇总 |
- 新接入的服务器需等待首次采集完成后才有数据;也可在站点行点「立即采集」。
- 逐条原始明细仅保留最近 7 天;聚合统计覆盖所选时间窗。
- 平台仅保留最近约 2 个月的统计数据,更早的会自动清除,需要留档请及时导出 CSV。
与监控页的分工
Section titled “与监控页的分工”- 统计(本页)回答「谁来了」:蜘蛛爬取与访客流量的分析,数据按小时 / 15 分钟批量汇总。
- 监控回答「站点现在是否正常」:站点可达性、服务器在线、异常告警,实时性更强。
流量突然归零时,建议先到监控页确认站点是否可达,再回统计页看趋势。
站点与服务器监控站点健康、服务器在线与异常告警
