先看搜索证据
已验证爬虫、AI Search、AI 抓取、搜索引擎抓取和爬虫类别说明，网站需要按角色看爬虫访问，而不是按访问总量判断。
AI 出海网站要知道哪些爬虫 带来搜索发现，哪些可能是训练抓取，哪些只是异常探测，才能正确放行或限制。
被看见不等于被选择
真正有用的问题不是页面有没有出现过，而是搜索问题、页面承诺和下一步动作是否服务同一个读者任务。
先核对页面路径
- 把 爬虫访问分成搜索发现、AI 引用、训练抓取、监控服务和异常请求五类复盘
- 先选一个重点页面验证主题、来源、内链和转化动作，不要把信号提前包装成完整内容战略
哪些还要核验
一刀切拦截或一刀切放行，都会让搜索发现和安全成本失真。原始来源保留在文末，方便把公告事实、证据和本站判断分开看。