可以得出的结论
- 该请求匹配 ClaudeBot User-Agent 标记。
- Talivia 记录了路径、方法、时间和响应状态。
- 该请求与 Claude 搜索和用户获取分开。
查看 ClaudeBot 请求趋势
ClaudeBot 是 Anthropic 用于模型开发与改进的自动爬虫。
Bot traffic
ClaudeBot
GPTBotOAI-SearchBot
PerplexityBotClaude-SearchBotChatGPT-UserPerplexity-UserClaude-UserOAI-AdsBotClaudeBot 请求代表什么
ClaudeBot 标记识别 Anthropic 所描述的自动抓取。如果没有可信的爬虫专用网络匹配，Talivia 会明确将请求保留为未验证，而不会把 User-Agent 文本当作证明。
不能证明的内容
- 来源身份得到密码学保证。
- 该页面被选用于模型训练。
- 此次抓取产生了引用或推荐。
技术参考
User-Agent
ClaudeBot/1.0Talivia 在规范化的 User-Agent 中查找稳定标记 ClaudeBot。
robots.txt
User-agent: ClaudeBot
Allow: /
# To block instead:
# Disallow: /使用 robots.txt 表达允许或阻止的抓取偏好。
验证
提供商发布了爬虫行为指南，但 Talivia 不会仅凭 User-Agent 标记声称网络身份已验证。
查看官方来源使用 Talivia 追踪 ClaudeBot
- 1启用机器人流量
在网站设置中开启收集。
- 2传递服务器密钥
从受信任的服务器或中间件发送最小事件。
- 3检查爬虫活动
查看页面、状态、趋势和验证置信度。
相关 Anthropic 爬虫
ClaudeBot 常见问题
如何知道请求来自 ClaudeBot？
Talivia 匹配 ClaudeBot User-Agent 标记，并明确标示验证置信度。User-Agent 可以被伪造，因此标记匹配本身不是身份保证。
如何允许或阻止 ClaudeBot？
在 robots.txt 中为 ClaudeBot 添加规则，并根据提供商的官方文档检查行为。robots.txt 表达抓取偏好，但不是访问控制或身份验证机制。
Talivia 会保存哪些数据？
Talivia 保存主机名、清理后的路径、方法、User-Agent、可选状态码、分类和验证结果。它不会保存页面正文、Cookie、授权头、查询字符串或原始 IP 地址。
在您自己的流量中查看 ClaudeBot
使用服务器端追踪开始记录真实请求。
添加您的网站