椒椒图蜘蛛信息查询
Anthropic · 基础档案
爬虫名称
Anthropic
活跃状态
活跃
Robots 协议
遵守
爬虫价值
5
能力评估 六维评分由档案字段映射生成，仅供参考
能力雷达图加载中...

爬虫介绍

Anthropic 旗下爬虫，大规模抓取公开网页数据用于训练 Claude 系列大模型，支撑模型能力与安全性迭代。

细节参数 请求头与抓取行为完整档案
名称
Anthropic
User-Agent
ClaudeBot
版本号
1
爬虫类型
AI数据
官方网址
https://www.anthropic.com/bot
抓取频率
中（地质数据更新）
抓取深度
中（地质报告页面）
渲染能力
支持地图/图表渲染
Accept 请求头
text/html,image/*,application/pdf,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8
Accept-Language
en-US,en;q=0.9,zh-CN;q=0.8
Connection
keep-alive
Accept-Encoding
gzip, deflate, br
联系邮箱
claudebot@anthropic.com
首次出现
2023年
创建时间
2026-03-03 11:54:02
来路 IP 信息 来自椒图采集网络的实测记录
共 167 条记录 ｜ 第 1 页 / 共 17 页
IP 地址爬虫名称访问时间
10.1.117.15 Anthropic 2026-04-09 13:17:58
10.1.120.225 Anthropic 2026-10-15 12:37:05
10.1.121.203 Anthropic 2026-08-25 22:26:28
10.1.136.25 Anthropic 2026-08-25 20:09:09
10.1.139.153 Anthropic 2026-05-31 20:45:32
10.1.14.109 Anthropic 2026-06-10 18:03:27
10.1.148.101 Anthropic 2026-04-24 10:49:08
10.1.149.37 Anthropic 2026-03-15 02:08:37
10.1.156.183 Anthropic 2026-06-04 01:15:11
10.1.159.7 Anthropic 2026-08-26 08:24:32
上一页 1 2 17 下一页
拦截 Anthropic 的方法 五种方案按拦截强度与部署成本选择

1. robots.txt 禁止（标准方式，仅对合规爬虫有效）

通过网站根目录的 robots.txt 声明禁止该爬虫访问，简单标准；恶意爬虫会无视该规则。

2. Nginx / Apache 根据 UA 拉黑（服务器级拦截，效率高）

在服务器配置中直接匹配爬虫 UA 返回 403，不消耗应用资源；需修改服务器配置。

3. .htaccess 禁止（Apache 专属，虚拟主机常用）

通过 .htaccess 规则拦截指定 UA，无需修改主配置；仅适用于 Apache 服务器。

4. PHP / 后端判断 UA 拦截（灵活定制，适配所有环境）

在 PHP 代码中判断访问者 UA，命中后返回 403，灵活可定制；会消耗应用服务器资源。

5. JS 屏蔽（前端拦截，仅挡普通爬虫）

前端 JavaScript 检测 UA 并跳转 403 页面，简单易实现；高级爬虫可绕过（不执行 JS）。

同类爬虫 同类型已审核数据 · 最多展示30条
OpenAI Amazon Facebook Meta Web Indexer Meta External Agent YouBot DuckAssist anthropic-ai Google-Extended Applebot-Extended OAI-SearchBot ChatGPT-User Claude-User Claude-SearchBot Perplexity Perplexity-User Cohere MistralAI-User Diffbot FacebookBot Common Crawl 华为 Timpi Kangaroo Bot ImageSift AgentDataBot AgentTimes AGI, Inc AI2Bot Ai2, a non-profit AI research institute
椒图（Jiaotu）蜘蛛信息查询平台 · 数据持续更新中 返回爬虫大全