收录各大搜索引擎与商业爬虫的 User-Agent、抓取行为、渲染能力与来路 IP 数据,为站长提供「识别 - 分析 - 拦截」全流程参考。取名源自镇守门户的瑞兽,为网站守住爬虫访问的大门。
| User-Agent | 爬虫名称 | 类型 | 抓取频率 | 抓取深度 | 遵守 Robots | 是否活跃 |
|---|---|---|---|---|---|---|
| Hunter | Hunter | 未分类 | — | — | 无视 | 停用 |
| Apollo | Apollo | 未分类 | — | — | 无视 | 停用 |
| Clearbit | Clearbit | 未分类 | — | — | 无视 | 停用 |
| ZoomInfo | ZoomInfo | 未分类 | — | — | 无视 | 停用 |
| Leadfeeder | Leadfeeder | 未分类 | — | — | 无视 | 停用 |
| Lusha | Lusha | 未分类 | — | — | 无视 | 停用 |
| Signal | Signal | 未分类 | — | — | 无视 | 停用 |
| Seamless | Seamless | 未分类 | — | — | 无视 | 停用 |
| D&B | D&B | 未分类 | — | — | 无视 | 停用 |
| Crunchbase | Crunchbase | 未分类 | — | — | 无视 | 停用 |
| SimilarWeb | SimilarWeb | 未分类 | — | — | 无视 | 停用 |
| Majestic | Majestic | 未分类 | — | — | 无视 | 停用 |
| SpyFu | SpyFu | 未分类 | — | — | 无视 | 停用 |
| iSpionage | iSpionage | 未分类 | — | — | 无视 | 停用 |
| Serpstat | Serpstat | 未分类 | — | — | 无视 | 停用 |
| UpLead | UpLead | 未分类 | — | — | 无视 | 停用 |
| DiscoverOrg | DiscoverOrg | 未分类 | — | — | 无视 | 停用 |
| InsideView | InsideView | 未分类 | — | — | 无视 | 停用 |
| LeadGenius | LeadGenius | 未分类 | — | — | 无视 | 停用 |
| BuiltWith | BuiltWith | 未分类 | — | — | 无视 | 停用 |
| Wappalyzer | Wappalyzer | 未分类 | — | — | 无视 | 停用 |
| Sentry | Sentry | 未分类 | — | — | 无视 | 停用 |
| Google-Maps-API | Google-Maps-API | 未分类 | — | — | 无视 | 停用 |
| Baidu-Maps-API | Baidu-Maps-API | 未分类 | — | — | 无视 | 停用 |
| Amap-API | Amap-API | 未分类 | — | — | 无视 | 停用 |
| Tencent-Maps-API | Tencent-Maps-API | 未分类 | — | — | 无视 | 停用 |
| WHOIS | WHOIS | 未分类 | — | — | 无视 | 停用 |
| ICANN | ICANN | 未分类 | — | — | 无视 | 停用 |
| IANA | IANA | 未分类 | — | — | 无视 | 停用 |
| ARIN | ARIN | 未分类 | — | — | 无视 | 停用 |