收录各大搜索引擎与商业爬虫的 User-Agent、抓取行为、渲染能力与来路 IP 数据,为站长提供「识别 - 分析 - 拦截」全流程参考。取名源自镇守门户的瑞兽,为网站守住爬虫访问的大门。
| User-Agent | 爬虫名称 | 类型 | 抓取频率 | 抓取深度 | 遵守 Robots | 是否活跃 |
|---|---|---|---|---|---|---|
| djeccobot | djeccobot | 未分类 | — | — | 无视 | 停用 |
| venafi | venafi | 未分类 | — | — | 无视 | 停用 |
| aliveadvisor | aliveadvisor | 未分类 | — | — | 无视 | 停用 |
| ip-guide.com | ip-guide.com | 未分类 | — | — | 无视 | 停用 |
| cloudendure | cloudendure | 未分类 | — | — | 无视 | 停用 |
| domain re-animator | domain re-animator | 未分类 | — | — | 无视 | 停用 |
| mixmax | mixmax | 未分类 | — | — | 无视 | 停用 |
| gensun.org | gensun.org | 未分类 | — | — | 无视 | 停用 |
| 0xff domain | 0xff domain | 未分类 | — | — | 无视 | 停用 |
| hootsuite | hootsuite | 未分类 | — | — | 无视 | 停用 |
| rockhallfunding | rockhallfunding | 未分类 | — | — | 无视 | 停用 |
| binu | binu | 未分类 | — | — | 无视 | 停用 |
| avira | avira | 未分类 | — | — | 无视 | 停用 |
| semiocast | semiocast | 未分类 | — | — | 无视 | 停用 |
| sba research | sba research | 未分类 | — | — | 无视 | 停用 |
| yoobi.de | yoobi.de | 未分类 | — | — | 无视 | 停用 |
| opendi | opendi | 未分类 | — | — | 无视 | 停用 |
| businessseek | businessseek | 未分类 | — | — | 无视 | 停用 |
| nic.it | nic.it | 未分类 | — | — | 无视 | 停用 |
| studylib | studylib | 未分类 | — | — | 无视 | 停用 |
| dex media | dex media | 未分类 | — | — | 无视 | 停用 |
| domaintuno | domaintuno | 未分类 | — | — | 无视 | 停用 |
| cj.com | cj.com | 未分类 | — | — | 无视 | 停用 |
| qualidator | qualidator | 未分类 | — | — | 无视 | 停用 |
| job roboter | job roboter | 未分类 | — | — | 无视 | 停用 |
| thinglink | thinglink | 未分类 | — | — | 无视 | 停用 |
| seolytics | seolytics | 未分类 | — | — | 无视 | 停用 |
| rankactive | rankactive | 未分类 | — | — | 无视 | 停用 |
| znajdzfoto | znajdzfoto | 未分类 | — | — | 无视 | 停用 |
| seoterritory | seoterritory | 未分类 | — | — | 无视 | 停用 |