收录各大搜索引擎与商业爬虫的 User-Agent、抓取行为、渲染能力与来路 IP 数据,为站长提供「识别 - 分析 - 拦截」全流程参考。取名源自镇守门户的瑞兽,为网站守住爬虫访问的大门。
| User-Agent | 爬虫名称 | 类型 | 抓取频率 | 抓取深度 | 遵守 Robots | 是否活跃 |
|---|---|---|---|---|---|---|
| HuaweiCloudBot | HuaweiCloudBot | 未分类 | — | — | 无视 | 停用 |
| JDBot | JDBot | 未分类 | — | — | 无视 | 停用 |
| PddBot | PddBot | 未分类 | — | — | 无视 | 停用 |
| MeituanBot | MeituanBot | 未分类 | — | — | 无视 | 停用 |
| DidiBot | DidiBot | 未分类 | — | — | 无视 | 停用 |
| Chinanews-Bot | Chinanews-Bot | 未分类 | — | — | 无视 | 停用 |
| GlobalTimes-Bot | GlobalTimes-Bot | 未分类 | — | — | 无视 | 停用 |
| Guangming-Bot | Guangming-Bot | 未分类 | — | — | 无视 | 停用 |
| ChinaDaily-Bot | ChinaDaily-Bot | 未分类 | — | — | 无视 | 停用 |
| ThePaper-Bot | ThePaper-Bot | 未分类 | — | — | 无视 | 停用 |
| Jiemian-Bot | Jiemian-Bot | 未分类 | — | — | 无视 | 停用 |
| Caixin-Bot | Caixin-Bot | 未分类 | — | — | 无视 | 停用 |
| Yicai-Bot | Yicai-Bot | 未分类 | — | — | 无视 | 停用 |
| CNKI-Bot | CNKI-Bot | 未分类 | — | — | 无视 | 停用 |
| Wanfang-Bot | Wanfang-Bot | 未分类 | — | — | 无视 | 停用 |
| VIP-Bot | VIP-Bot | 未分类 | — | — | 无视 | 停用 |
| CSCD-Bot | CSCD-Bot | 未分类 | — | — | 无视 | 停用 |
| CSTP-Bot | CSTP-Bot | 未分类 | — | — | 无视 | 停用 |
| CASHL-Bot | CASHL-Bot | 未分类 | — | — | 无视 | 停用 |
| Chinaz-Bot | Chinaz-Bot | 未分类 | — | — | 无视 | 停用 |
| Aizhan-Bot | Aizhan-Bot | 未分类 | — | — | 无视 | 停用 |
| 5118-Bot | 5118-Bot | 未分类 | — | — | 无视 | 停用 |
| Qiniu-Bot | Qiniu-Bot | 未分类 | — | — | 无视 | 停用 |
| Upyun-Bot | Upyun-Bot | 未分类 | — | — | 无视 | 停用 |
| AliYunDun-Bot | AliYunDun-Bot | 未分类 | — | — | 无视 | 停用 |
| TencentCloud-Bot | TencentCloud-Bot | 未分类 | — | — | 无视 | 停用 |
| HKGov-Bot | HKGov-Bot | 未分类 | — | — | 无视 | 停用 |
| HKU-Bot | HKU-Bot | 未分类 | — | — | 无视 | 停用 |
| CUHK-Bot | CUHK-Bot | 未分类 | — | — | 无视 | 停用 |
| MacauGov-Bot | MacauGov-Bot | 未分类 | — | — | 无视 | 停用 |