收录各大搜索引擎与商业爬虫的 User-Agent、抓取行为、渲染能力与来路 IP 数据,为站长提供「识别 - 分析 - 拦截」全流程参考。取名源自镇守门户的瑞兽,为网站守住爬虫访问的大门。
| User-Agent | 爬虫名称 | 类型 | 抓取频率 | 抓取深度 | 遵守 Robots | 是否活跃 |
|---|---|---|---|---|---|---|
| MCT-Bot | MCT-Bot | 未分类 | — | — | 无视 | 停用 |
| MOFCOM-Bot | MOFCOM-Bot | 未分类 | — | — | 无视 | 停用 |
| MPS-Bot | MPS-Bot | 未分类 | — | — | 无视 | 停用 |
| MOJ-Bot | MOJ-Bot | 未分类 | — | — | 无视 | 停用 |
| MOF-Bot | MOF-Bot | 未分类 | — | — | 无视 | 停用 |
| MNR-Bot | MNR-Bot | 未分类 | — | — | 无视 | 停用 |
| MEE-Bot | MEE-Bot | 未分类 | — | — | 无视 | 停用 |
| MOHURD-Bot | MOHURD-Bot | 未分类 | — | — | 无视 | 停用 |
| MOT-Bot | MOT-Bot | 未分类 | — | — | 无视 | 停用 |
| MWR-Bot | MWR-Bot | 未分类 | — | — | 无视 | 停用 |
| MARA-Bot | MARA-Bot | 未分类 | — | — | 无视 | 停用 |
| NHC-Bot | NHC-Bot | 未分类 | — | — | 无视 | 停用 |
| MVA-Bot | MVA-Bot | 未分类 | — | — | 无视 | 停用 |
| MEM-Bot | MEM-Bot | 未分类 | — | — | 无视 | 停用 |
| PBC-Bot | PBC-Bot | 未分类 | — | — | 无视 | 停用 |
| CBIRC-Bot | CBIRC-Bot | 未分类 | — | — | 无视 | 停用 |
| CSRC-Bot | CSRC-Bot | 未分类 | — | — | 无视 | 停用 |
| SPC-Bot | SPC-Bot | 未分类 | — | — | 无视 | 停用 |
| SPP-Bot | SPP-Bot | 未分类 | — | — | 无视 | 停用 |
| Baiduspider-render | Baiduspider-render | 未分类 | — | — | 无视 | 停用 |
| Sogou News Spider | Sogou News Spider | 未分类 | — | — | 无视 | 停用 |
| Sogou Image Spider | Sogou Image Spider | 未分类 | — | — | 无视 | 停用 |
| Sogou Video Spider | Sogou Video Spider | 未分类 | — | — | 无视 | 停用 |
| Sosoimagespider | Sosoimagespider | 未分类 | — | — | 无视 | 停用 |
| TencentBot | TencentBot | 未分类 | — | — | 无视 | 停用 |
| AlibabaBot | AlibabaBot | 未分类 | — | — | 无视 | 停用 |
| TaobaoBot | TaobaoBot | 未分类 | — | — | 无视 | 停用 |
| TmallBot | TmallBot | 未分类 | — | — | 无视 | 停用 |
| AliyunBot | AliyunBot | 未分类 | — | — | 无视 | 停用 |
| BaiduCloudBot | BaiduCloudBot | 未分类 | — | — | 无视 | 停用 |