收录各大搜索引擎与商业爬虫的 User-Agent、抓取行为、渲染能力与来路 IP 数据,为站长提供「识别 - 分析 - 拦截」全流程参考。取名源自镇守门户的瑞兽,为网站守住爬虫访问的大门。
| User-Agent | 爬虫名称 | 类型 | 抓取频率 | 抓取深度 | 遵守 Robots | 是否活跃 |
|---|---|---|---|---|---|---|
| DOSM-MY-Bot | DOSM-MY-Bot | 未分类 | — | — | 无视 | 停用 |
| Bernama-MY-Bot | Bernama-MY-Bot | 未分类 | — | — | 无视 | 停用 |
| AstroAwani-MY-Bot | AstroAwani-MY-Bot | 未分类 | — | — | 无视 | 停用 |
| TheStar-MY-Bot | TheStar-MY-Bot | 未分类 | — | — | 无视 | 停用 |
| MalayMail-MY-Bot | MalayMail-MY-Bot | 未分类 | — | — | 无视 | 停用 |
| MaldivesGovBot | MaldivesGovBot | 未分类 | — | — | 无视 | 停用 |
| NBS-Maldives-Bot | NBS-Maldives-Bot | 未分类 | — | — | 无视 | 停用 |
| PSM-Maldives-Bot | PSM-Maldives-Bot | 未分类 | — | — | 无视 | 停用 |
| MaldivesObserver-MV-Bot | MaldivesObserver-MV-Bot | 未分类 | — | — | 无视 | 停用 |
| SunOnline-MV-Bot | SunOnline-MV-Bot | 未分类 | — | — | 无视 | 停用 |
| MaliGovBot | MaliGovBot | 未分类 | — | — | 无视 | 停用 |
| INSTAT-ML-Bot | INSTAT-ML-Bot | 未分类 | — | — | 无视 | 停用 |
| ORTM-Mali-Bot | ORTM-Mali-Bot | 未分类 | — | — | 无视 | 停用 |
| LeRepublicain-ML-Bot | LeRepublicain-ML-Bot | 未分类 | — | — | 无视 | 停用 |
| MaliWeb-ML-Bot | MaliWeb-ML-Bot | 未分类 | — | — | 无视 | 停用 |
| MaltaGovBot | MaltaGovBot | 未分类 | — | — | 无视 | 停用 |
| NSO-Malta-Bot | NSO-Malta-Bot | 未分类 | — | — | 无视 | 停用 |
| PBS-Malta-Bot | PBS-Malta-Bot | 未分类 | — | — | 无视 | 停用 |
| TimesOfMalta-MT-Bot | TimesOfMalta-MT-Bot | 未分类 | — | — | 无视 | 停用 |
| MaltaIndependent-MT-Bot | MaltaIndependent-MT-Bot | 未分类 | — | — | 无视 | 停用 |
| IndonesiaGovBot | IndonesiaGovBot | 未分类 | — | — | 无视 | 停用 |
| BPS-Statistics-ID-Bot | BPS-Statistics-ID-Bot | 未分类 | — | — | 无视 | 停用 |
| Kominfo-ID-Bot | Kominfo-ID-Bot | 未分类 | — | — | 无视 | 停用 |
| Antara-ID-Bot | Antara-ID-Bot | 未分类 | — | — | 无视 | 停用 |
| Kompas-ID-Bot | Kompas-ID-Bot | 未分类 | — | — | 无视 | 停用 |
| Detik-ID-Bot | Detik-ID-Bot | 未分类 | — | — | 无视 | 停用 |
| Telkom-Indonesia-Bot | Telkom-Indonesia-Bot | 未分类 | — | — | 无视 | 停用 |
| IranGovBot | IranGovBot | 未分类 | — | — | 无视 | 停用 |
| SCI-IR-Bot | SCI-IR-Bot | 未分类 | — | — | 无视 | 停用 |
| IRNA-IR-Bot | IRNA-IR-Bot | 未分类 | — | — | 无视 | 停用 |