收录各大搜索引擎与商业爬虫的 User-Agent、抓取行为、渲染能力与来路 IP 数据,为站长提供「识别 - 分析 - 拦截」全流程参考。取名源自镇守门户的瑞兽,为网站守住爬虫访问的大门。
| User-Agent | 爬虫名称 | 类型 | 抓取频率 | 抓取深度 | 遵守 Robots | 是否活跃 |
|---|---|---|---|---|---|---|
| SudanYellowPagesBot | SudanYellowPagesBot | 未分类 | — | — | 无视 | 停用 |
| SriLankaGovBot | SriLankaGovBot | 未分类 | — | — | 无视 | 停用 |
| UoColomboBot | UoColomboBot | 未分类 | — | — | 无视 | 停用 |
| UoPeradeniyaBot | UoPeradeniyaBot | 未分类 | — | — | 无视 | 停用 |
| UoMoratuwaBot | UoMoratuwaBot | 未分类 | — | — | 无视 | 停用 |
| UoJaffnaBot | UoJaffnaBot | 未分类 | — | — | 无视 | 停用 |
| SLRCSBot | SLRCSBot | 未分类 | — | — | 无视 | 停用 |
| DailyNewsLKBot | DailyNewsLKBot | 未分类 | — | — | 无视 | 停用 |
| SundayObserverBot | SundayObserverBot | 未分类 | — | — | 无视 | 停用 |
| AdaDeranaBot | AdaDeranaBot | 未分类 | — | — | 无视 | 停用 |
| NewsFirstLKBot | NewsFirstLKBot | 未分类 | — | — | 无视 | 停用 |
| SLTBot | SLTBot | 未分类 | — | — | 无视 | 停用 |
| DialogLKBot | DialogLKBot | 未分类 | — | — | 无视 | 停用 |
| MobitelLKBot | MobitelLKBot | 未分类 | — | — | 无视 | 停用 |
| DeptCensusStatsBot | DeptCensusStatsBot | 未分类 | — | — | 无视 | 停用 |
| SriLankaTourismBot | SriLankaTourismBot | 未分类 | — | — | 无视 | 停用 |
| SriLankaTradeBot | SriLankaTradeBot | 未分类 | — | — | 无视 | 停用 |
| NationalArchivesLKBot | NationalArchivesLKBot | 未分类 | — | — | 无视 | 停用 |
| YellowPagesLKBot | YellowPagesLKBot | 未分类 | — | — | 无视 | 停用 |
| RedESBot | RedESBot | 未分类 | — | — | 无视 | 停用 |
| AESIABot | AESIABot | 未分类 | — | — | 无视 | 停用 |
| RedIRISBot | RedIRISBot | 未分类 | — | — | 无视 | 停用 |
| UCMBot | UCMBot | 未分类 | — | — | 无视 | 停用 |
| UPMBot | UPMBot | 未分类 | — | — | 无视 | 停用 |
| UABBot | UABBot | 未分类 | — | — | 无视 | 停用 |
| UBBot | UBBot | 未分类 | — | — | 无视 | 停用 |
| UGRBot | UGRBot | 未分类 | — | — | 无视 | 停用 |
| USALBot | USALBot | 未分类 | — | — | 无视 | 停用 |
| ElPaisBot | ElPaisBot | 未分类 | — | — | 无视 | 停用 |
| ABCBot | ABCBot | 未分类 | — | — | 无视 | 停用 |