收录各大搜索引擎与商业爬虫的 User-Agent、抓取行为、渲染能力与来路 IP 数据,为站长提供「识别 - 分析 - 拦截」全流程参考。取名源自镇守门户的瑞兽,为网站守住爬虫访问的大门。
| User-Agent | 爬虫名称 | 类型 | 抓取频率 | 抓取深度 | 遵守 Robots | 是否活跃 |
|---|---|---|---|---|---|---|
| ElMundoBot | ElMundoBot | 未分类 | — | — | 无视 | 停用 |
| LaVanguardiaBot | LaVanguardiaBot | 未分类 | — | — | 无视 | 停用 |
| ElPeriodicoBot | ElPeriodicoBot | 未分类 | — | — | 无视 | 停用 |
| CadenaSERBot | CadenaSERBot | 未分类 | — | — | 无视 | 停用 |
| RTVEBot | RTVEBot | 未分类 | — | — | 无视 | 停用 |
| TelefonicaBot | TelefonicaBot | 未分类 | — | — | 无视 | 停用 |
| MovistarBot | MovistarBot | 未分类 | — | — | 无视 | 停用 |
| OrangeESBot | OrangeESBot | 未分类 | — | — | 无视 | 停用 |
| VodafoneESBot | VodafoneESBot | 未分类 | — | — | 无视 | 停用 |
| INEESBot | INEESBot | 未分类 | — | — | 无视 | 停用 |
| TURESpainBot | TURESpainBot | 未分类 | — | — | 无视 | 停用 |
| ICEXBot | ICEXBot | 未分类 | — | — | 无视 | 停用 |
| BNEESBot | BNEESBot | 未分类 | — | — | 无视 | 停用 |
| YellowPagesESBot | YellowPagesESBot | 未分类 | — | — | 无视 | 停用 |
| SouthSudanGovBot | SouthSudanGovBot | 未分类 | — | — | 无视 | 停用 |
| NSSBot | NSSBot | 未分类 | — | — | 无视 | 停用 |
| UoJubaBot | UoJubaBot | 未分类 | — | — | 无视 | 停用 |
| UoUpperNileBot | UoUpperNileBot | 未分类 | — | — | 无视 | 停用 |
| UoRumbekBot | UoRumbekBot | 未分类 | — | — | 无视 | 停用 |
| SouthSudanTribuneBot | SouthSudanTribuneBot | 未分类 | — | — | 无视 | 停用 |
| JubaMonitorBot | JubaMonitorBot | 未分类 | — | — | 无视 | 停用 |
| JunobnaTVBot | JunobnaTVBot | 未分类 | — | — | 无视 | 停用 |
| RadioMirayaBot | RadioMirayaBot | 未分类 | — | — | 无视 | 停用 |
| NSSCBot | NSSCBot | 未分类 | — | — | 无视 | 停用 |
| SouthSudanOilBot | SouthSudanOilBot | 未分类 | — | — | 无视 | 停用 |
| UNMISSBot | UNMISSBot | 未分类 | — | — | 无视 | 停用 |
| WFPSSBot | WFPSSBot | 未分类 | — | — | 无视 | 停用 |
| SouthAfricaGovBot | SouthAfricaGovBot | 未分类 | — | — | 无视 | 停用 |
| GCISBot | GCISBot | 未分类 | — | — | 无视 | 停用 |
| DCDTBot | DCDTBot | 未分类 | — | — | 无视 | 停用 |