收录各大搜索引擎与商业爬虫的 User-Agent、抓取行为、渲染能力与来路 IP 数据,为站长提供「识别 - 分析 - 拦截」全流程参考。取名源自镇守门户的瑞兽,为网站守住爬虫访问的大门。
| User-Agent | 爬虫名称 | 类型 | 抓取频率 | 抓取深度 | 遵守 Robots | 是否活跃 |
|---|---|---|---|---|---|---|
| PDF24 | PDF24 | SEO分析 | 未知 | — | 无视 | 停用 |
| PingAdmin | PingAdmin | 网站监测 | 未知 | — | 无视 | 停用 |
| pingping | pingping | 网站监测 | 未知 | — | 无视 | 停用 |
| PlayStore-Google | PlayStore-Google | 搜索引擎 | 未知 | — | 无视 | 停用 |
| Plesk | Plesk | SEO分析 | 未知 | — | 无视 | 停用 |
| PocketCasts | PocketCasts | 内容预览 | 未知 | — | 无视 | 停用 |
| Potions | Potions | SEO分析 | 未知 | — | 无视 | 停用 |
| PressEngineBot | PressEngineBot | SEO分析 | 未知 | — | 无视 | 停用 |
| PricedroneShoppingBot | PricedroneShoppingBot | SEO分析 | 未知 | — | 无视 | 停用 |
| PriEcoBot | PriEcoBot | SEO分析 | 未知 | — | 无视 | 停用 |
| PrintFriendly | PrintFriendly | SEO分析 | 未知 | — | 无视 | 停用 |
| Pro-Sitemaps | Pro-Sitemaps | SEO分析 | 未知 | — | 无视 | 停用 |
| ProbelySPDR | ProbelySPDR | 安全检测 | 未知 | — | 无视 | 停用 |
| ProjectShield-UrlCheck | ProjectShield-UrlCheck | 安全检测 | 未知 | — | 无视 | 停用 |
| Blackbox | Blackbox | 网站监测 | 未知 | — | 无视 | 停用 |
| Protopage | Protopage | 内容预览 | 未知 | — | 无视 | 停用 |
| PS_Daily | PS_Daily | SEO分析 | 未知 | — | 无视 | 停用 |
| pulsetic | pulsetic | 网站监测 | 未知 | — | 无视 | 停用 |
| PWABuilderHttpAgent | PWABuilderHttpAgent | SEO分析 | 未知 | — | 无视 | 停用 |
| Quantcastbot | Quantcastbot | 服务爬虫 | 未知 | — | 无视 | 停用 |
| Rackspace | Rackspace | 网站监测 | 未知 | — | 无视 | 停用 |
| rakutenusabot-image | rakutenusabot-image | SEO分析 | 未知 | — | 无视 | 停用 |
| top100 | top100 | 搜索引擎 | 未知 | — | 无视 | 停用 |
| RankurBot | RankurBot | SEO分析 | 未知 | — | 无视 | 停用 |
| RavenCrawler | RavenCrawler | SEO分析 | 未知 | — | 无视 | 停用 |
| Readable | Readable | SEO分析 | 未知 | — | 无视 | 停用 |
| Recurly | Recurly | SEO分析 | 未知 | — | 无视 | 停用 |
| RED | RED | 网站监测 | 未知 | — | 无视 | 停用 |
| Reelevant | Reelevant | SEO分析 | 未知 | — | 无视 | 停用 |
| remove | remove | SEO分析 | 未知 | — | 无视 | 停用 |