收录各大搜索引擎与商业爬虫的 User-Agent、抓取行为、渲染能力与来路 IP 数据,为站长提供「识别 - 分析 - 拦截」全流程参考。取名源自镇守门户的瑞兽,为网站守住爬虫访问的大门。
| User-Agent | 爬虫名称 | 类型 | 抓取频率 | 抓取深度 | 遵守 Robots | 是否活跃 |
|---|---|---|---|---|---|---|
| seocompany | seocompany | 未分类 | — | — | 无视 | 停用 |
| SimplyFast | SimplyFast | 未分类 | — | — | 无视 | 停用 |
| SpaceBison | SpaceBison | 未分类 | — | — | 无视 | 停用 |
| StudioFACA | StudioFACA | 未分类 | — | — | 无视 | 停用 |
| Syndirella | Syndirella | 未分类 | — | — | 无视 | 停用 |
| Thumbshots | Thumbshots | 未分类 | — | — | 无视 | 停用 |
| timewe.net | timewe.net | 未分类 | — | — | 无视 | 停用 |
| TulipChain | TulipChain | 未分类 | — | — | 无视 | 停用 |
| VB Project | VB Project | 未分类 | — | — | 无视 | 停用 |
| Wallpapers | Wallpapers | 未分类 | — | — | 无视 | 停用 |
| Web Sauger | Web Sauger | 未分类 | — | — | 无视 | 停用 |
| Web spyder | Web spyder | 未分类 | — | — | 无视 | 停用 |
| Web Sucker | Web Sucker | 未分类 | — | — | 无视 | 停用 |
| webcollage | webcollage | 未分类 | — | — | 无视 | 停用 |
| webkit2png | webkit2png | 未分类 | — | — | 无视 | 停用 |
| WebLeacher | WebLeacher | 未分类 | — | — | 无视 | 停用 |
| WebWhacker | WebWhacker | 未分类 | — | — | 无视 | 停用 |
| WhereGoes? | WhereGoes? | 未分类 | — | — | 无视 | 停用 |
| x09Mozilla | x09Mozilla | 未分类 | — | — | 无视 | 停用 |
| x22Mozilla | x22Mozilla | 未分类 | — | — | 无视 | 停用 |
| YahooYSMcm | YahooYSMcm | 未分类 | — | — | 无视 | 停用 |
| yourls.org | yourls.org | 未分类 | — | — | 无视 | 停用 |
| Urlfilebot | Urlfilebot | 未分类 | — | — | 无视 | 停用 |
| URLChecker | URLChecker | 未分类 | — | — | 无视 | 停用 |
| twibble.io | twibble.io | 未分类 | — | — | 无视 | 停用 |
| Toweyabot: | Toweyabot: | 未分类 | — | — | 无视 | 停用 |
| topster.de | topster.de | 未分类 | — | — | 无视 | 停用 |
| TinEye-bot | TinEye-bot | 未分类 | — | — | 无视 | 停用 |
| Stratagems | Stratagems | 未分类 | — | — | 无视 | 停用 |
| psbot-page | psbot-page | 未分类 | — | — | 无视 | 停用 |