收录各大搜索引擎与商业爬虫的 User-Agent、抓取行为、渲染能力与来路 IP 数据,为站长提供「识别 - 分析 - 拦截」全流程参考。取名源自镇守门户的瑞兽,为网站守住爬虫访问的大门。
| User-Agent | 爬虫名称 | 类型 | 抓取频率 | 抓取深度 | 遵守 Robots | 是否活跃 |
|---|---|---|---|---|---|---|
| 360Spider-news | 360Spider-news | 未分类 | — | — | 无视 | 停用 |
| UCDataSpider | UCDataSpider | 未分类 | — | — | 无视 | 停用 |
| YoudaoSpider | YoudaoSpider | 未分类 | — | — | 无视 | 停用 |
| YoudaoTranslateBot | YoudaoTranslateBot | 未分类 | — | — | 无视 | 停用 |
| EasouSpider | 宜搜 | 未分类 | — | — | 无视 | 停用 |
| ZhongsouSpider | ZhongsouSpider | 未分类 | — | — | 无视 | 停用 |
| DouyinSpider | DouyinSpider | 未分类 | — | — | 无视 | 停用 |
| XiguaSpider | XiguaSpider | 未分类 | — | — | 无视 | 停用 |
| FeishuSpider | FeishuSpider | 未分类 | — | — | 无视 | 停用 |
| VolcEngineSpider | VolcEngineSpider | 未分类 | — | — | 无视 | 停用 |
| QQBrowserSpider | QQBrowserSpider | 未分类 | — | — | 无视 | 停用 |
| WeChatSpider | WeChatSpider | 未分类 | — | — | 无视 | 停用 |
| QQMailSpider | QQMailSpider | 未分类 | — | — | 无视 | 停用 |
| TencentNewsSpider | TencentNewsSpider | 未分类 | — | — | 无视 | 停用 |
| TencentVideoSpider | TencentVideoSpider | 未分类 | — | — | 无视 | 停用 |
| TencentMusicSpider | TencentMusicSpider | 未分类 | — | — | 无视 | 停用 |
| TencentGamesSpider | TencentGamesSpider | 未分类 | — | — | 无视 | 停用 |
| TaobaoSpider | TaobaoSpider | 未分类 | — | — | 无视 | 停用 |
| TmallSpider | TmallSpider | 未分类 | — | — | 无视 | 停用 |
| AlipaySpider | AlipaySpider | 未分类 | — | — | 无视 | 停用 |
| CainiaoSpider | CainiaoSpider | 未分类 | — | — | 无视 | 停用 |
| AliExpressSpider | AliExpressSpider | 未分类 | — | — | 无视 | 停用 |
| 1688Spider | 1688Spider | 未分类 | — | — | 无视 | 停用 |
| AlibabaCloudSpider | AlibabaCloudSpider | 未分类 | — | — | 无视 | 停用 |
| BaiduCloudSpider | BaiduCloudSpider | 未分类 | — | — | 无视 | 停用 |
| BaiduMapSpider | BaiduMapSpider | 未分类 | — | — | 无视 | 停用 |
| BaiduWenkuSpider | BaiduWenkuSpider | 未分类 | — | — | 无视 | 停用 |
| BaiduZhidaoSpider | BaiduZhidaoSpider | 未分类 | — | — | 无视 | 停用 |
| BaiduTiebaSpider | BaiduTiebaSpider | 未分类 | — | — | 无视 | 停用 |
| BaiduBaijiaSpider | BaiduBaijiaSpider | 未分类 | — | — | 无视 | 停用 |