Google AdSense - 椒图蜘蛛信息查询

Google AdSense · 基础档案

爬虫名称

Google AdSense

活跃状态

活跃

Robots 协议

遵守

爬虫价值

5

能力评估六维评分由档案字段映射生成，仅供参考

能力雷达图加载中...

爬虫介绍

Google 旗下，分析网页内容做上下文广告匹配、合规审核，检查违规内容、恶意代码、跳转、伪装（Cloaking），验证广告位、渲染、ads.txt、页面可用性，定期重爬，保持广告匹配与合规状态最新

细节参数请求头与抓取行为完整档案

名称

Google AdSense

User-Agent

Mediapartners-Google

版本号

2.1

爬虫类型

网络爬虫

官方网址

https://www.google.com/adsense

抓取频率

中（广告监测周期）

抓取深度

浅（广告页面/监测点）

渲染能力

支持广告内容渲染

Accept 请求头

text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8

Accept-Language

en-US,en;q=0.9,zh-CN;q=0.8

Connection

keep-alive

Accept-Encoding

gzip, deflate, br

联系邮箱

adsense-support@google.com

首次出现

2003年

创建时间

2026-03-03 11:25:38

来路 IP 信息来自椒图采集网络的实测记录

共 18 条记录｜第 1 页 / 共 2 页

IP 地址	爬虫名称	访问时间
113.176.58.100	Google AdSense	2026-05-13 20:10:43
113.190.132.146	Google AdSense	2026-07-11 16:05:59
123.22.28.13	Google AdSense	2026-06-24 16:23:05
179.60.66.107	Google AdSense	2026-07-05 09:01:23
187.188.224.60	Google AdSense	2026-07-05 14:30:42
190.94.212.185	Google AdSense	2026-06-22 16:09:47
222.253.198.169	Google AdSense	2026-05-24 21:08:25
66.249.77.227	Google AdSense	2026-08-25 04:22:50
74.125.150.64	Google AdSense	2026-01-24 21:01:00
74.125.150.65	Google AdSense	2026-01-24 21:00:00

拦截 Google AdSense 的方法五种方案按拦截强度与部署成本选择

1. robots.txt 禁止（标准方式，仅对合规爬虫有效）

通过网站根目录的 robots.txt 声明禁止该爬虫访问，简单标准；恶意爬虫会无视该规则。

User-agent: Mediapartners\-Google
Disallow: /

2. Nginx / Apache 根据 UA 拉黑（服务器级拦截，效率高）

在服务器配置中直接匹配爬虫 UA 返回 403，不消耗应用资源；需修改服务器配置。

if ($http_user_agent ~* (Mediapartners\-Google)) {
    return 403;
}

3. .htaccess 禁止（Apache 专属，虚拟主机常用）

通过 .htaccess 规则拦截指定 UA，无需修改主配置；仅适用于 Apache 服务器。

RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} (Mediapartners\-Google) [NC]
RewriteRule ^ - [F,L]

4. PHP / 后端判断 UA 拦截（灵活定制，适配所有环境）

在 PHP 代码中判断访问者 UA，命中后返回 403，灵活可定制；会消耗应用服务器资源。

$ua = $_SERVER['HTTP_USER_AGENT'];
if (stripos($ua, 'Mediapartners-Google') !== false) {    header('HTTP/1.1 403 Forbidden');    exit;
}

5. JS 屏蔽（前端拦截，仅挡普通爬虫）

前端 JavaScript 检测 UA 并跳转 403 页面，简单易实现；高级爬虫可绕过（不执行 JS）。

if(navigator.userAgent.toLowerCase().indexOf('Mediapartners-Google') > -1){
    window.location.href = '/403.html';
}

同类爬虫同类型已审核数据 · 最多展示30条

Infoseek omgilibot NetcraftSurveyAgent GigablastOpenSource IndeedJobBot psbot Sabsim MetaJob Charlotte WbSrch Anthill PrizmBot JikibangBot NaverMapBot NaverWeatherBot TikiBot SendoSpider VnexpressBot ZingNewsBo Shopee LazadaVNBot Buho Auyantepui Chevere Piranha Yuada GobiernoVenezuela UCV-Crawler CONATEL-Bot VaticanBot