18720358503 在线客服 人才招聘 返回顶部
企业动态 技术分享 行业动态

Mediapartners

2021-03-08分享 "> 对不起,没有下一图集了!">

看了下系统日志,发现有几条相近这样的:
2010-07⑵7 16:03:33 W3SVC1129513256 221.192.135.26 GET /a/view/18691.html - 80 - 203.208.60.251 Mediapartners-Google 200 0 0

Mediapartners-Google是甚么,检索1下,原先是Google Adsense的数据漫游器。

下列內容来自 网站后台管理员适用管理中心

我期待网站的一些网页页面不被编入数据库索引,但要在这些页上显示信息 AdSense 广告宣传。能否考虑我的这1规定?

能够。您能够在这些网页页面上禁用 (Disallow) 除 Mediapartners-Google 以外的全部数据漫游器。这样可保证不将网页页面编入数据库索引,但可以让 Googlebot-MediaPartners 数据漫游器剖析这些网页页面,以明确是不是显示信息广告宣传。Googlebot-MediaPartners 数据漫游器不与别的 Google 客户代理商共享资源网页页面。比如,您可使用以下条目:

User-Agent:*
Disallow:/folder1/
User-Agent:MediaPartners-Google
Allow:/folder1/

怎样阻拦 Googlebot?

阻拦 Googlebot
Google 应用好几个 user-agent。您能够在条目地 User-Agent 行中包括数据漫游器名字来阻拦对网页页面的浏览。阻拦 Googlebot 可能阻拦全部以"Googlebot"开始的数据漫游器。

Googlebot:从大家的网站数据库索引和新闻数据库索引中抓取网页页面
Googlebot-Mobile:对于大家的挪动数据库索引抓取网页页面
Googlebot-Image:对于大家的照片数据库索引抓取网页页面
Mediapartners-Google:抓取网页页面明确 AdSense 的內容。仅有在您的网站上展现 AdSense 广告宣传的状况下,大家才会应用此数据漫游器来抓取您的网站。
Adsbot-Google:抓取网页页面来考量 AdWords 总体目标网页页面的品质。仅有在您应用 AdWords 为您的网站做广告宣传的状况下,大家才会应用此数据漫游器。参考有关此数据漫游器的更多信息内容和怎样在您的网站上实行一部分阻拦。
比如,要彻底阻拦 Googlebot,您可使用以下英语的语法:

User-agent:Googlebot Disallow:/
容许 Googlebot
假如您要阻拦除 Googlebot 之外的全部数据漫游器浏览您的网页页面,可使用以下英语的语法:

User-agent:Disallow:/
User-agent:Googlebot
Disallow:
Googlebot 追随指向它自身的行,而并不是指向全部数据漫游器的行。

"Allow"拓展名
Googlebot 可鉴别称为"Allow"的 robots.txt 规范拓展名。别的检索模块的数据漫游器将会没法鉴别此拓展名,因而请应用您感兴趣爱好的别的检索模块开展搜索。"Allow"行的功效基本原理彻底与"Disallow"行1样。只需列出您要容许的文件目录或网页页面便可。

您还可以另外应用"Disallow"和"Allow"。比如,要阻拦子文件目录中某个网页页面以外的别的全部网页页面,可使用以下条目:

User-Agent:Googlebot
Disallow:/folder1/
Allow:/folder1/myfile.html
这些条目将阻拦 folder1 文件目录内除 myfile.html 以外的全部网页页面。

假如您要阻拦 Googlebot 并容许 Google 的另外一个数据漫游器(如 Googlebot-Mobile),可以使用"Allow"标准容许该数据漫游器的浏览。比如:

User-agent:Googlebot
Disallow:/
User-agent:Googlebot-Mobile
Allow:

"> 对不起,没有下一图集了!">
在线咨询