<meta name="robots" content="">
<meta name="robots" content="noarchive">
以上的一段代码限制了所有的搜索引擎建立你的网页快照。如果我们需要仅仅限制一个搜索引擎建立快照的话,就可以像如下这样去写
<meta name="Baiduspider" content="noarchive">
需要注意的是,这样的标记仅仅是禁止搜索引擎为你的网站建立快照,如果你要禁止搜索引擎索引你的这个页面的话,请参照后面的办法。
第二种情况:禁止搜索引擎抓取本页面。
在SEO中,禁止搜索引擎抓取本页面或者是允许搜索引擎抓取本页面是经常会用到的。因此我们需要对这一部分重点做一次讨论。
为了让搜索引擎禁止抓取本页面,我们一般的做法是在页面的元标记中加入如下的代码:
<META NAME="ROBOTS" CONTENT="NOINDEX,FOLLOW">
在这里,META NAME="ROBOTS"是泛指所有的搜索引擎的,在这里我们也可以特指某个搜索引擎,例如META NAME="Googlebot"、META NAME="Baiduspide"等。content部分有四个命令:index、noindex、follow、nofollow,命令间以英文的“,”分隔。
INDEX命令:告诉搜索引擎抓取这个页面
FOLLOW命令:告诉搜索引擎可以从这个页面上找到链接,然后继续访问抓取下去。
NOINDEX命令:告诉搜索引擎不允许抓取这个页面
NOFOLLOW命令:告诉搜索引擎不允许从此页找到链接、拒绝其继续访问。
根据以上的命令,我们就有了一下的四种组合
<META NAME="ROBOTS" CONTENT="INDEX,FOLLOW">:可以抓取本页,而且可以顺着本页继续索引别的链接
<META NAME="ROBOTS" CONTENT="NOINDEX,FOLLOW">:不许抓取本页,但是可以顺着本页抓取索引别的链接
<META NAME="ROBOTS" CONTENT="INDEX,NOFOLLOW">:可以抓取本页,但是不许顺着本页抓取索引别的链接
<META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW">:不许抓取本页,也不许顺着本页抓取索引别的链接。
这里需要注意的是,不可把两个对立的反义词写到一起,例如
<META NAME="ROBOTS" CONTENT="INDEX,NOINDEX">
或者直接同时写上两句
<META NAME="ROBOTS" CONTENT="INDEX,FOLLOW">
<META NAME="ROBOTS" CONTENT="NOINDEX,FOLLOW">
这里有一个简便的写法,如果是
<META NAME="ROBOTS" CONTENT="INDEX,FOLLOW">的形式的话,可以写成:
<META NAME="ROBOTS" CONTENT="ALL">
如果是
<META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW">的形式的话,可以写成:
<META NAME="ROBOTS" CONTENT="NONE">
当然,我们也可以把禁止建立快照和对于搜索引擎的命令写到一个命令元标记中。从上面的文章中我们得知,禁止建立网页快照的命令是noarchive,那么我们就可以写成如下的形式:<META NAME="ROBOTS" CONTENT="INDEX,FOLLOW,noarchive">
如果是对于单独的某个搜索引擎不允许建立快照,例如百度,我们就可以写成:
<META NAME=" Baiduspider" CONTENT="INDEX,FOLLOW,noarchive">
如果在元标记中不屑关于蜘蛛的命令,那么默认的命令即为如下
<META NAME="ROBOTS" CONTENT="INDEX,FOLLOW, archive">
因此,如果我们对于这一部分把握不准的话,可以直接写上上面的这一行命令,或者是直接留空。
在SEO中,对于蜘蛛的控制是非常重要的一部分内容,所以希望各位看官准确把握这部分的内容。
相关推荐
用于网页编辑的软件 ...<meta name="ROBOTS" content="NOODP"> <meta name="description" content="hao123网址之家——,从hao123开始。"> <title>hao123--我的上网主页</title> <style type="text/css">
<meta name= "robots " content= "noindex "> <meta content= "text/html;charset=gb2312 " http-equiv= "content-type "> <title> Welcome To RptSystem </title> </head> <frameset name="fsthead" rows=...
<br/> <META NAME="robots" CONTENT="none"> <br/> CONTENT的参数有all,none,index,noindex,follow,nofollow。默认是all。 <br/><br/> 6.收藏夹图标 <br/> <link rel = "Shortcut Icon" href="favicon.ico"><br/...
<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=iso-8859-1"> </head> <body> <h3>This is a demo of b2evo_captcha.class.php</h3> <?PHP require_once('b2evo_captcha.config.php'); require_once...
元标签 < meta charset =" UTF-8 " > < meta name =" keywords " content =" your, tags " > < meta name =" description " content =" 150 words " > < meta name =" subject " content =" your ...
<input type=text onkeypress="return event.keyCode>=48&&event.keyCode<=57||(this.value.indexOf(".")<0?event.keyCode==46:false)" onpaste="return !clipboardData.getData("text").match(/D/)" ondragenter=...
meta name=name content=string/> 二、参数解析: a、name项:常用的选项有keywords(关键字) ,description(网站内容描述),author(作者),robots(机器人向导)等。 b、http-equiv项:可用于代替name项,常用的...
meta-tags-html 清单标签清单-到2021年修改产品 N'hésitezpasàcommenter pour m'aideràmettreàjour :-) 基本HTML元标记 < meta name =" keywords " content =" your, ... meta name =" robots " content =" i
隐喻 这个方便的小应用程序是一个网络爬虫,旨在检查最受欢迎的网站的单词以及使用其设计的工作方式来告知新应用程序设计方式的原因。 复制自 基本HTML元标记 < meta charset =' UTF-8 ' ... meta name =' robots '
meta name="robots" content="noimageindex, noarchive"> <meta name="apple-mobile-web-app-status-bar-style" content="default"> <meta name="mobile-web-app-capable" content="yes"> <...
效果图如下: 代码: 复制代码代码如下: <!DOCTYPE html> <html lang=””> <head> <title>Animated Checkboxes using ...meta name=”robots” content=”” /> <style type=”text/css”
下面是世纪天成调用腾讯跑跑卡丁车页面的代码,确实不错以前软件开发网...meta name="robots" content="all" /> <meta name="author" content="Tencent-CP" /> <meta name="Description" content="跑跑卡丁
代码如下:<...META content=All name=robots> <META content=”gregorian solar calendar and chinese lunar calendar” name=description> <META content=”text/html; charse
本文实例讲述了JS基于ocanvas插件实现的简单画板效果。分享给大家供大家参考,具体如下: ...meta name="robots" content="noindex, nofollow"> <meta name="viewport" content="width=device
meta标签通常用来为搜索引擎robots定义页面主题,或者是定义用户浏览器上的cookie;它可以用于鉴别作者,设定页面格式,标注内容提要和关键字;还可以设置页面使其可以根据你定义的时间间隔刷新自己,以及设置RASC...
meta name="robots" content="noindex,nofollow"> X-Robots-Tag: noindex,nofollow 等等 注意:此库不负责解析任何HTML。 安装 >= 14 。 要安装,请在命令行中输入以下命令: npm install robot-directives ...
今天在百度搜索一个页面的时候,因为页面已经被删除,所以就自然而然用百度快照,打开百度快照,却显示:对不起,您所查看的网页不允许百度保存其快照,所以想到把如何...meta name="ROBOTS" content="noarchive">
分享给大家供大家参考。具体如下: 代码如下: <!DOCTYPE html PUBLIC “-//W3C//DTD XHTML 1.0 Transitional//EN” ...meta name=”robots” content=”all” /> <meta http-equiv=”Content-Type” cont
本文实例讲述了JS简单实现DIV相对于浏览器固定位置不变的方法。分享给大家供大家参考,具体如下: <!DOCTYPE HTML PUBLIC "-//W3C/...meta content="noindex, nofollow" name="robots"> [removed] function Toto
name="robots" content="@Umbraco.Field("robotsMetaTag", recursive: true)" /> 为了让上面的代码有意义,添加属性到至少你的主节点,并设置适当的值(可能是索引、跟随、noopd)。 这将确保在所有页面上写出...