禁止搜索引擎蜘蛛和机器人来的方法 - 行业信息

当前位置:HOME > 行业信息

禁止搜索引擎蜘蛛和机器人来的方法

发布：巨鼎网络 www.judweb.com \| 发布时间 2009-05-25

搜索引擎是个好东西，但有时候也不是个好东西，比如说，有些内容不想让搜索引擎收录，像日记和一些机密隐私文件不想被别人看到，但是又想放在网站上，那怎么办了，那就只好将这些搜索引擎的机器人和蜘蛛挡在门外，不让他们进入。第一种、robots.txt方法　　搜索引擎默认的遵守robots.txt协议，创建robots.txt文本文件放至网站根目录下，编辑代码如下: 　　User-agent: * 　　Disallow: 　　通过代码，即可告诉搜索引擎不要抓取采取收录本网站。　　第二种、网页代码　　在网站首页代码<head>与</head>之间，加入<meta name="robots" content="noarchive">代码，此标记禁止搜索引擎抓取网站并显示网页快照。　　如何禁止百度搜索引擎收录抓取网页　　1、编辑robots.txt文件，设计标记为: 　　User-agent: Baiduspider 　　Disallow: / 　　2、在网站首页代码<head>与</head>之间，加入<meta name="Baiduspider" content="noarchive">即可禁止百度搜索引擎抓取网站并显示网页快照。　　3、联系百度管理人员，信箱地址为:webmaster@baidu.com，用网站联系人信箱发电邮，如实说明删除网页快照的情况，经百度核实后，网页停止收录抓取。　　4、登陆百度自己的“百度快照”帖吧和“百度投诉”帖吧，发个帖子，表明删除网页收录网站快照的原因，当百度管理人员，看到会给予处理。　　如何禁止Google搜索引擎收录抓取网页　　1、编辑robots.txt文件，设计标记为: 　　User-agent: googlebot 　　Disallow: / 　　2、在网站首页代码<head>与</head>之间，加入<meta name="googlebot" content="noarchive">即可禁止百度搜索引擎抓取网站并显示网页快照。如果需要他们来收录，就把文件去掉，他们就会冲进来了。
[文章评论(0)] [ 点击数:] [打印本网页] [关闭本窗口]


相关内容
查无记录


	巨鼎网络相关：提交订单 \| 网站解决方案 \| 经典案例 \| 建站套餐 \| 优化推广 \| 百度 \| 必应 \| 雅虎 \| 搜搜 \| 网站提交 \| 联系我们 \| 网站地图

做网站,就找巨鼎网络！