- 2011-220
-
SEO优化篇名词之robots.txt,这个是什么意思啊?如何理解呢?robots.txt是搜索引擎与站长之间的协议,也就是说你搜索引擎再牛,我这要在这个文件里写上一段代码,你就不能访问我,也就是不能收录我网站的网页文件。搜索引擎是遵循这个协议的,你不让我看,我就不看,你让我看,我就看,看了我就要考虑是否收录(这是搜索引擎的原话)永强强替他说了,真实的话语。
robots.txt是文本文件也即是记事本的格式,这个文件存在哪?他就存在你网站根目录,也就是你WEB文件目录下,搜索引擎蜘蛛来到你的网站第一件事就是先查看这个文件,这个文件上设置了不让看的文件目录蜘蛛都会第一眼看到,所以他们就不去访问你不让看的文件。
robots.txt什么是让访问还不让访问呢?如果robots.txt文件里是空的就说明允许搜索引擎查看每个文件,但是这样不太好,你的账号密码等也泄露。我们都知道admin文件夹是存放账号密码的,如果让搜索引擎收录了,岂不是别人也可以登陆我网站后台了吗?
robots.txt怎么设置都是些什么代码?请看
User-agent: * 用户代理的意思 *代表所有用户代理
Disallow: /admin/ 后台管理文件 Disallow是不允许的意思,就是不允许搜索引擎查看admin文件夹,一次往下推,如果你还有文件夹不想让搜索引擎查看就按照上面的写法。以上意思就是所有搜索引擎蜘蛛都不可以查看admin这个文件夹。关于更多设置你们可以查看百度官方介绍http://www.baidu.com/search/robots.html
robots.txt使用注意事项:一定要注意格式写法,这个你们可以查看我的写法,然后复制到你的文本中,记住一定要把文件名写成robots.txt必须是小写字母才生效,如果不是这个名字,搜索引擎则不认识他。视为不存在。
都不允许查看文件了那么百度快照还会正常吗?没有妨碍,因为你的首页为搜索引擎开放啊!这点你可以参照淘宝网的设置,只要在每个网址后面输入robots.txt都可以查看他们设置的信息。
请看我网站robots.txt的写法……

文章由永强强所写,永强强现在网上赚钱的工作是利用SEO营销方法,稳快赚钱。如果有什么不懂或者理解不是很明白的地方请给永强强留言,看到留言会第一时间帮你解答,因为永强强也是从菜鸟阶段走出来的,愿意帮助更多想在网上创业的朋友,帮助更多新手朋友共同进步,互助=共赢。
2011-2-20 12:25:0留。


- 评论:(0)
- 引用通告
我来说两句点击这里获取该日志的TrackBack引用地址