最新消息:

小心robots.txt让搜索引擎抛弃你

SEO优化 李金龙 1685浏览 0评论

  以前有一次测试robots,把博客的robots写成了禁止搜索引擎收录,后来就直接把robots直接给删除了,最近发现我的博客google收录一直减少,但是又没有什么问题,今天在看google管理员工具的时候发现,google中记录我的robots信息还是禁止收录,我郁闷了,赶紧又把robots写好传上去,现在在期待着google的正常呢!所以我们大家一定不要小看了Robots的力量啊!
  robots.txt(统一小写)是一种存放于网站根目录下的ASCII编码的文本文件,它通常告诉网络搜索引擎的漫游器(又称网络蜘蛛),此网站中的哪些内容是不能被搜索引擎的漫游器获取的,哪些是可以被(漫游器)获取的。 因为一些系统中的URL是大小写敏感的,所以robots.txt的文件名应统一为小写。robots.txt应放置于网站的根目录下。如果想单独定义搜索引擎的漫游器访问子目录时的行为,那么可以将自定的设置合并到根目录下的robots.txt,或者使用robots元数据。

转载请注明: » 小心robots.txt让搜索引擎抛弃你

发表我的评论
取消评论

表情

网友最新评论 (6)

  1. 这个得很小心的 哈哈
    猪猪懒人窝9年前 (2010-10-30)
  2. 这个搞不好,是会适得其反的
    yesureadmin9年前 (2010-10-31)
  3. 我也没有建这个robots.txt。我不知道效果咋样。
    爱惜9年前 (2010-10-31)
  4. 落水鱼能不能帮我看看我的robots.txt写的可适当?
    yesureadmin9年前 (2010-11-01)
  5. 有的时候尝试一些东西,是要付出代价的,不过相信慢慢的收录就会恢复的,不用太担心了。
    赫赛汀9年前 (2010-11-01)