www.xyseoer.com 分享301、robots 那点事

网站的301是我们经常遇到的，这一点大家应该都很清楚，今天襄樊seo就给大家分享一下301的有关概念。301就是我们常说的301重定向，或者301跳转，301重定向可以很方面的把你的网站重新定向到一个新的网址，并且是永久的转向。

比如说：我的网站 seoer.com,做了301跳转到了 www.xyseoer.com,然后比如当我访问 xyseoer.com/archives/235.html 就能够自动跳转到 www.xyseoer.com/archives/235.html，这样的好处就是可以让网站的权重集中到 www.xyseoer.com，而不至于让搜索引擎认为是两个页面，而分散权重。不过最近好戏那个听说现在301对网站的权重降低还是很大的了，如果你做了一次301就相当于是损失了网站权重的80%,不过也只是传言不知道是不是真的。

话又说回来301再好但是也不能滥用，下面介绍那些地方适合301：

1、网站需要更新域名的时候，这个因该是最常用的，比如说你的域名到期了或者是找到更好的域名了就可以把原来的老域名重定向到你的新域名。

2、网站出现了多个域名，加www和不加的，这样就会导致网站的权重不能够集中，这时就可以选一个主域名，然后把另一个域名301到你的主域名上。不过我的小站现在就悲剧了，网站上线的时候就做了301一直到现在百度都还是没反应过来，不过google还好，现在排名挺好的。

3、网站的出现问题的时候，比如当有某些页面出现问题打不开了，或者是由于优化过度导致的网页被k等，这种情况可以使用301。

跟301相对应的还有一个302，它们的区别就在于302只是一个临时的跳转，而301却是实现永久的跳转，所以我们在做301的时候一定要考虑清楚是否真的要做。

—————

再说点关于robots的，最近我的网站由于又得排名的页面并不是我想要的页面，所以就重新更新了robots文件屏蔽了那些不想让搜索引擎抓取的页面。

robots文件是必须放在网站的根目录下面，并且必须取名为robots.txt(注意一定是小写的)，比如我的robots文件(http://www.xyseoer.com/robots.txt).

robots文件主要包含三个语法.

1) User-agent：(定义搜索引擎)

语法:

User-agent:Googlebot    (表示只允许谷歌蜘蛛爬取)

User-agent：Baiduspider (表示只允许百度蜘蛛爬取)……

User-agent：* (允许所有搜索引擎, 推荐一般使用允许所有)，也可以直接留空。

2) Disallow:（禁止语法）

Disallow: /archives/tag (表示禁止抓取根目录archives/tag下的所有页面)

需要注意的是，禁止抓取的目录必须要从网站的跟目录开始

3)Allow:（允许语法）

Allow: /archives/tag (表示允许抓取根目录archives/tag下的所有页面)

和Disallow语法的用法是一样的。

做好了robots可以屏蔽掉网站的错误页面，或者是不想让搜索引擎所抓取的页面，从而能够更好的提高以及集中网站的权重。

原创文章,转载请注明：襄樊seo[http://www.xyseoer.com]
原文地址: http://www.xyseoer.com/archives/242.html