何敏博客浅谈生活感悟、网络营销、网站推广、社会事态的点点滴滴！

做SEO这么长时间了，我总结出SEO并不难，只要大家掌握了其中的技巧，在这里我对这个技巧做一个总结。你看完我做的总结，吸收成自己的知识，你就能成为一个中级的SEO
SEO就是站内和站外的优化，站内的优化对搜索引擎来讲越来越重要了。那么怎么去做站内优化呢？

其实站内优化主要是URL优化，导航优化，关键词分布 关键词密度控制，图片ALT说明，网站地图制作，robots.txt文件制作，nofollow标签的利用 404错误页面的制作，工具的查询使用。只要你会来这些，那么你SEO就到了一个中级阶段了。

下面具体的分析

一、 URL优化

1、URL越短越好 2 URL包含关键词最好 3、URL参数越少越好 4、URL静态化 5、URL中文件名包含关键词重于目录包含关键词 6、URL的标准化 7、URL中可以包含“—”中横线作为连接符号，但不能是下划线。8、URL中不能包含中文 9、URL的301跳转

二、导航优化

1、主导航优化：主导航位于网站的头部，蜘蛛喜欢文字链接不喜欢图片链接，保证蜘蛛能爬行到网站。

2 、次导航优化：

3、 面包屑导航优化：面包屑导航就是每个页面的一个 首页--所在位置，这样的导航。在网站中起到权重传递的作用

三、关键词分布

首先要挖掘关键词，方法：1用百度指数分析工具 2 借鉴百度首页竞争对手站的关键词 3 在百度搜索关键词的时候最下面会出来相关搜索。4 百度推广后台申请一个免费帐号里面的关键词推荐工具很好用。

挖掘好关键词之后，我们要分析关键词。

每个页面的关键词做好控制在3个以内，最多不能超过六个。

然后我们就把分析好的关键词对应的分布到网站的对应页面中去了。每个页面的关键词密度控制在2-8%之间。

四、在网站首页做上网站地图，方便搜索引擎更好的抓取网站的页面。

五、网站图片做上ALT说明，最好不超过15个字，关键词要自然分布，不要刻意堆积。

图片链接蜘蛛是爬不进去的，你可以做上文字链接。

六、robots.txt文件制作

上面可以写上

User-agent: * 是允许所有搜索引擎抓取。

Disallow: /search.html 是不允许抓取/search.html这个文件，这个文件可以是不存在的，但至少要有一个Disallow

Disallow: /404.html 404页面是为了防止蜘蛛迷路设置的页面上面可以加个链接返回上一页。也可以不允许蜘蛛收录。

七、nofollow标签标签的使用

Nofollow是为了不让蜘蛛重复抓取那些没有更新的页面设置的，为了更好的防止权重的流失而用的标签。常用在链接中比如：<a href="guanyu.php" rel="nofollow">关于我们 </a>

注意：主导航不要做nofollow标签

你估计会说难道SEO就这么些东西吗，是的，就这么些工具，知识看你是否都能利用好了，如果能利用好，你用这些知识做一个SEO主管是没问题的。

技术是SEO团队的组成部分，我做了这么长时间的SEO，即是技术又是SEO，美工我也会做，其实大家没必要会这么多，去了大公司大部分都配有专业的技术为SEO服务。我在自己接单过程中碰到了一些问题才提到这些，先说碰到的问题，今天打开一个网站的时候发现这个网站的首页乱码了，我没有找到原因，但是我怀疑每一个细节。

提示在你修改网站的时候最好不要在FTP中进行修改最好是下载下来，下载下来后保存的时候不要把编码修改掉。我认为这个问题应该没有出在这里，后来检查了很多知道客户让朋友对网站加了两个版块，也不知道是否对编码有了影响。

我没有找到问题所在但是我找到了解决方案，当遇到这种编码的时候，你用的工具不同打开的代码也是不一样的，有的工具打开之后就是乱码，所以碰到了这个问题，你可以下载一个工具EditPlus然后在这个工具里把文件编码改掉就可以了，具体的修改方法是打开编辑器，选择内容，修改编码找到对应的编码修改保存，试了一下果然就是这里的问题。
这个也是技术提供给我的，感谢这个技术，今天也算多学习了这一招，在这里也分享给大家，希望你们都能学习到。将来我会不断在这里分享给大家没一点一滴的经验希望大家多多关注SEO。

其实在国内之前一直以来SEO和SEM说法都不怎么分，现在大部分人对这种说法已经开始分开了，SEO就是搜索引擎优化，而SEM是搜索引擎营销，其实这两个在我们做的中，是没有很大的区别的，因为我们国内SEO兴起的比较晚。

现在大部分网络公司都是在做SEO，只有少数的人在承接SEM，那么SEO和SEM在工作实践中的区别是怎么样的呢，SEO其实是SEM的一部分,所有的SEM都是要做SEO的工作的，那么SEO需要做什么呢SEO的工作就是对网站进行关键词排名，整站优化或者部分优化，通过信息或者网站的排名达到客户访问增加，从而增加产品的销售。SEM说白了就是通过各种网络的方式来达到推广网站品牌的目的。

说了这么多，估计你对SEO和SEM还是没分太清楚，当你做SEM的时候，先去做SEO的站内优化，同时要做站外发帖，而SEO的发帖知识发一些留网站链接的帖子，SEM也是通过帖子效果来实现宣传的目的，这些帖子可以是花钱的，也可以是免费的，另外还可以通过竞价的方式来实现SEM的目的。
SEM不同于SEO的地方：可以是花费的网站页面（竞价）或者信息（新闻软文、带公司名称和带电话的软文信息），图片广告等，通过网络的各种方式不管是花费的还是免费的来达到最大信息量的宣传效果。

相信大家看到这里已经明白了，感觉SEM既然做的工作是那么的全面，我们就要是给自己定目标做一个SEO呢，还是做一个SEM呢，当然是SEM了，以后我们不管是接单还是做搜索引擎营销SEM在未来是一个很吃香的职业。

我们做SEO网站优化无外呼两点站内优化和站外优化，站内优化是重点如果做不好，站内优化做的再好，优化也不会很成功，所以，今天我要给大家讲的是站内优化的流程，给你一个站，你怎么去优化网站内部，第一通过工具进行检测，查看网站的状态是否良好，第二要查看网站架构是否合理，第三检查网站URL是否需要做优化，第四网站导航是否合理，第五网站内容是否原创 ，第六网站的友情链接是否做的合理。第七查看网站页面的相关性是否做的好。

检测网站的状态要检测网站的服务器状态，以及网站的权重状态。

网站架构是看整个网站的设置是否有不合理的地方，URL和目录，导航，功能分布是否合理。

URL十大优化秘诀下次详述。

在这里着重说一下导航，导航分为主导航和次导航，面包屑导航，导航特别重要关系到用户体验，以及权重的传递。

原创网站内容现在特别收到搜索引擎的关注，网站文章数量都要注重。

友情链接不要超过五十个，对方要和自己的站指标差不多门当户对才好，如果不是，起码要有排名百度前三页，百度快照日期最新才好。

只要你掌握了这七个步骤，你肯定对优化掌握的已经不错了，所以，大家不要把SEO优化看的太难。

现在很多SEO都知道SEO是我们优化的一部分，可是很多人又不知道怎么在意友情链接，怎么做才能做到恰到好处。

我们都知道怎么去找友情链接，在站中我也提到过，那么找到了友情链接，怎么判断是不是该做友情，不是所有的站都能做友情，我们可以从几个角度去考虑

1同行业站做友情是最好的事情，搜索引擎对其特别的友好。

2同行业中找不到，可以再相关行业去找友情，很好的思路，我们也可以仿照。

3如果是不同行业，但也别相差太大，比如医疗和机械行业之间就不能做友情，医疗机械和其他企业门户等站也不要做友情。

4当我们找到了做友情的行业站之后，我们就要判断这个站是否符合我们的标准。怎么去判断呢，我们可以从以下几个方面

 1）看网站的关键词排名，是否有排名，有排名的比较好，最好是排名前三页。

2）看网站的百度权重比我们站是高时低，如果高的话肯定很好，如果低，就要看其他指标怎么样了。

3）看网站的收录量，最好不要和收录量是1的站做友情，或许那个站降权了，所以要注意。尽量找跟自己收录相当或者比自己网站收录好的。

4）看对方网站的友情有多少，如果在30个以内最好，最多也别超过五十个。

5）最后再看网站的PR，网站的PR已经不作为参考重点了，但是PR值还是作为网站好坏判断的其中一项指标。

这五点大家可以作为参考最好是找比自己好的站，那样你的网站权重提升的会很快，排名做的也会很快。SEO们加油努力，相信你会做的更好。

当你完全掌握了SEO技巧的时候，如果你还处在中级SEO位置的时候，你怎么才能成为一个高级SEO，是现在所有中级SEO关心的问题，在这里，我会一一告诉大家。

我是一个自由职业者，也接触了很多大公司的SEO总监，这些人，他们不但具备了SEO的所有技巧掌握，而且他们对管理也有一定的经验，另外还对文字编辑经验也具备。不要把他们看的太高，你也能做到的，用行动把复杂简单化。

那么你怎么才能在完全掌握技术的基础上提高自己的，首先，你要总结，总结出你拿到一个网站的时候，不管是企业站，还是电子商务网站，还是门户网站的时候，你心中都有一个思路，我怎么做才能使这个网站SEO做的更好，这只是从SEO角度去考虑问题的，你先从网上下载一些成型的网站优化的方案，从中找出一份写的比较全面的方案，进行修改和添加，将其详细化这样你就可以写出一份比较详细的方案了，当你有了这个方案，你就为成为高手做了一个很好的基础了，不管什么类型的网站，你都可以拿出你做的这个模板去进行对应的修改使其完整。

高级SEO就是用这样一份文档来出方案约束员工，给员工分配任务，而且还要定期的对员工进行培训或者开会，这就需要有一个很好的口才了，我的口才就不是很好，当给员工培训的时候，我只会讲实践的知识，就不会侃大山，其实这样是不好的，应该博览群书，来提高自己的口才，当然必须掌握好SEO的每一个概念，这样你说出的话才能服众。

当你还徘徊在中级SEO的时候，赶紧行动吧写一份比较牛的SEO方案可以控制在40-100页，以后不管哪个公司需要方案，你可以立马用你写好的修改出来。做一份全面的培训PPT可以让你在培训员工或者给员工开会的时候让你有所讲，并且讲的让他们赞口不绝。有了这些文档，你也就了一半的管理经验了，另外一半的管理经验需要你在实践中去总结自己去体会。

高级SEO并不难，难的是你行动了吗？

写SEO方案的时候，不管是大站还是小站，第一步要用工具对这个网站进行查询，了解这个网站的收录以及PR权重，反链，排名，当你对这一系列的网站目前状况进行分析后，再对网站内部的利弊进行分析，那么对网站内部进行分析的时候，我们要从以下几个方面去进行分析

1网站首页，要看网站首页存在什么问题，因为网站首页的权重最高，看常规标签，

看图片，看文字链接。看蜘蛛哪里不容易爬进去所做的页面。网站的最底部是否有友情链接，友情链接提高网站的权重也很重要。

2网站的导航是否很容易吸引蜘蛛的爬行，如果不容易是不是因为代码写的不规范

3要看网站每个页面是否有面包屑导航，如果没有，加上是有利于网站权重传递的。

4网站导航的子栏目URL是否容易被百度收录，做到容易传递才好。

5每个页面的常规标签是否合理

6每个详细页面是否做到了，关联性强

不管是大型网站还是小企业站，都是从这几个方面来进行对网站的内部和外部进行分析的，希望我们都能做到更好。

相信做网站建设的朋友知道，建站做起来容易，但是结合实际做好的很少，特别是营销型网站建设方面，而且现在随着网站优化的盛行，网站建设的弊端成了SEO研究的重点。目前有好多SEO优化人员用作弊的方式在一些有流量的网站上做一些链接，这样给那些有弊端的网站流量和权重就会降低，在此给大家讲讲网站中的弊端之一，也是网站中忌讳的留言和评论，怎么做才让那些黑客SEO，不再有机可乘。

现在好多网站中都有留言功能和评论功能，其实这两个功能版块给网站带来了负面的作用，因为现在好多SEO都用大量增加外链的方法来给他们自己的网站增加权重。在你的网站有一定权重和流量的时候，那些SEO增加的乱七八糟的链链接在你的网站中就起到了相反的作用，所以为了避免这样的SEO黑客在你的网站做链接，我们可以采取有效的办法，那么什么办法最有效呢，我们知道留言功能和评论功能都是把文字提交到你的数据库中，然后可以显示在你的后台，建议大家在后台中加个审核功能，只有审核通过的内容才可以从网站的前台显示出来，没有通过的帖子把它删除并且不允许在前台页面中显示出来的，这样那些乱发链接的SEO们不管是用手动发贴的方式，还是黑客攻击群发的方式发贴都不会得逞的。

所以，在这里提醒网站建设的技术或者企业，或者个人，在您建设网站的时候，如果网站确实需要留言和评论功能，也是可以的，只是做的时候别忘了在后台加个审核功能，这样你的网站会更安全，不只是对SEO发的链接起到了防范作用，也对黑客攻击你的网站，也起到了安全作用。

以上就是Seo优化网（http://www.seo39.com/）为您分析的SEO与网站中的留言功能与评论功能之间的联系这方面观点！

不管您是刚参加完SEO培训的菜鸟，还是资深的行业老手， 都欢迎大家来我们的官方博客http://blog.seo39.com/交流与互动！

文章来源参考：

千龙网 http://service.qianlong.com/48624/2011/10/09/6044@7403275.htm

中国经济网 http://px.ce.cn/a/rztz/swfw/2011/1009/14690.html

重庆晚报 http://qy.cqwb.com.cn/a/shangdao/2011/1010/4787.html

青岛新闻网 http://www.qingdaonews.com/gb/content/2011-10/10/content_8966815.htm

大家都听说过伪原创，很多人可能会觉得自己的文章写不好，不知道如何进行伪原创，提到伪原创的方法，最简单就是用网上提供的伪原创工具，其原理就是用同义词替换，相信这是很多站长的第一选择，但是它却有一个致命的缺点：文章缺乏可读性;其实最好的伪原创方式还是人工进行伪原创 ，自己手工修改一篇文章来达到伪原创目的，我开始学习SEO时，也在网上搜集资料查看，为了节约时间，大量采用伪原创工具生成的文章，结果感觉收录的效果不是很好，于是便尝试自己修改文章，结果是每篇文章基本都收录了，欣喜之余，更加坚定自己的决定。总结了以下几点伪原创的技巧，这也是查看http://www.seo39.com/ 中总结出来的，O(∩_∩)O~，看看对你们应该也挺有帮助的吧。

1、长话短说：在不影响整句原意的前提下删除一些文字或词语。比如："我要努力克服不按时睡觉、吃饭之类的坏习惯";修改后："我要克服不按时睡觉、吃饭的坏习惯"

2、短话长说，在不影响整句原意的前提下加上一部分文字或词语，或者把它扩展成两句话等;比如：“我要努力克服不按时睡觉、吃饭之类的坏习惯”，修改后：“我要努力克服不按时睡觉、不认真吃饭之类的坏习惯”。

3、前后倒置：就是把一句话的前后词语位置调换。比如：“我要努力克服不按时睡觉、吃饭之类的坏习惯”，修改后： “不按时睡觉、吃饭之类的坏习惯，我要努力去克服"。

4、正(反)话反(正)说：就是通过加上或者去掉否定词来达到一句话的意思完全改变的目的，比如：“我要努力克服不按时睡觉、吃饭之类的坏习惯”，修改后：“我要养成按时睡觉、吃饭之类的好习惯”。

5 、书面语与口语互换：就是文章的某些口头语，用书面语言代替，同样遇见书面语时，用口头语代替。如：“吃的多，喝的也多”可以用“大吃大喝”或者“暴饮暴食”代替。

6、其它的方法：如“三周”用“21天”代替。“45天”用“一个半月”代替等等。

用什么方法来提高我们网站首页的权重？

很多的时候有可能主页不再第一位，主域名不再第一位，还有就是更新的文章的速度很快，直接排到主页的前面去，这些情况都会导致主页的权重丢失，导致整个网站的权重开始分散!

在很多时候，在搜索引擎搜索你站点的名字，搜索出来的关于你域名的页面并不是你的首页。这种情况在百度中很明显。特别是Site的时候。这说明一个问题：首页的权重不高。　　

想到最近一个企业站的首页权重掉的相当的厉害了，也不知道为什么随着收录的页面数量增加反而首页跑到了第二页面去了，我们分析一下：  　　  

产生的问题是：

1.内部链接建设不好。

2.搜索引擎认为其他页的内容更独特，权威。(有的时候，我们的首页就是栏目文章的链接页，反而不如一些具体内容页独特，新)。

3.也可能有其他的原因。

提升首页权重的方法：  　　 

1.首先是内部链接的建设。经常性地在内页中用不同的相关关键词，去链接到首页。　　

2.经常能稍微地给主页提供一定量的有内容的东西。  　　

3.在博客中看到的一篇文章：在搜索引擎上SITE：你的站点，从SITE中找到你的首页并坚持隔一段时间去点击它。时间间隔最好不要太频繁，但也不要太懒，保证间隔几个小时点击一次吧。感觉这样效果最好之后你再去搜索你站点的名字，慢慢的你的内页链接所在的位置会被你的首页所替代。当然，你的首页肯定要被收录才行哦！  　　

4.同时看到的另一篇文章：在论坛中发表的帖子一般的论坛设置，最新发表的文章会显示在论坛的首页。如果你发表帖子之后没有人在你之后发表新文章或者新的回复，当搜索引擎爬到这些高权重论坛的时候 会在首页发现你文章的链接，这个链接自然也会拥有比其他文章更高的权重了。  　　

如果你发帖子的论坛实在太火，关注搜索引擎蜘蛛爬过的时间段以及蜘蛛对页面的抓取时间，尽量在蛛蛛到来的时候将自己的帖子顶起来让它显示到首页。

其次就是一些很冷清的论坛，不要小看这些论坛。虽然搜索引擎对他们不是很重视，但积少成多，水滴石穿的道理大家都明白！

从09年参加了SEO39的网站优化培训，到现在已经两年了，其中一年是因为生孩子休息了一年，从去年十一月份我又从新开始做起了SEO网站优化，是之前一个同事给我介绍了他们公司的兼职，开始给我了三个站，其中一个是健身教练培训的网站，网络公司做了一个月一点效果也没有，说让我特别重视的去做，我就按照39教给我的方法，耐心的去做了不到一个月那个站就上来百度和google的首页，而且他们这个站总共有十几个词，就有一两个词没有上到首页，其他词都上到了首页。

当有了案例的那种开行，接着还是继续拿网络公司的站联系了大概有四个月的时间，他们总共给我了二十个站左右吧，每个网站词上的都不错，感觉自己练习的差不多了，我就开始接自己的活了，我喜欢自己做生意，不喜欢给别人打工，就去网上发布我的个人承接网站优化的信息，还不错，没多久就来单了，第一个大单是医院的网站，做了几天之后，又有人找来了，第二个单子是关于移民，和移民投资的网站，有了这两个站，我成立了我现在的工作室，目前我们工作室有三个人在运营，虽然是刚开始，我们的收入比上班族不次，这就是一个好的开始，我相信我的工作室的未来会更好。

如今不少网站已从传统营销走向了网络营销的道路，越来越的小牧场，奶牛场看到了网站推广的重要性，电视广告、路边广告、报纸广告已经远远达不到预期的效益，SEO依然是网络推广中最重要的营销手段之一，SEO也不在是只局限于卖产品的服务范畴，被越来越广泛的运用到了农业以及畜牧等行业，特此我们推出了《奶牛之家门户网站SEO诊断书》：

1、 主页标题设置问题：

目前标题设置不符合搜索引擎的规范，应当将主要关键词放在标题的最前面，网站名称放最后面，关键词之间用“-”相隔主页关键词建议不超过2-3个。

修改建议：

标题修改为：奶牛之家 - 肉牛价格，奶牛养殖技术，专业的奶牛行业门户知识网

2、 内页标题设置问题：

目前内页“标题名”与“网站名”出现的前后顺序有所颠倒，修改过来即可。

修改建议：

如：奶牛之家 – 行业资讯，改为：行业资讯 –奶牛之家

3、 主页关键词设置问题：

目前主页关键词过多，而且连接符使用不正确，这样撰写起不到提高排名的效果，主页关键词应该只精选2-4个左右主要关键词，而且要挑选适合网站的关键词。

修改建议：（关键词之间的连接符必须用逗号隔开）

关键词修改为：奶牛之家，奶牛门户，肉牛价格，奶牛养殖。

4、 内页关键词设置问题：

目前整个网站关键词全部都是一样的，这种设置对搜索引擎是很不友好的，建议按照各自页面或者各自版块的内容来撰写，可以调用标题名作为关键词。

修改建议：

栏目内页的关键词：建议根据网页标题进行调用，例如http://www.cow123.com/blog/页面，他的标题是“奶牛博客 - 奶牛之家”，那这个页面的关键词就是：奶牛博客，博客,奶牛之家。例如http://www.cow123.com/blog/seo.html页面，他的标题是“SEO经验 - 奶牛之家官方博客”，那他的关键词就是：SEO优化，SEO经验，奶牛博客，奶牛之家。

5、 图片ALT标签设置问题：

每一个图片都应该有一个alt标签，用来帮助搜索引擎蜘蛛读取图片的内容。

修改建议：

目前网站中有大量的图片内容，在尽可能的情况下将图片都加入alt标签，标签内容可以根据关键词布局的需要设置或者用相关的奶牛类型名称。

6、 关键词布局问题：

由于关键词“奶牛”“奶牛养殖”“奶牛价格”在网页中出现整词的几率较低，所以我们需要适当的提高“奶牛”和“养殖”“价格”三个分词的密度，对于主页，我们可以从以上地方进行布局。

以上是《奶牛之家门户网站SEO诊断书》，希望能对农业界和畜牧行业的朋友有所帮助！

作者：何敏

刚入SEO这个行业，前辈和老师们就说过，SEO其实是很简单的，每天只要重复的发文章、作外链，养成良好的SEO习惯就可以了。事实上，梁华也是听从前辈的建议，养成了很好的习惯。每天早上，都会查询下网站的收录、外链、排名、友链、首页有无黑链等等各种情况。相信每个人也都有自己的SEO习惯，毫无疑问，有一个良好习惯的seoer是一个合格的seoer，但是如果仅仅是有这样习惯的seoer，绝对不是一个优秀的seoer。（有点拗口，但事实就是这样）

SEO有时很简单，如果网站快照更新快，收录和外链都很高时，我们可以按照以前的习惯工作，每天更新十几篇文章，发几十个外链。剩下的时间聊天泡妹，但是这样也照样“不误”正业。

不过SEO是一个不断发展着的行业，搜索引擎的算法在不断改变，seoer的工作也应该随之而变，莫要拘泥于自己的习惯，当发现网站有变化的时候，我们工作的重心也要发生相应的改变。比如网站快照更新慢而且收录不增加甚至减少的时候，这时，我们就不要再发太多文章，发了也不被收录。这时候就可以多发些有质量的外链引引蜘蛛。反之，如果网站快照更新快秒收录的时候，就可以多发些文章少做些外链。

虽然seoer的习惯是很重要的，我也建议大家都养好良好的习惯，但是有些时候习惯会制约自己的发展。我曾经习惯在几个论坛发外链，因为这几个论坛收录快，PR高，而且就算发很多外链管理也不删，所以我网站外链很多在这几个论坛上。但是久而久之发现这样很不好，虽然短期效果挺好，但是如果全发布到这几个论坛，网站的权重就没有那么高了。还不如多发几个权重不是那么高的网站，这样收录的范围更广。

Seoer的工作应该随搜过引擎的变化而改变，这点是毋庸置疑的，但是并不是任何的改变我们都要变化，有些时候我们要学会淡定，淡定，再淡定。前两天度娘来大姨妈，好几万的外链最后只剩64个，但是查了下排名收录都没变化，也就不用过于担心了。果不其然，到了下午六点半左右，外链就恢复了，甚至还有小规模的增长。

良好的习惯是seoer成功的基础，不拘泥于习惯，能够适时变化则是seoer成功的关键，相信各位前辈对这一点也有很深的理解。SEO是不断发展的，有个良好的习惯是合格的seoer，但是通过不断的学习-分析-总结-再学习的seoer，才会是一个成功的seoer。

你好，我的完整路径是下面这样:：

jiaoxueziyuan/shijuan/fanwen_12.htm

而百度抓取时好多次只抓取了不完整路径显示404如下:

2010-09-05 03:13:40 W3SVC485830957 202.75.216.89 GET /jiaoxueziyuan/shijuan/fanwen_12.ht- - 80 - 220.181.7.130 Baiduspider+(+http://www.baidu.com/search/spider.htm) 404 0 64 0 228 31

这是什么原因呢?

回答：

问题：搜索引擎在高峰时段大量抓取页面，导致服务器出现负载问题。但是我不希望屏蔽它的抓取，应该如何处理？能否在高峰时段对spider返回 202 状态码，告知spider“服务器已接受请求，但尚未处理。”？这会对网站造成什么影响？

百度官方回复：

会延迟百度对新网页的收录速度。

正常情况下，Baiduspider的抓取频率大致上和网站新资源产生的速度相符，并不会给网站带来很大的压力。但现在网站结构通常都比较复杂，多种url形式指向的可能是相同的内容，或者会自动产生大量无检索价值的网页。

我们目前发现的问题，主要来源于此，建议先分析一下spider的抓取日志，看看是否抓取了你不希望搜索引擎收录的形式，如果有，robots掉它们可以节省大量的资源。