Bruce » Seo

百度站长俱乐部答问录

Bruce — Fri, 16 Apr 2010 19:22:46 +0000

转载自：SEM Watch

此前，由于缺少有效的沟通渠道，使得网站站长或从事搜索引擎营销的人士很难获取到直接来自百度的信息。自 4 月 7 日百度创建站长俱乐部以来，这种局面有所改善，业内几位高人已经受邀加入俱乐部，并代表站长们提出了一些针对百度在收录、链接、权重、算法等方面的问题，这些问题大都由 Zac 与柳焕斌提出或代问，百度官方用 Lee 和 kkksuper 的 ID 陆续做了回答。由于目前百度站长俱乐部采取的是邀请机制，所以无法产生大规模互动交流，SEM Watch 将其中部分摘录汇集，希望能够引起各位朋友的关注与讨论。想了解更多的内容及信息请移步至这里，同时，如果有需要向百度打探情报的朋友也请留言，因为 Zac大侠也是常驻 SEM Watch 的。

关于网站

问：使用虚拟主机的网站会不会因为同一个 IP 或同一台服务器上有其他网站作弊被处罚而受连累，也被惩罚？

答：连坐，血统论等，是在极权社会里才出现的反人类政策。一个成熟的搜索引擎，这么蛮干的可能性很小。

问：将一个旧的 URL 进行 301 重定向处理，百度反应很慢？而且旧的 URL 会在相当一段时间内还存在于百度搜索结果中，但是网页标题是新的，缺少描述。

答：对于内容迁移，我们推荐的做法就是将旧 URL 301 永久重定向到内容对应的新URL，这样我们会把旧URL积累的权值转移到新URL上。

为了避免种种不稳定的因素，目前我们的处理策略比较保守，新、旧URL会同时并存相当长的时间。最近我们意识到这样处理其实并不妥当，正在调研更迅速的处理方式，相信很快就可以完美的处理好这个问题。

问：百度对使用海外空间的中文网站有歧视吗？百度是否会抓取域名注册人的相关 whois 信息？

答：1、百度对海外站点没有歧视。但百度从国内爬出去的蜘蛛，会严格遵守国家的政策和法令，所以国内普通用户访问受限的内容，百度蜘蛛一样会搞不定。

2、任何对站点价值分析有贡献的要素，都有可能被搜索引擎使用。并且这些要素的使用方式，也不是一成不变的。至于具体有哪些要素已经被使用以及如何使用，这个无法详述。

问：百度如何看待伪原创？

答：“伪原创”就是“非原创”。对非原创的策略，同样适用于伪原创。归根结底，这是一个技术实现程度问题，而不是策略思路问题。

ZAC：好多人认为他们做的所谓“伪原创”挺好，应该能骗过搜索引擎，这大概低估了搜索引擎算法。还是得回到根本，内容为王。说起来容易，做起来难，很少人会认真去做。

问：百度如何对待过期域名？谷歌对过期的域名很长一段时间还有收录, 而百度却很快就会将其清空。

答：过期域名也是域名，所以，适用于新域名的策略，也一样适用于过期域名。只是过期域名在历史上累积的与现有网站无关的权重，会被剥离掉，这也是很容易理解的。

关于收录

问：大概在 4 月 1 日前后，很多站长用 site 查看自己在百度的收录数量，发现狂降，现在好像又恢复了，那是怎么回事？

答：我们也注意到了这种说法，其实收录方面没什么变动，只是我们在上线新策略的过程中短暂影响了结果数估算算法，大家只要关注一下流量即可知道，那段时间从百度获得的流量并没有变化，如果收录数真的发生了大的变动，肯定会影响流量。

另外，相信大家在用 site 语法查询结果数时，也看到了搜索结果最上方的“找到的相关网页数是估算值，不代表真实结果数，仅供参考的提示”的提示，我们的搜索结果数估算算法是针对正常用户的关键词检索而设计，没有针对site语法检索做过优化，它得出的搜索结果数只能做为一个参考，建议关注网站从百度获得的流量有没有变动更直接。

问：网站用 site: 查询，只有首页收录，请问是什么机制造成的？

答：两种情况：

1、新站点，具体内容还没来得及抓取和索引。

2、老站点，因为种种原因被严厉惩罚了，站长圈俗称“拔毛”。

后者的严厉惩罚机制，我们期望逐渐演化为更合理的甄别和处理。实际上现在的状况，比之四、五年前，已经人性化多了。呵呵。

问：一般来说，网站所有者不是太希望 https 的网页被收录。如果收录了，如果处理？把 https 的网页 URL 更换成 http 形式的？还有一种情况，就是 ip 地址形式的URL被收录。

答：如果不希望被收录，常规的做法是设置 robots 文件。

https 主要的出发点是安全，并没有太多考虑搜索引擎。从用户角度，很多采用了 https 的站点（尤其是首页），也是需要被搜索到的，比如支付宝，贝宝等。通常情况下，搜索引擎对这类网页并不做内容解析，而只是将 URL 进行索引。

IP 地址的 URL 被收录，除了 spider 在机制上的不完善之外，通常站点设计上也有一些缺陷。一般情况下，这类问题是可以被规避的。

问：百度数据更新的周期大概是多长？

答：如果是一个变化频繁的入口索引页面，相信这个变化周期会很短；而是相对稳固的内容型页面，周期则会相对较长。站长们观察一下蜘蛛的爬取日志，发现的规律会比这边的说明更有价值。

此外，搜索结果页上的那个时间，一直很让人confusing，我们正在考虑修改。

关于权重

问：百度是否跟踪 JS 链接并传递权重？因为有的时候某些页面得到太多权重没什么意义，比如用户登录、注册页面之类的。是否可以用简单的 JS 阻挡链接传递权重？

答：javascript 的解析，是很多搜索引擎正在做的事情；同理，对 flash 的解析。毕竟有那么多应用 javascript 或者 flash 的网站，其实并没有意识到，他们的做法给搜索引擎的收录和索引带来的麻烦。所以，如果期望不被搜索引擎收录的话，最直接的手段，还是写 robots 文件。

问：百度目前支持链接的 nofollow 属性吗？

答：百度现在支持 nofollow 标签。带 nofollow 标签的链接，我们会忽略掉它绝大部分的作用。

nofollow主要用在用户留言等不受站长控制的地方，这些地方的投票不是站长的意志，告诉搜索引擎不要给他投票是合适的。

问：百度对子域名如 news.domain.com 和主域名 www.domain.com 权重怎么处理？是当作两个不同的网站还是子域名会继承主域名的权重？

答：怎样处理是合乎逻辑的，策略上就会采用那个合乎常理的处理手段。或者这样讲，如果你是负责这个权重处理的，你觉得怎样做是最合理的？那么很可能百度就是如你所想的。呵呵。

搜索引擎理解起来并不复杂，站在用户角度考量，很容易揣摩搜索引擎的策略思路。

关于链接

问：当前做tag/seo”title=”吃这碗饭不容易(*^__^*) ” >SEO的同学们，都在疯狂的购买链接。表现最为突出的即是各大 SF 类网站，他们全是通过购买大量的友情链接来强J搜索引擎而上来的。（像传世 SF，前几名的站每个月的链接费用就至少超过五万。）

那么，对于这种明显的，通过大量购买链接来作 SEO，强行登顶的作法今后是否会受到百度的惩罚？

因为就目前来看，百度对购买链接还没有一点惩罚的迹象，一般的词，网站收录后，只要稍加更新然后狂买两个月链接，绝对进前三名。

而谷歌老早就说明确了。通过购买链接来增加 PR 会受到惩罚，百度在这方面的算法是否也应该更新一下了？

答：这种手段奏效，说明百度在识别和处理超链作弊方面，仍存在很多问题。这类问题理应得到妥善的解决，以使互联网环境得到净化。我们回头会和相关的同事就此问题了解一下。

ZAC：提问的网友和其他人相信都感谢 Lee 的回答，也希望百度能在这方面改进，打击垃圾链接和网站。

下面是提问网友的回复：

这种狂买链接顶排名的做法已经有一年多了，到现在为止“做百度就是要靠买链接”已经在站长圈子里成为众人皆知道的事情，而且各大站长类网站还都开设了链接买卖的版块，以 A5 为例每天站长买卖链接的费用就有好几万，现在可以直接的说对于百度指数在一万左右的词，多买一些链接，排名在 20 天左右绝对可进前三名。希望百度的相关技术组对这一问题好好处理一下。

问：最近黑进 gov 或学校网站加上自己网站链接盛行。百度内部评估对这种黑链的鉴别准确性有多高？如果搜索引擎不能鉴别，普通企业和站长面对黑链很难竞争。

答：这个问题早已留意到，并一直在应对策略的完善中。

大批毫无道德和法律底线的人，使得中国互联网的生态环境变得非常恶劣。但按我们的理解，除了搜索引擎强化技术应对方案之外，中国法治的完善，才是对这类违法犯罪行为进行遏制的根本手段。目前互联网相关的立法，远落后于互联网的发展。

问：目前刷百度相关搜索和搜索下拉框的方法很多，怎样才能限制或者根除这种现象。有没有像投诉平台这样的地方，可以让大家投诉，给大家一个更好的相关搜索？

答：这个问题的确很恼人。目前我们正在全力处理中，可预期将有大幅改观。

投诉可以发送到 webmaster@baidu.com，肯定可以送达相关工程师，但不会有具体的回复。此外，处理多半是策略级的升级，个案的针对性处理会比较少。

关于算法

问：百度是否有会估算某网页的某个反向链接被点击次数（例如：从工具条、流量统计等工具得到的部分数据）？比如是否把链接的点击率计入算法之中？是否会利用这点来判断哪些是隐藏链接？或者判断外链的相关性等因素。

答：我只能说，一切有利于排序改进的因素，都有可能被搜索引擎尝试应用。

任何能改善排序效果的要素，搜索引擎都可能会尝试应用，不管是toolbar，analytics，rss订阅等等。

问：目前谷歌已经把网页加载速度纳入页面排名影响因素，百度是否也考虑此因素决定网站搜索排名？

答：这是很容易想到的一个网站价值评价要素。但如何有效应用，并不是一件很容易的事情，需要非常谨慎。中国尤其复杂，不同网段差异甚大。但显著影响到用户体验的广泛要素，最终都会被搜索引擎谨慎的尝试和使用吧。

问：Google有 PR 指数，搜狗有指数，百度有什么？或许百度已经有对网页进行质量评分了，暂时没有对外开放？以后会有这样的网页评级指数么？

答：多公布一个评级指数，只是为站长们多带来一分烦恼。事实上，很少有成熟的搜索引擎会发布用于最终质量评级的指数。按照 Google 的官方说法，PR 也只是诸多排序因子中的一个而已。

问：百度如何对站外作弊的手法判断是不是竞争对手所做，比如买黑链，建群站，群发垃圾垃圾等，这些竞争对手都能帮你做。可否透露下百度对这个判断的原理，站长如何防范，发现被人陷害的话，如何举报或采取其他措施？

答：如果想维护一个策略的生命周期的话，最好的方式是保守策略细节的秘密。但有一点可以确定，一个成熟的搜索引擎，不会轻易的通过一两个要素来判断一个网站的生死。

在回答问题的同时，百度俱乐部的发言人也透露了百度近期会发布一个搜索引擎优化指南，里面有百度推荐的网站建设方法，以及一些会危害到权重的做法。

谷歌Ad Sitelinks效果良好

Bruce — Thu, 25 Mar 2010 03:29:40 +0000

导读：我记得去年我详细找过这方面的资料见：Google-sitelinks及Google -oneline-sitelinks，国内Adwords界面内好像没有找到此种投放选项咩，难道目前还只是针对老外?

近日美国广告行业网站AdAge今天刊文，对谷歌去年推出的新式广告Ad Sitelinks的效果进行了分析。文章认为，虽然这种广告存在一定的争议，但的确能够从一定程度上提升广告效果。

网站链接：网站链接是指向网站的内部网页的链接。并非所有网站都有网站链接。Google 会自动生成这些链接，但您可删除不想要的网站链接。 Google 尚未针对您（Bruce）的网站生成任何网站链接。网站链接完全是自动生成的，仅当我们认为这些链接对用户有用时，才会显示网站链接。如果您的网站结构不允许我们的算法查找正常的网站链接，或者我们认为您网站的网站链接与用户查询没有关系，就不会显示该网站链接。不过，我们将不断改进查找和显示网站链接的方法。

以下为文章全文：

新式广告

对于全美各大品牌而言，谷歌近些年来对搜索广告进行的最大改版也产生最大的争议。

谷歌去年对AdWords进行了改版，推出了一种名为Ad Sitelinks的格式。通过这种形式，搜索广告主购买了自己的品牌名称关键词后，便可在传统搜索结果中添加主页之外的更多链接。

通常而言，搜索广告只包含一个链接，有时也会包含两个，其中一个指向主页，有时还会包含一个地理链接。Ad Sitelinks则允许广告主在3行文本中最多添加5个链接。例如，梅西百货(Macy’s)的搜索广告除了可以添加主页链接外，还可以额外增加“免运费交易”、“在线购物”、“寻找店面”以及“登录账户”等几个链接。玩具反斗城(Toys"R"Us)的广告中则额外包含了一个“买一赠一”的链接。

绕过主页

这种深层链接会绕过主页，但却能够大幅提升广告主的“点进率”(click-through rate)。据谷歌估计，这种新型广告形式比传统搜索广告的点进率高出30%到40%。问题在于，当用户对品牌进行搜索时，这种广告也会吸引用户点击广告，而忽略了自然搜索结果。因此，广告主的搜索广告开支也增加了30%至40%。

搜索营销公司Didit CEO凯文·李(Kevin Lee)说：“这就像是行贿，许多广告主只是将这种方法视为向谷歌支付的又一笔‘过路费’。”

尽管如此，几乎所有的广告主都选择了这种新式广告。原因何在？这是因为这种广告同样可以带来更高的转换率，因此较高的广告开支通常都可以借助消费者较高的网络消费额来弥补。Ad Sitelinks使得广告主在至关重要的搜索结果首页上获得了更多的“地盘”。

开支增加

但是由于搜索具有导航的特性，因此部分用户会直接在谷歌上搜索“Macy’s”来访问梅西百货的主页，从而避免输入网址的繁琐程序。广告主也因此产生了一种流行的观点，他们认为，这些用户仍然是他们自己的品牌用户，而谷歌却对这些用户带来的访问量收取了额外的费用。如果一个广告主每月的关键词广告开支为10万美元，其每月的花费会增长4万美元，对于部分广告主而言，这是一笔不小的开支。

凯文·李说：“你在花钱买回自己的用户。具有讽刺意味的是，我们一直都在这么做。难道广告主会满意这种做法吗？绝对不会！”

优势所在

但并非所有广告主都感到不满。对于那些品牌名称附带更多含义的广告主而言，Ad Sitelinks可以帮助其加强对这一名称的控制，并迫使其他自然搜索结果被挤到更低的位置。

Nationwide Insurance就是一个很好的例子。Nationwide(全国性的)本来可以用于描述很多企业，更不用说这个词会被广泛应用于新闻和其他内容。但通过使用Ad Sitelinks业务，该公司可以控制自然搜索首页的前三个选项。谷歌会对一些品牌名称的购买流程做出限制，但对于“insurance”(保险)和 “flowers”(花)等较为通用也较为昂贵的关键词则不会做出限制。

作为一家已经将数字营销开支的50%投入到搜索广告中的企业，Nationwide Insurance非常愿意通过这种方式吸引现有用户，并向其出售更多的产品和服务。该公司互动营销总监克里斯·卡顿(Chris Cotton)说：“与自然搜索相比，我能够控制用户体验。无论用户是否愿意购买，我们都可以借助这种方式向现有用户展示其他产品。”

卡顿表示，通过扩展式的搜索广告以及排名第一的自然搜索结果，广告主就可以获得更多的“地盘”。

保持创新

在谷歌看来，Ad Sitelinks只是为了保持与自然搜索相同的创新步伐。过去几年间，谷歌增加了视频、地图、图书摘要等功能，最近还从Twitter和 Facebook引入了实时信息，并将其增加到搜索结果中。

谷歌广告质量产品管理总监尼克·福克斯(Nick Fox)说：“大约一年前，我们发现了这个问题，并认为广告也是一种信息，所以我们便开始努力改进搜索广告的形式。”

去年夏天开始测试的Ad Sitelinks便成为了这一系列改进过程中首个正式发布的产品。福克斯说：“结果非常好。根据我的观察，这是广告主发布广告的最佳方式。”

内容重复—SEM大忌

Bruce — Thu, 28 Jan 2010 02:10:39 +0000

众所周知，内容重复是搜索引擎优化中的一大忌，通常情况下转载的文章是很难获得高权重，所以站长们往往使用伪原创，下面是部分关于内容复制的信息图表，相信对各位会有所帮助。

#1 从博客上复制内容：

上图是主要针对博客这种网站媒体类型的，我们使用wordpress的时候经常将文章毫无保留地展示在首页，而不是使用输出摘要（使用MORE标签？），根据Randfish观察，其实这样子是会搜索引擎误认为内容重复。

#2 URL参数引起的内容重复

究竟URL参数像Session IDs，Tracking IDs是怎样引起内容重复的呢？Googlewebmastercentral (需要翻墙) 透露，同一个产品页面，如果搜索引擎爬虫抓取可以通过多种链接途径抓取同一个产品页面，那样会有以下几种消极的影响：

1.多种URLs会稀释链接的广泛性。比如上图的产品页面，如果有50个导入链接，那有可能分别形成了3种导入URL途径，而不是唯一的某一个URL，这样就等于将导入链接传递的权重分散到3个不同的链接上。

2.搜索结果或许会呈现不友好的URL（比如一大串长长的session ID,tracking ID）。从而在SERP中，降低了用户对该页面的清晰了解程度（英文url比如semwatch.org/sem，不仅仅具备搜索引擎友好性，更重要的是用户体验友好性），不利于品牌的塑造。

#3 搜索引擎对待内容重复的态度

从Search Engine Land给出上图可知，一般来说搜索引擎通过4个步骤来识别内容是原创还是复制：

1.发现。当搜索引擎爬虫发现新的内容，他会立刻与之前收录的内容进行比较确保内容的原创性。

2.丢弃。首先，搜索引擎会放弃收录那些来自链接工厂，MFA站点（Made For Adense）和被列入黑名单的IP的页面

3.解剖。下一步就是分析每个页面的入站链接，判断链接的质量和源头。

4.决定。最后就是回顾之前收录的页面和相关链接，决定哪一个页面才是绝对原创。

#4 关键词拆解

搜索引擎会蜘蛛通过你的某一个特定页面爬行4个或者40个网站上不同的页面，而这种行为一般是通过该页面的相关内容链接进行爬行抓取（比如上图的“滑雪板），很多朋友希望通过将众多页面相互关联起来即使相互之前没有关联性，一个站点的许多页面过度使用同一个关键词，从而为了提高排名。但是事实上，这种行为对于排名是帮助不大的。

#5 怎样处理好内容重复的情况

这里不同在于不是仅仅通过“滑雪板”这个词而是通过各种各样，有价值而且唯一的关键词（比如折扣滑雪板，小孩滑雪板等）链接到原来的内容上。这样搜索引擎就可以很容易确定该页面与其他页面的相关性极强，这不仅仅基于搜索引擎友好性，更是考虑到用户体验与网站未来的信息架构。

Canonical标签

Source: Dynamical.biz

Source: SEOmoz.org

其实上面两幅图都涉及到一个问题，那就是网址规范化，针对这个问题，Zac前辈很早前就给我们分析过—seoblog/2009/02/18/canonical-tag-301/”>网址规范化问题最新解决方法，大家可以前往学习。

301重定向

301重定向也是解决内容重复的重要方法，对于永久的重定向，搜索引擎更偏爱于301重定向。随着301重定向实施，旧网站的权重就会自动传递到新的网站上。

当各位了解了搜索引擎对于内容重复判断机制以后，相信对各位的优化工作会有所帮助。我们经常说“细节制胜”，所以无论是网络营销还是单纯的SEM都必须遵循这样的一个原则和细节，方能制胜。

本文首发 SEM Watch ，转载请注明出处。

用好TAG事半功倍

Bruce — Thu, 28 Jan 2010 01:54:22 +0000

对于博客和网站来说很强大但却没被充分使用的工具之一就是给页面或博文做好tag（标签）。要有效的用好 tag 并不是那么容易。在这篇文章里会用几个例子来说明如何使用 tag 使其发挥最大功效，以及需要注意的问题和一些高级策略。

首先我们回过头来看看你能组织管理网站/博客内容的几个方法。第一是按主题，大部分博客和 CMS 平台称之为“category”;第二是按日期，大部分的博客/CMS会按年、月、日来将内容分组归类。第三是按标签，由你放在文章或页面的注解或描述组成。

以上三种分类方法都会带来同样的问题：重复内容。假设你发布了一个页面，这个页面会独立存在，也会存在于category分类目录、按年/月/日分类存档目录以及你添加到文章的任何标签目录里。这样搜索引擎就需要去分辨到底哪个页面应该被索引到搜索结果里。（SEM Watch：rel=canonial属性的使用是大家熟知的办法，但貌似还是会小麻烦）首先我建议在robots.txt 里用“noindex” 命令阻止掉所有按日期分类目录，不让其被索引。

（不过 Google 是目前唯一支持这一命令的搜索引擎。）同时我还会将“noindex/follow”用于所有按日期存档里的页面，告诉机器人不要把当前页面放到搜索结果页中，但依此找到应该被收录的原始页面。对于标签页也是同样处理。如果你使用的是 wordpress,则可以用 Joost de Valk开发的 Robots Meta 插件完成这项工作。这样我们就只需要处理 category 和独立页面的重复问题了。

为解决这一问题，可以只在分类页面展示内容的摘要或片段。 Thesis主题里有可用的插件。如果你没使用Thesis，用 post teaser 插件也一样，或者记得用“more”（查看/阅读更多）。

那么既然我们已经解决了内容重复的问题，为什么都还想要最先使用tag呢？难道不能在category里得到同样结果么？是，也不是。举一个我怎样使用category和tag的例子。假设你有一个明星网站，包含“baby bump”、“fashion”、“news”、”rumors”等分类。

那么像帕里斯希尔顿或者布兰妮这样总在风头浪尖上人物应该怎么处理？我会给明星们分别建立tag，一旦发布和她们相关的内容就tag到他/她的名字上。另一个例子，如果是一个有“adventure travel”、 “family travel”、 “skiing”、 “cruises”等分类的旅游网站。我会建立国家、省/州以及城市的tag。

例如巴哈马、法国或者科罗拉多州。你可能会有一个关于白水漂流的页面属于adventure travel的分类，也有标签指向科罗拉多州；也可能有关于在Vail滑雪的内容属于skiing分类也指向科罗拉多州，这两个页面会通过使用科罗拉多州的tag关联起来。

如果你使用 cross linker 插件，你能设置任意词例如”科罗拉多州“自动链接到“科罗拉多州”的tag页。如果访客在阅读以上关于科罗拉多的文章时点击“科罗拉多”，就能访问tag页面，看到你发布的所有关于科罗拉多的文章。

我发现文章中的链接比在文末的tag链接能获得更多的点击。这样也能同时为读者和搜索引擎的蜘蛛建立另一种的导航路径。你能在写每篇文章时分别给标签词加上链接，但当我想减少维护工作时发现整站管理会更容易些。

另一个好处是，打tag是选择展示哪些广告的更为有效的方法。如果我只使用类似“家庭旅游”这样的分类，就很难知道要展示哪个广告。是该放迪斯尼票、家庭巡游或者其他旅游城市优惠券？然而如果用tag，就能很明确的知道广告应该放在什么位置更有针对性了。

当然所有这些做法都可能会有些负面影响。你不得不去维护这些tag，因为tag的使用是有可能无法完全掌控的，尤其是当你有多个作者的时候，（比如SEM Watch）有可能出现多一个标签都在说一码事。另一个可能会有麻烦的问题就是大小写了，比如 Google 和 google。

如果你将 tag页设置成不被索引倒问题不大。但会影响我接下来要说的高级策略的使用。坦白说，管理和编辑tag的好工具真的不多。我发现最好用的就是 Simple tags, 虽然谈不上完美，但能满足需求。

高级标签和交叉链接的使用

使用打tag的方式会造成一个问题：阻止索引页面上的内链锚文本被浪费了。拿上面旅游网站的例子来说，你肯定希望关于科罗多拉州的页面出现在索引里，但可能不是有较小价值和流量的某个小城市的标签。

所以你必须要把”科罗多拉州“链接到 “http://example.com/tag/colorado/”。然而，如果你不是链接到标签页而是另一个一般页面比如“http://example.com/colorado/”会怎样？那么你就需要创建一个有编辑内容的页面，安装 EXEC PHP 插件，用它发出一个WP Query,自动列出tag到”科罗多拉州“的文章。要做到这个，你得懂点PHP,但这其实也不是什么难事。

另一个技巧。如果我创建“head and tail”内容,我会建立一个交叉链接指向 “http://example.com/keyword/”页面/文章。但如果页面上还没有任何内容（或者只有内容的“结尾”),我会用 redirection 插件临时重定向到标签页。这算是耍的点小花样，所以只有当你对自己做的事情很有自信时才可以这样用。

综上所述，你需要记住的内容如下：

通过使用tag，你能用更细节的方式分类网站内容
tag分类能给用户和搜索引擎提供内容的新的导航路径
如果在内容正文里将文字/tag做好链接，tag分类会对用户更有帮助
tag分类是提供更有针对性的广告或联盟链接的有效方式。
要注意将重复内容以及重复/类似tag最小化

原文作者：MICHAEL GRAY 原文链接：http://www.wolf-howl.com/blogs/how-to-use-tagging/

SEO民工

Bruce — Thu, 29 Oct 2009 14:59:08 +0000

王志炜：大家好，我网名是乐思蜀。大家认为星箭讲得实在吗，详细吗？好，接下来我给大家讲虚的，电子商务相关的。

首先看看看SEO，国内很多人把自己当成了网络民工，其实SEO所做的事情还不如一个农民工赚的钱多（现在有些农民工背一天砖都不止100块），这样的SEO是很可悲的。一个SEO在公司中的位置应该是一个策划，掌握策略的位置，但如果把自己当成群发链接，发垃圾链接，认为这就是SEO，那是错误的。

SEO真正的优势在哪里？大家看看这张图，传统所谓的营销方式里面都是采用推式营销，很多报告和文章中会写到怎么样把这个产品推出去，是靠推，使劲发广告，讲究覆盖到多少个媒体、多少受众。而我们做SEO完全是一种拉式的营销，“2009年，点石茶话会地址是哪里”，我搜索这样一个关键词，我相信没有谁脑子有问题到这个程度：闲着没事找着玩。他搜这个的目的就是要知道怎么样去，或者某一家公司电话是多少，他想打这个电话，或者是某个产品多少钱，他是找这个产品，想买这个产品，才会搜索这样的关键词。

在搜索营销里，用户的目标是现成的，他想要达到的目标已经暴露在我们面前了，我们把用户拉到我们网站来，最终达到我们的目的，这个过程就完成了，这才是SEO的优势，是其他很多营销方式没有办法比的，比如逐渐倒闭的这些纸质媒体，包括电视广告，很多数据没有办法统计。SEO做好了以后，很多数据都是可控的，作为一个SEO经理，你做的时间长了，有经验的时候，你都知道这个关键词我需要多长时间能上，这就是一个优势。

还有一个误区，总结出一个词：出发点。现在在点石论坛中，我觉得很遗憾的是目前为止很少讨论真正在电子商务方面有用的东西，讨论的更多的是哪一个关键词上去了，百度出了一个什么漏洞，我赶快去做。在座肯定有很多老板，CEO，自己的公司，我想问你们，你们找SEO干什么，你找SEO给你做排名吗，做流量吗，如果你是一家电子商务公司，我告诉你每一个老板所想的这些，我希望SEO给我带来订单，而不是说给我带来一点流量，带来垃圾流量反而占用带宽，没有任何好处。

SEO怎么做，特别是针对电子商务来说，它的出发点是最重要的一点，SEO，搜索引擎优化到底优化的是什么，我们可以看到有三个：关键词排名、访问流量和转换率。

所有的优化环节，所有的每个动作都是为最后一个转换率服务的。如果你做SNS这种社区论坛，基于用户的，用户就是转换率，如果你做电子商务网站，没有别的选择，就是订单，订单就是你要达到的最终目的。如果实现达到最终目的，你要做很多事情，包括一些表象的，像关键词排名，但是，所有做SEO，关键词排名只是一种手段。你卖诺基亚手机，你非得把摩托摩拉的关键词上去干什么？这样会把你的网站速度拖慢，而且用户觉得你网站不好，他不来了，下次有新产品，用户也不喜欢这个网站。

针对电子商务网站来说，它的终极目标就是订单，流量只不过是为订单服务的。前面每一个过程，我们把基础的工作做好，最重要的达到目标是要转换，2006年的时候，我曾经和国内一个SEO讨论这样一个问题，他提出的观点是，SEO管那么多干什么，只管把你的关键词排名做上去，带来流量就成功了，我说他这个观点是绝对不正确的，SEO存在，做了关键词排名，做了流量，如果不产生价值，SEO的人员在公司就没有存在下去的必要，SEO也没有在互联网这个行业中存在下去的必要，因为你最终没有达到目标。

在座有很多传统行业的，对网络推广，SEO不熟悉的话，就会被很多网络公司骗了，这个词花多少钱给他，你把钱给他了，你确实排在第一，但是排了一年你发现我怎么还没有订单，所以那个关键词排名就是不适合你。SEO不是万能的，不是什么事情都能做的，而且同样的情况下，有时候有些事情用别的营销手法比SEO做出来效果会更好。SEO需要兼顾，利用多种营销手法。

第一是正确的利用SEO获得高质量的流量，让用户在你网站产生转换率。

第二是配合搜索引擎付费营销，很多时候我们需要和付费结合起来，电子商务网站前期怎么获得流量，Google不会给你流量，你怎么办，在这个时候可以使用PPC投放，如果做过海外推广，海外营销这些人员，他知道PPC衰减是有一个过程的，你今天投放了PPC，产生了100个流量，明天你不投了，它也不是说就没有了，是一个衰减的过程。Ppc可以让用户先来接触你这个网站，SEO开始起来的时候，你可以根据你自己的业务状况，加大或者是降低PPC的力度。

第三个是多种营销方式结合，我的一个客户案例，他做的那种产品，对于网上的物流不太便利，我最后发现他一段时间之内转换率比较高，我经过分析发现，他转换高的原因是，因为我帮他公司注册了一个帐号，他就发我这个产品怎么样，现在什么时间了，注意什么问题，是帮助企业给客户提供这些信息。最后发现它比SEO带来的订单还多，可能是由于它自身产品的原因，这种情况不是一个两个，很多时候我们SEO也触及不到的地方，不是SEO是万能的，能把整个互联网全部覆盖了。我们需要和其他营销方式进行结合，结合起来才能产生最大价值。就像社会人不可能是万能的，你要吃饭，穿衣服，你不能自己生产粮食，自己做衣服，都是靠协作的。

最后一个是用户数据，很宝贵的财富。我实际观察的过程中发现很多问题，你注册密码完了以后，最后跳出一个窗口你的用户名已经被使用，我们后面有机会和大家分享相关的这些内容。
用户数据，我们手里的用户数据就是我们的财富，如果某一天你做英文电子商务网站，你的用户在一万到十万之间，你后面开发的产品线完全可以基于这些用户来做，这是你现成的资源，同属于我公司旗下的其他产品，我可以发促销邮件，也是你的数据。你从数据可以分析出来怎么样提高转换率，这个用户买了什么，关注了什么内容，这种购买行为都可以从用户数据库中挖掘出来。

我就分享这么多，谢谢大家！

原文出自：http://www.dunsh.org/2009/10/29/lesishu/

各等级PR值对应的外链品质

Bruce — Wed, 16 Sep 2009 07:11:16 +0000

虽说PR现在已经基本沦为面子和点缀，但是聊胜于无。为满足那些迫切希望PR得到提升的站长欲望，下表诞生了。不要问我哪里弄来的，反正按照这个上面的标准去找外链，在一个PR更新周期以内是绝对可以达到既定目标的。因为这些节点值的设定基本上是大于实际PR变更值的（个人经验）。

虽然没有人知道具体的pagerank变更节点值，但是以下表格给出了一个还算确切的模糊界定。大概需要多少、什么等级的外部链接才可以达到你所期望的PR值。

这个表怎么看呢：举个例子，2.800.000个PR=1的网站提供的外链可以帮助你达到PR=8；1个PR=10的网站提供的外链可以帮助你PR=8。剩下的你们就自己去比较吧。
<table border=”1″ cellspacing=”0″ cellpadding=”2″ width=”586″>

PR Links For PR3 Links For
PR4 Links For
PR5 Links For
PR6 Links For
PR7 Links For
PR8 1 555 3.000 17.000 93.000 508.000 2 .800.000 2 101 555 3.000 17.000 93.000 508.000 3 19 101 555 3.000 17.000 93.000 4 4 19 101 555 3.000 17.000 5 1 4 19 101 555 3.000 6 1 1 4 19 101 555 7 1 1 1 4 19 101 8 1 1 1 1 4 19 9 1 1 1 1 1 4 10 1 1 1 1 1 1

聆听中文搜索营销最前沿的声音

Bruce — Sat, 29 Aug 2009 06:49:28 +0000

在北京沉寂两年，点石再次出招，将与9月20日举行点石北京茶话会。在我个人来看，点石这次茶话会，厚积薄发，再一次履行点石的使命：“聆听中文SEM界最具前沿的声音、传递健康规范的SEO理念和技术”。

06年点石的成立和点石茶话会的开启，对于中国SEO的理念的传播，拥有无可争辩的里程碑式的意义，打开了中国SEO行业交流一扇门，让业界重新认识了SEO和其巨大的价值。中国SEO从最早的萌芽，04~05的疯狂，06，07，08的普及，到现在，点石旗帜鲜明所倡导的观点，已经成为了行业主流，SEO也逐渐赢得了搜索引擎和业界的尊重和认可，至今这些观点早已经深入人心。

而时间推移到了09年，中国的SEO在获得巨大发展的同时，也遇到了很多新的挑战和瓶颈：

1.来自搜索引擎的变化和挑战，比如搜索引擎整合搜索概念的提出，百度式的阿拉丁计划、框计算概念、凤巢系统、谷歌云计算、WAP搜索的逐渐火爆，这些变化，对于SEO产生了重要的影响。比如百度有啊的一系列动作，对于电子商务类站点的SEO和搜索营销就产生巨大压力。

2.来自从业人员发展的挑战，越来越多好的SEO所从事的工作跟早期的SEO已经天翻地覆。SEO的两极分化极其严重，一种还在做排名服务或作垃圾站，仍然只为中小站提高排名服务，而另一种逐步上升到负责大公司的产品、营运。几乎绝大多数一线站点，现在都有自己的SEO团队，对他们的考核也越来越与公司的整体战略目标挂钩，很多早已经超出了仅对流量或排名负责的概念。也有不少的SEO，都直接开始创业，或者营运自己的项目来实现价值。

3.SEO项目执行理念的改变。SEO前些年，大家都更多认为是一门技术，所有的文章、会议探讨更多的都是具体的技术细节。诸如如何规范url,如何找关键词，如何该标题，做链接等。而现在，由于这些基本观念和规范的大规模普及，这些手段早已经不是什么秘密，也谈不上技术含量。而SEO项目的成功与失败，跟整个项目的管理和推进能力，跟企业的执行力越来越相关。以目前市面上很多大型网站聘请的SEO外部顾问或方案效果来看，失败率几乎90%以上，甚至毫不夸张地说，对于很多站点，目前中国的SEO顾问机构现在的操作模式，都根本解决不了他们的根本问题，根本无法做到使得这个企业的搜索引擎优化和营销竞争力有本质提高。

4.搜索引擎营销和网络营销理念的变化。早期SEO都强调免费，事实到现在，SEO也是有成本的。好的公司,在SEO项目都会有明确的人员预算，成本预算和带来的价值评估，而且也不仅仅强调自然流量的获取，更强调SEO和SEM的结合与互补。越来越多的SEO本身，为了提升站点的流量，也不仅仅盯着搜索结果，连百度的贴吧、百度、知道等产品，也成为了他们关注和营销的战场。甚至很多SEO公司，干脆通过帮客户在分类信息站点发帖，挂客户电话来帮助用户提升效果。

5.SEO本身工作对于从业人员的能力要求变化。现在SEO越来越多跟产品、营运融合，SEO不单要对自然排名了解，对于竞价的使用，利弊要轻车熟路，还要研究落地页面的体验和转化率，学会分析各种统计数据。善于通过搜索引擎的各种数据，分析网民的行为，为产品的设计提高方向。SEO人员的沟通能力和执行力，也有一定的要求，不然在介入一个项目的时候，如果不能跟原有的技术产品团队结合，是不可能取得好的效果的。

6.搜索优化的深入人心。刚才提到，大部分一线互联网公司，现在都有自己的SEO/SEM团队；现在越来越多的产品经理，网络编辑在自己的简历里强调自己对SEO的了解；越来越多的创业老板，创业之初就物色好的SE O人员，甚至一些投资商，都关注一些模式对SEO的依赖程度和风险。而几乎所有的网站建设公司和自助建站平台，都免不了强调自己的网站对搜索引擎友好。这跟几年前比，简直是天翻地覆。

正是基于上面这些变化，关于具体SEO技术层面的操作渐渐沉寂，而新一轮SEO的趋势逐渐从水下浮出台面。所以本次点石大会我们会对整个行业过去与现在的对比情况作一个分析，会对现在遇到的问题一一探讨。通过具体在不同领域的操作实例，来阐述目前SEO新的动态和方向。

这不是一次商业的活动或作秀，也不是一次形而上的理论探讨，而是来自第一线的经验总结。我们这次的演讲团队，几乎全部来自国内一线网站核心骨干，拥有的经验至少都四年以上，相信这次务实的经验分享和探讨，会对大家有所帮助。我们提出的一系列新的观点，希望能引起整个中文SEO和相关从业者的思考。

所以，金秋九月，请相约点石茶话会，聆听中文搜索营销最前沿的声音，体验最具草根精神的搜索Party。

首发：http://www.dunsh.org/2009/08/28/dunsh-2009/

自我安慰到什么时候

Bruce — Fri, 28 Aug 2009 05:53:20 +0000

有人形容七月份是百度的一次重大地震，受伤的是天下站长。很多长期稳定第一的站，都莫名掉到了第二页，顶上去的是一些门户的多级页面。有些页面甚至快照都是08年的。

门户笑了，站长哭了。本来门户一些不地道的关键字SEO就让站长很是头疼，现在百度搞出这么一手，使站长处境更加尴尬。

抱怨的帖子太多了。我还是那个观点，抱怨没有用。无论这是百度算法调整的过渡期与否，日子还是要过。熬不下去，那就转行。毕竟有饭吃才是硬道理。

七月份那会，还不以为然，一直感觉这是百度算法的过渡期。在不久的将来，肯定还会发生一次大变动。这个变动持续了一个多月，直到今日八月底还是没有到来。

有站长分析说，是因为暑假，学生搜索的多，百度担心学生搜索到太多“不务正业”的页面。而门户比较规范，向来对信息的发布监控力度强。不管信息质量如何，起码不会存在低俗很黄很暴力的信息。假期过后还会调整回去。

这一点我是不赞成的。首先，假期学生搜索的多不多，是否比平时多很多，这个没有专业的数据证明。我的印象里，上学期间上网的人未必比假期少多少。百度也不会基于这个原因，而特地调整规则，这个理由太牵强。其次，那些门户的信息都是过时的，且质量也不高，一些关键字排名靠前的门户页面，甚至只是标题出现了关键字，内容并非围绕关键字展开，这些不符合用户体验度。毕竟搜索引擎的使命是提供最有效，最能满足网民需求的信息资讯。长期不更新的信息页面，又如何能够满足网民的需求，又如何可以长期霸占搜索前沿位置。这种过时、N级的页面理应被淘汰。

有站长说道，百度在运量一次大规模算法转型。转型的出发点在于尽可能抵制站长们为了流量制造低质量的信息，然后通过SEO获得排名的现象。抱着宁可错杀一百的态度。然后坚信门户页面还是会掉，质量高的站排名还是会恢复。只是需要等待。

这点我赞成。疯狂的黑链，疯狂的采集已经引起百度的注意与不满。它理应做出调整来应对这些现象。调整的过程就是先让门户信息页面上，然后通过时间再让那些有价值的站排名慢慢上去。这就是洗礼。有质量有价值的站终究是会通过这种洗礼，慢慢凸显出来，恢复自己理应得到的排名。经得起考验的网站，最终还是会活下来。而那些垃圾站，就可能没那么走运了。

这段时间，变化无数。经常一个站的快照日期忽上忽下。给SEO学者与实验者多蒙了一层阴影。这个时候，运气成了主导因素。没有人能有十足的把握说自己做的哪个字哪个站一定会在什么时候达到什么样的效果。起码我所结识的几个国内顶尖高手也是这么认为。只是大家都比较乐观。

之前接一个单子，分析完关键字竞争热度，掂量下自己手中的资源，就差不多会有个底，预计多长时间就能排名上去。而这种预计一般都是十不离八九。现在多了份运气指数分。

从做的记录来看。很多商业性质的关键字都被百度人工干预了。特别是购物类关键字。购物类网站也遭到了排挤。有人说这是百度为了提高竞价人数与收入。如果真是这样，那就只能考虑放弃商城，而改做资讯站。

笔者追踪的一些关键字记录也表明一个现象：排名里，头两名依然是独立站点，从第三名起都是门户页面。直到第二页开始恢复独立站。这说明，条件还不是那么恶劣。只是竞争加大了。我们要做某个关键字，要么目标就冲着第一第二去，要么就只能排第二页。这就比较极端。也就是说，就算你的站点实力第三，那么不好意思，排第二页去。

门户的权重又被提升。这应该是此次算法调整最直接得表现。聪明的人大可去充分利用这点来给自己做资源。很多灰色关键字的排名排前面的都是门户信息页面。让那些聪明的发帖者尝到了不少甜头。这个时候，认真做好一个门户页面，比做好一个网站来得管用而直接。

笔者手头的一些站点，有几个陆续得到了恢复。直接恢复第一，恢复中间排名的比较少。要么第一第二，要么就没恢复。这种现象值得记录与讨论。

七八月里百度的这些破事。仍然坚信在不久的将来势必会再次发生大的变动。此时的现象不会是长久的。无论怎样的结果，都不灰心不抱怨不放弃。

首发地址：http://www.dugutianjiao.com/post/youbingshenyin.html

信不信由你

Bruce — Sat, 22 Aug 2009 07:55:17 +0000

我是如何靠SEO月入5万的？

SEO 界没几个人不认识丘仕达，很多把他当大师级的人物来恭维。或许正是因为他的乐于分享，使得大家对他深爱有加。其实他并不是一个SEO高手，我觉得他只是一个懂得利用SEO来赚钱的人。

08年初的时候，我便开始寻找产品，通过优化自己在网上卖，一开始我在阿里巴巴找，然后去百度企业推广那里看点击费是多少（越多说明产品越好赚）然后找到好的产品以后，找了一本本地黄页，看看有没这样的生产企业，结果一段时间的搜索，我确定了两个产品。一个是做变频电源，和激光功率计，大家可以去百度搜索一下，自然排名第一的都是我的网站。然后我就找到了厂商合作，我发现他们的产品都是暴利，最终利润给到我百分之30到40不等，一般情况下，这两种产品在网上都是卖10000.只有我才卖8000左右，生意不好才怪。

过年到现在客户不断的找到我，成交率不算高，主要是为的产品的专业知识不够，使得客户很难接受，但是我的价格便宜啊！哈哈，写贴的今天刚好做了一笔生意，卖了6太变频电源，赚了1万多。当然我还有做其他的平台，只是不能把老底都给爆出来，所以就不说了！我说的其实只是技巧，更多的思路需要大家自己去摸索，SEOER赚钱相当简单，不是我站着说话不腰疼，是我发现我每做一个东西都是赚钱的，所以我认为SEOER赚钱很简单，前面我发了一个GGAD日入180多刀的截图，我连英语哈老都不会写，但是我可以通过谷歌翻译啊。

还有我做了一个导航站，别人都是靠口碑宣传，（这年代网址站多如牛毛，靠口碑是很难做起来的）但是我的是靠关键词，超级热门的关键词，虽然跟我的网站不相关，随时可能被K，但是百度偏偏不K，我总是郁闷。现在IP一天也过6万咯，回头率是百分之8.呵呵～写文章我没水平，大家别丢鸡蛋。毕竟俺初二都没读完啊！以上是我的一些经验分享，希望能够得到版主的加分，让我更有信心下次再写点让别人掉眼珠子的文章出来。

如果我说我一个月赚5万，肯定有人说我是疯子。因为这些人他们没尝试过一个月赚5万的甜头，所以他们会这样认为。于是我前些日子把一天赚180多美金的截图发上来，然后再写了一个贴，关于我是如何再网上卖产品的贴。今天我再曝光一点内幕消息，不为别的，只希望我的坦然能够给大家带来更多的信心，不要再迷茫了。

08年刚过年不久，我就急着打算盘。找厂家，谈合作，很多人都说找产品很难。我就纳闷，为什么我每找一样产品都能做起来？你们却说难？难道我是神仙？

之前写了两个产品，一个是变频电源（百度第一）一个是激光功率计（百度第一）现在我要说说我的铁床（百度第一，是自然排名不是竞价，要我给钱给百度，还不如叫我去死。我指的铁床是宿舍员工住的铁床）元旦过后我朋友跟我说，现在每个城市都有许多新开公司，许多新厂，那么就意味着他们要安排宿舍，要买铁床，这就是市场。大家想想，如果你现在要买铁床你会怎么找厂家？无非就是一本黄页或者互联网呗！

可问题是很多2级城市的黄页都没这些厂家名单，有需求的人和做铁床的人几乎隔绝，这个时候我们做SEO的就是他们的桥梁。赚一点点回扣，记住！可别看这点小小的利润，后面我说的会吓死你。首先我注册了一个域名。我的想法是，如果铁床生意不好做，大不了改版，到时候做一个关于NBA的垃圾站呵呵～至少我的域名已经被收录了。然后是到百度搜索一下铁床，找到一个看上去还行的网站，用整站下载器把它下载下来，图片一改，联系方式公司名字一改。

ok，开始添加链接，不用半个月百度收录了，马上搜索惠州铁床的时候我的是排第一，一开始没什么生意，继续优化，再一个月后，铁床这个词已经出现在百度的第一了。没办法，链接这种最没技术的活我还是很拿手的，GG的排名也上去了。

接下来的日子就是排名的去了解关于铁床的知识，（读书的时候很少考及格，但是如果学这些东西的进步让我自己打分的话，我打自己95分，没办法。为了钱，我忍了。后来陆陆续续的全国的一些电话就进来了，不过我说明一点，铁床这东西价格很透明，如果是外省的来买，一般都不能做成，运费很贵。所以我基本上是只做广东地区的，做了很多单小单，每次就几百张。很多次有人要几万还有一些做出口的贸易公司打电话跟我说要10万台（每个月）当时我就暗自兴奋，要是做成一单的话，我估计就不会再这里发帖了。总体的过程就是这样，铁床的成交率不是很高，但是我所遇到的竞争很少，偶尔可以成交一单，我都会拿出来潇洒掉，把这些很多人认为是祖宗秘诀的东西说出来，只是告诉大家，不要觉得找产品是一件很难的事情，只要百度竞价多的，点击费贵的我觉得都可以做。前提是你会点优化技术。

思考题：

- 你如何与厂商确认用户成交？

- 如何规避厂商和买家直接联系后抛弃我们，或者承诺的回扣不兑现？

- 跟踪用户是否成交及成交金额可能需要一定的时间成本普通可能seoer做不到。

Robots.txt

Bruce — Fri, 14 Aug 2009 08:15:08 +0000

什么是robots.txt？

robots.txt是一个纯文本文件，在这个文件中网站管理者可以声明该网站中不想被robots访问的部分，或者指定搜索引擎只收录指定的内容。

robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。Robots.txt文件告诉蜘蛛程序在服务器上什么文件是可以被查看的。

当一个搜索蜘蛛访问一个站点时，它会首先检查该站点根目录下是否存在robots.txt，如果存在，搜索机器人就会按照该文件中的内容来确定访问的范围；如果该文件不存在，所有的搜索蜘蛛将能够访问网站上所有没有被口令保护的页面。

robots.txt必须放置在一个站点的根目录下，而且文件名必须全部小写。

语法：

最简单的 robots.txt 文件使用两条规则：

User-Agent: 适用下列规则的漫游器

Disallow: 要拦截的网页

robots.txt使用误区

误区一：我的网站上的所有文件都需要蜘蛛抓取，那我就没必要在添加robots.txt文件了。反正如果该文件不存在，所有的搜索蜘蛛将默认能够访问网站上所有没有被口令保护的页面。

每当用户试图访问某个不存在的URL时，服务器都会在日志中记录404错误（无法找到文件）。每当搜索蜘蛛来寻找并不存在的robots.txt文件时，服务器也将在日志中记录一条404错误，所以你应该做网站中添加一个robots.txt。

误区二：在robots.txt文件中设置所有的文件都可以被搜索蜘蛛抓取，这样可以增加网站的收录率。

网站中的程序脚本、样式表等文件即使被蜘蛛收录，也不会增加网站的收录率，还只会浪费服务器资源。因此必须在robots.txt文件里设置不要让搜索蜘蛛索引这些文件。

网站管理员必须使蜘蛛程序远离某些服务器上的目录——保证服务器性能。比如：大多数网站服务器都有程序储存在“cgi-bin”目录下，因此在 robots.txt文件中加入“Disallow: /cgi-bin”是个好主意，这样能够避免将所有程序文件被蜘蛛索引，可以节省服务器资源。一般网站中不需要蜘蛛抓取的文件有：后台管理文件、程序脚本、附件、数据库文件、编码文件、样式表文件、模板文件、导航图片和背景图片等等。

下面是VeryCMS里的robots.txt文件：

User-agent: *

Disallow: /admin/ 后台管理文件

Disallow: /require/ 程序文件

Disallow: /attachment/ 附件

Disallow: /images/ 图片

Disallow: /data/ 数据库文件

Disallow: /template/ 模板文件

Disallow: /css/ 样式表文件

Disallow: /lang/ 编码文件

Disallow: /script/ 脚本文件

误区三：搜索蜘蛛抓取网页太浪费服务器资源，在robots.txt文件设置所有的搜索蜘蛛都不能抓取全部的网页。

如果这样的话，会导致整个网站不能被搜索引擎收录。

robots.txt使用范例:

1、如果你的网站是动态网页，并且你为这些动态网页创建了静态副本，以供搜索蜘蛛更容易抓取。那么你需要在robots.txt文件里设置避免动态网页被蜘蛛索引，以保证这些网页不会被视为含重复内容。

2、合理使用robots.txt文件还能避免访问时出错。比如，不能让搜索者直接进入购物车页面。因为没有理由使购物车被收录，所以你可以在robots.txt文件里设置来阻止搜索者直接进入购物车页面。

3、robots.txt文件里还可以直接包括在sitemap文件的链接。就像这样：

Sitemap: sitemap.xml

目前对此表示支持的搜索引擎公司有Google, Yahoo, Ask and MSN。而中文搜索引擎公司，显然不在这个圈子内。这样做的好处就是，站长不用到每个搜索引擎的站长工具或者相似的站长部分，去提交自己的sitemap文件，搜索引擎的蜘蛛自己就会抓取robots.txt文件，读取其中的sitemap路径，接着抓取其中相链接的网页。

4、允许所有的robot访问

User-agent: *
Disallow:

或者也可以建一个空文件 “/robots.txt” file

禁止所有搜索引擎访问网站的任何部分

User-agent: *
Disallow: /

禁止所有搜索引擎访问网站的几个部分（下例中的01、02、03目录）

User-agent: *
Disallow: /01/
Disallow: /02/
Disallow: /03/

禁止某个搜索引擎的访问（下例中的BadBot）

User-agent: BadBot
Disallow: /

只允许某个搜索引擎的访问（下例中的Crawler）

User-agent: Crawler
Disallow:

User-agent: *
Disallow: /

另外，我觉得有必要进行拓展说明，对robots meta进行一些介绍：

Robots META标签则主要是针对一个个具体的页面。和其他的META标签（如使用的语言、页面的描述、关键词等）一样，Robots META标签也是放在页面的＜head＞＜/head＞中，专门用来告诉搜索引擎ROBOTS如何抓取该页的内容。

Robots META标签的写法：

Robots META标签中没有大小写之分，name=”Robots”表示所有的搜索引擎，可以针对某个具体搜索引擎写为name=”BaiduSpider”。 content部分有四个指令选项：index、noindex、follow、nofollow，指令间以“,”分隔。

INDEX 指令告诉搜索机器人抓取该页面；

FOLLOW 指令表示搜索机器人可以沿着该页面上的链接继续抓取下去；

Robots Meta标签的缺省值是INDEX和FOLLOW，只有inktomi除外，对于它，缺省值是INDEX,NOFOLLOW。

这样，一共有四种组合：

＜META NAME=”ROBOTS” CONTENT=”INDEX,FOLLOW”＞
＜META NAME=”ROBOTS” CONTENT=”NOINDEX,FOLLOW”＞
＜META NAME=”ROBOTS” CONTENT=”INDEX,NOFOLLOW”＞
＜META NAME=”ROBOTS” CONTENT=”NOINDEX,NOFOLLOW”＞

其中

＜META NAME=”ROBOTS” CONTENT=”INDEX,FOLLOW”＞可以写成＜META NAME=”ROBOTS” CONTENT=”ALL”＞；

＜META NAME=”ROBOTS” CONTENT=”NOINDEX,NOFOLLOW”＞可以写成＜META NAME=”ROBOTS” CONTENT=”NONE”＞

目前看来，绝大多数的搜索引擎机器人都遵守robots.txt的规则，而对于Robots META标签，目前支持的并不多，但是正在逐渐增加，如著名搜索引擎GOOGLE就完全支持，而且GOOGLE还增加了一个指令“archive”，可以限制GOOGLE是否保留网页快照。例如：

＜META NAME=”googlebot” CONTENT=”index,follow,noarchive”＞

表示抓取该站点中页面并沿着页面中链接抓取，但是不在GOOLGE上保留该页面的网页快照。

Bruce » Seo

百度站长俱乐部答问录

Related Posts

Recent Comments

谷歌Ad Sitelinks效果良好

Related Posts

Recent Comments

内容重复—SEM大忌

Related Posts

Recent Comments

用好TAG事半功倍

Related Posts

Recent Comments

SEO民工

Related Posts

Recent Comments

各等级PR值对应的外链品质

Related Posts

Recent Comments

聆听中文搜索营销最前沿的声音

Related Posts

Recent Comments

自我安慰到什么时候

Related Posts

Recent Comments

信不信由你

Related Posts

Recent Comments

Robots.txt

Related Posts

Recent Comments