Category: SEO

搜索引擎优化。

  • 屏蔽百度爬虫的方法

    在百度C2C产品“百度有啊”即将上线的时候,淘宝网站曾经屏蔽百度搜索爬虫,禁止百度搜索引擎抓取淘宝网站的网页内容,淘宝官方的解释是“杜绝不良商家欺诈”。

     在技术层面,淘宝屏蔽百度的方法是,在网站的robots.txt文件中加上如下内容:

    User-agent: Baiduspider
    Disallow: /

      但实际上这种方法并不能完全屏蔽百度的爬虫,至今在百度上输入site:taobao.com还是可以看到内容,要不要索引网站,还是由百度说了算,要是遵守robots协议,那才不会索引,因此要想完全屏蔽百度的爬虫,需要在.htaccess中加入一些语句才可以,下面介绍两种方法。

      方法1:

    RewriteEngine on
    RewriteCond %{HTTP_USER_AGENT} ^Baiduspider [NC]
    RewriteRule .* – [F]

      方法2:

    SetEnvIfNoCase User-Agent “^Baiduspider” bad_bot

    Order Allow,Deny
    Allow from all
    Deny from env=bad_bot

      当然,对于普通中文网站来说,还是不建议屏蔽百度的爬虫,通常情况下做一些大型的英文网站,才有必要这么做,以节省流量。

  • 地方门户类网站优化总结

    最近在做一个地方房地产类网站的优化,下面简单总结一下近期的一些工作。

    网站背景:该网站为省会级城市电信局主办,网站有将近10年的历史,具有较丰富的地方背景和资源,但长期以来,用户数保持基本稳定,增长不快,在搜索引擎上的表现不佳。近期正逢网站改版,希望几次机会,提升网站在搜索引擎的排名。通过和网站主的沟通,下面是一些网站主关心的问题以及我提出的一些解决办法。

    一、网站标准化是否需要?

    近几年网站标准化的趋势不仅越来越强,而且已经成为某种象征和谈资,包括网站客户在内也多多少少听说过网站标准。因此最初网站主页提出过是否需要将整站进行网站标准化重构,通过分析我发现该网站的改版工作已渐近尾声,而且作为房地产网站,数据量庞大,原有页面书写较不规范,希望通过一次性的网站标准化,从项目管理的角度不太现实,而且也不是紧急程度最高的一个工作。因此为对方制定了一个框架性的标准化步骤,立足通过较少的修改渐进式对网站进行优化。

    二、网站优化顺序,新网站和旧网站的不同

    对于网站优化项目来说,我们首先要考虑的是网站是新网站还是旧网站,如果是一个新的网站,我们可以较为从容的从头开始规划网站优化的步骤和要点。而作为一个有近10年历史的老网站,我给的建议是从下至上的顺序开始优化。首先分析网站底层页面的现存问题,并提出改进意见,让客户随时进行调整,并且很快能够看到变化,同时不影响网站现有的运营,以此增强客户的信心。

    从页面上来说,主要是以下几方面:

    1. 修改关键词、描述
    2. 调整关键词密度
    3. 突出强调文章标题和关键词,合理使用标签
    4. 文章自动摘要处理
    5. 相关文章的链接
    6. 相关资讯的处理

    三、网站首页的优化

    完成内容页的调整,客户看到变化,有了初步的信心后,可以开始着手网站首页的优化。对于地方性门户网站来说,相应的PR都比较高,有较多优质的外链资源,但外链的布局并不合理。同时网站首页的文字内容缺乏通盘的考虑和优化,所以采取的主要措施是:

    1. 调整首页友情链接的数量,保留相关性网站,非相关性网站逐步分散到二级频道页。
    2. 调整网站首页的关键词和描述,使之更加人性化,可读性更强,改变关键词罗列的现象。
    3. 调整网站首页内容中关键词的频率,通过组合不同的关键词,合理的分散到首页各个位置。
    4. 合理使用强调性标签

    四、网站频道页的优化

    首页的调整效果可以从搜索引擎的抓取频率和结果上看出来,在完成首页的优化后,可以着手二级频道页的优化。很多地方性网站的首页PR很高,但二级频道页却相当低,或者没有。最主要的原因这些地方性网站的整体机构不够优良,很多老站经过多次改版,常年遗漏下的各种页面非常之多,导致内部链接混乱,很多死链和空链存在。

    对频道页的优化主要是改善网站的内部结构,加强网站内链。

    1. 包括频道页标题和描述
    2. 频道页当前位置链接
    3. 频道页重点关键词优化
    4. 返回底层页进行频道链接的优化

    五、网站权重的提高及长远方向

    经过上述几个步骤,基本上网站的页面方面优化完毕,从搜索引擎的收录也可以看出效果正在逐步显现,排名在提升。但对于整站来说,良好的排名还要靠整体权重的提高,这就涉及到网站的日常运营和优化了。包括网站内容的更新频率和质量,网站合作伙伴的拓展,网站活动的举行,网站的线上线下宣传的结合。更重要的还包括网站统计结果的分析及对市场营销的支持和转化,也就是说长远就要更多的从市场和销售的角度考虑网站的优化,而不仅仅是从技术的角度。