400-077-787913998539835
当前位置:首页 > 新闻资讯 > 全网营销

WordPress SEO 之 Robots.txt优化篇

发表日期:2019-12-09文章编辑:大连网建科技浏览次数: 标签:

由于链接的的指向,而导致网站内容重复,一直是网站SEO的大忌。不同的链接指向同一个网页,就会被搜索引擎判定为作弊。昨天提到的Wordpress重定向插件,在一定意义上也是为了阻止重复内容。然而,由于Wordpress的结构原因,往往就会发生网页内容重复的状况。例如:http://www.domain.com/archive/1 和 http://www.domain.com/archive/1/feed两个网址下的内容就是一样的,所以,我们就必须想办法阻止这样的情况发生。

通常,解决重复内容的方法有:使用noindex标签,利用excerpt实现内容摘要,以及配置robots.txt。今天就主要说说在Wordpress下使用robots.txt文件。

robots.txt文件就像一个网站的大门,它会告诉搜索引擎的蜘蛛,可以抓取哪里的网页内容,哪里的不能抓取。因此,配置好robots.txt文件,完全可以理想的组织blog内容重复的问题。robots.txt的具体文法和使用方法,可以参考robotstxt.org。在国内,此类的Wordpress robots.txt比较流行:

User-agent: *

Disallow: /wp-

Disallow: /feed/

Disallow: /comments/feed

Disallow: /trackback/

Disallow: /?s=

刚才看到 filination.com上面提到的一个robots文件,并且提供了简短的解释。刚刚接触robots.txt文件的朋友,可以参考一下:

User-agent: Googlebot

# Disallow all directories and files within

Disallow: /cgi-bin/

Disallow: /wp-admin/

Disallow: /wp-includes/

# Disallow all files ending with these extensions

Disallow: /*.php$

Disallow: /*.js$

Disallow: /*.inc$

Disallow: /*.css$

# Disallow parsing inpidual post feeds, categories and trackbacks..

Disallow: */trackback/

Disallow: */feed/

Disallow: /category/*

Robots.txt因人而异,不同的人对robots有不同的理解,在加上SEO一直是一个热门话题,所以Wordpress的robots文件不会是唯一的,也不会有一个最好的。大家要是有觉得更好的,不妨分享一下。

如没特殊注明,文章均为网建科技原创,转载请注明来自http://www.dlwjkj.com
相关新闻

Google补充材料没消失,内链优化很重要

8月1日,google取消了搜索结果中“补充材料”的显示,google中文管理员博客发表了“补充材料转为主流...

日期:2019-12-19

淘宝店铺如何做到精准的运营推广

一、淘宝产品的准备众所周知开网店容易,如何经营网店才是难题。而产品绝定了网店是否能够生存并且...

日期:2019-12-19

付费链接是与非

近一两个月,一个关于Google的话题炒的沸沸扬扬,也就是付费链接的问题。Matt Cutts在他自己的博客里...

日期:2019-12-19

小游戏网站的推广心得

小游戏的热门程度吸引了很多个人站长的加入, 我也是其中之一。我一直认为小游戏网站是精力不多的...

日期:2019-12-18

不看不知道的SEO诀窍

SEO(搜索引擎优化)是为网站带来流量的一个非常重要的方法,所以掌握有关提高搜索引擎排名的诀窍是非...

日期:2019-12-18

解析百度的绿萝算法怎样识别买卖链接

作为站长,大家都知道,百度于2013年2月20日推出了最新的搜索引擎算法,起名叫绿萝,公告称这个新算法主...

日期:2019-12-18

百度的800VS迅雷的4000,新的SEO讨论!

写这篇文章之前,先来看看我的站点[西盟网络:www.zmke.com]的统计,这是2008年3月20日10点钟我的截图...

日期:2019-12-17

创造有效外部链接的手法

有效的外部链接对与 google很重要 baidu也有一定的权值 下面是几点有效外部链接的创造手法1.一个...

日期:2019-12-17

盘点网站优化中经常会遇到的问题

对于创业者或者小企业来说,网站优化是非常重要的,因为这是达到推广目的的最便宜手段,而且效果不错,网...

日期:2019-12-17

SEO很容易?

做好SEO与成功运营有大段距离前几天点石的一个朋友发来一篇文章让我看。文章对中国的SEO及网络营...

日期:2019-12-16