不要让搜索引擎收录你网站上重复标题的网页

什么是重复标题网页?
有些网站上刊登的文章很长于是采用分页模式。比如一片文章“我的SEO从业经历”很长,需要分页。第一页的标题是“我的SEO从业经历”,第二页的标题还是“我的SEO从业经历”,虽然内容是紧接着第一页的,但是标题一样,很容易被搜索引擎当作重复网页来对待,那么就有一页会被排除在搜索结果中了。即使不被排除,搜索引擎对这样同一网站中相同标题的网页采取降权措施也是很常见的。如果你的网站中这样分页的文章多了起来,那么相应地搜索引擎排除你网站中网页或者降权处理的网页也就多了起来,后果可想而知。
解决方法:
1、修改标题。
如果标题不一样了,内容本来就不一样,那么就不会被搜索引擎认为或者误认为是重复的网页了。
2、使用robots.txt禁止抓取这样的重复网页。
一般来讲这样的分页在网站中使用的都是文件名后面加分页页数的格式。如congyejingli.html是第一页,congyejingli_2.html是第二页。那么在robots.txt中写上以下代码可以禁止搜索引擎抓取第二页以及以后的的第三页甚至更多:
User-agent: *
Disallow: /*_*.html(.html后缀根据你网页使用的后缀而定)
3、如果已经被收录了,并且被搜索引擎采取了降权处理。那么需要主动要求搜索引擎删除以上网页。具体操作方法需要登录Google网站管理员工具。