很多人都在使用wordpress做博客,好处和优点就不多说了,本博客也不例外。 由于前段时间,数据库丢失,所有文章都没有了,等于重新做博客了,刚才看了一下收录还是比较快的。 site了一下,虽然博客做了伪静态,但还是发现百度收录了动态页面,做SEO的都知道当有很多不同链接指向同一个页面时这是不好的,所以就要告诉百度蜘蛛不要抓取动态链接。 那怎样才能让百度不再收录动态页面呢? 对,利用robots.txt,简单介绍一下吧。 Robots.txt是放在网站根目录给搜索引擎看的一个文件,蜘蛛在访问你的网站时候,先看看有没…