SEO初探之sitemap.xml写法

SEO初探之sitemap.xml写法

Sitemap.xml是一个网站的缩影,包含网站的内容地址,是根据网站的结构、框架、内容,生成的导航文件。本文主要讲解xml格式的网站地图相关内容和生成方法。...

阅读全文

SEO初探之robots.txt爬虫协议

SEO初探之robots.txt爬虫协议

当我们网站出现错误页面,或者某些页面不想让蜘蛛爬取时,合理的配置robots协议可以让蜘蛛更高效快捷的爬取到需要抓取的内容。当搜索引擎蜘蛛进入网站,首先查找网站根目录下是否存在robots.txt文件,若存在,则按照该文件的规范抓取内容;若不存在该文件,则按照默认的规则爬取网站中所有网页。因此,本文介绍一些robots语法和常用实例。...

阅读全文