网站结构对于搜索引擎三点比较重要

（1）蜘蛛能够快速的找到目标网页

能够让蜘蛛找到我们的首页，我们就需要在外部有我们的链接，然后蜘蛛顺着首页里面的链接逐渐抓去内容页面，让蜘蛛沿首页内部链接抓取更深层内容页，能很轻松的对网站内容进行遍历抓取。

（2）能够更快的抓取网页中的内容

内容的页面要符合搜索引擎的抓取条件，被搜索引擎蜘蛛发现的URL必须可以被抓取，尽量减少空UR，避免蜘蛛陷阱。

（3）能提取有价值信息

网站内容要有价值就要做到不抄袭，提高文章质量，（蜘蛛会更喜欢）搜索引擎能从已抓取的页面中提取有价值内容。