搜索引擎如何抓取网页

1.搜索引擎如何爬取。（按什么规则，怎样爬取） 2.物理及链接结构 3.URL静态化 4.绝对路径和相对路径 5.内链的权重分配及网站地图 6.避免蜘蛛陷阱 链接结构 网络结构的第二个结构形式：链接结构也称为逻辑结构，也就是有网站内部链接形成的链接的网络图。 比较合理的链接结构通常是树形结构 关键词选择 1. 使用百度推广助手中关键词工具进行选择适合推广的词； 2. 做调查来选取关键词； 3. 通过查看统计日志来选取关键词； 4. 长尾关键词 ； 5. 将关键词进行多重排列组合； 6. 尽量不要使用行业通用词； 7. 擅于利用地理位置； 8. 确定关键词的价值； 9. 长尾词的选择； 10. 关键词的时效性； 11. 分析竞争对手； 12. 有些词是从百度的相关搜索中过来的，而非用户搜索的关键词。