分享六个提高蜘蛛爬行的技巧

1：制作网站地图引导蜘蛛正确爬行
　　通过制作网站XML和HTML地图，可以帮助蜘蛛找到重点内容和快速的爬行。网站地图应该列出网站最重要的内容。并屏蔽不需要蜘蛛索引和收录的内容。如使用条款，隐私政策等页面。
　　2：增加页面的重要性
　　在首页放置直接访问链接，减少网站内容访问的层级，以增加页面的重要性。在内部链接和外部链接中增加重要页面的链接数量。避免使用在内部链接中使用nofollow标签链接到重要内容。
　　3：压缩网站页面减少页面大小
　　在不影响页面布局和内容的情况下最大限度的进行页面压缩。可以有效的增加网页打开速度，便于蜘蛛抓取索引。
　　4：页面重复内容
　　减少网站内部相同内容的网页。因为这个不仅不利于SEO优化，而且会因为蜘蛛爬行而浪费网站的宽带。相同内容的页面可以做301到一个完善的页面。
　　5：页面要素
　　页面中的展示给用户的内容，一般情况下应该包含在页面请求的HTML标签内。不应该使用IFRAMES、flash、ajax、javascript包含重点内容。因为搜索引擎蜘蛛不识别这些内容。
　　6：发现和检测
　　使用谷歌管理员工具和百度站长工具。进行网站SEO检测。可以有效的发现网站存在的问题。

做好以上六点，对百度蜘蛛爬取帮助很大，收录也很及时，对优化有很大帮助，希望大家做好充分准备