搜索引擎蜘蛛爬取网站抓取数据的准则

　　搜索引擎蜘蛛的抓取规则，如下四点提供参考：
 
　　1、搜索引擎蜘蛛要能看到链接文字
 
　　这个是搜索引擎蜘蛛爬行时能够检索到的文字，如果文字或链接是通过JavaScript调用，蜘蛛是检索不到的。页面的文字内容中主要内容位置越靠前越有利，例如产品名称放到页面越靠前的位置，对该页面产品关键词的排名越有利。
 
　　2、搜索引擎蜘蛛能爬行未经 nofollow处理过的链接
 
　　这一项列出的是搜索引擎蜘蛛能够检索到链接，蜘蛛能够通过这些链接访问网站其他页面，越靠前的链接，被蜘蛛爬行的几率就越大，被搜索引擎收录的可能性越高。
 
　　3、搜索引擎蜘蛛能发现图片链接并能阅读到这些图片所包含的含义
 
　　这里主要展示该页面被搜索引擎蜘蛛和国际W3C标准化监测器所检索到的图片，搜索引擎能够根据图片at="" 去判断该图片的类型，性质和主题，对于判断该图片链接的页面的主题有巨大帮助，能有效提高商品展示页的搜索引擎排名根据W3C标准，页面上所有图片都必须添加alt="" 图片注释，网站Logo使用网站名称加简短描述，商品图片使用商品名称，网页框架图片留空。
 
　　4、搜索引擎蜘蛛能很好地识别HTML代码
 
　　模拟搜索引擎蜘蛛爬行该页面时，获得的“最简化代码->是指过滤css， JavaScript后的代码”，由此可以看出减少代码空行，换行，空格等多余代码空间非常重要。