优化网站之前，我们都会把网站调整一遍，来疏通下网站的结构能让蜘蛛顺利的爬取，但是有很多站长就不太清楚了，到底哪些问题会影响蜘蛛的抓取。

登录设置

有些网站会设置注册账号的服务，登录之后才能看到网站的内容，这种设置对于蜘蛛来说不友好，蜘蛛它也不会注册登录，自然就抓取不到了。

动态URL

所谓动态URL就是在链接中“?”同时以aspx、asp、jsp、perl、php、cgi为后缀的url，便是动态URL，动态URL的变动性较大，不如静态URL稳定，搜索引擎一般对动态URL不够信任，从而使很多动态URL的网页不能被收录。

使用Cookies

Cookies的作用是识别用户的身份，Cookies如果未开启，则无法进行访问，这样会导致蜘蛛无法访问，从而影响抓取。

网站跳转

有些网站打开之后就会自动跳转到其他的页面，跳转会增加网站加载的时间，不推荐大家这样做，只做301跳转就可以了，301跳转可以进行权重的集中，其他类型的调整不建议做。

Flash文件

有些网站设计一些Flash文件，为浏览用户带来很好的视觉效果，但可惜搜索引擎看不到，无法读取任何内容所以为了能体现网站优化的好效果，不提倡这种Flash做首页图片。