咱们知道了网站想要有排行，第一步就是有必要可以被蜘蛛抓取到。那么那些因素有也许造成蜘蛛无法正常抓取咱们网页呢，咱们应该留意几个关键，下面，南京SEO优化公司就给大家介绍一下。

　　(1)网址不能过长：百度建议网址的长度不要超过256个字节(一个英文字母(不分大小写))占一个字节的空间，一个中文汉字占两个字节的空间)。

　　(2)网址中不要包括中文：百度关于中文网址的抓取效果都是比较差的，所以在网址内千万不要带有中文。

　　(3)服务器问题：如果你的服务器质量太差，老是打不开，那么也会影响蜘蛛的抓取效果。

　　(4)Robots.txt屏蔽：有的SEO人员由于忽略。在Robots.txt文件里面屏蔽了想要被百度抓取的路径或许页面。这也会影响到百度关于咱们网站的抓取效果。

　　(5)避免出现蜘蛛难以解析的字符，比如/abc/123456;;;;;;;%B9&CE%EDDS$GHWF%.html这种URL蜘蛛无法理解会抛弃抓取。

　　(6)留意动态参数不要太多太复杂，目前百度对动态URL已经有了极好的处理，可是参数过多且复杂的url有也许被蜘蛛认为不重要而抛弃。这点尤为重要，一定留意。