网站架构图怎么画?这些坑千万别踩!
1、频频改动
这一个非常容易犯,刚开始都是有一定规律的,可是不论如何都不要更改,如果常常改动,会造成蜘蛛每次抓取网站的时候都需要重新计算时间,这就相当于网站面临着“信任危机”,这一个时刻蜘蛛每次抓取网站,都需要重新计算时间,一旦蜘蛛爬行时间变短,抓取的就少,有大可可以在页面提取数据的时候,会发现自己从页面提取数据,所以不要轻易的改变,能不能轻易改变就看自己的想法了,不要让蜘蛛吃了闭门羹。
2、动态URL链接
动态链接做的多了,就意味着你想要给顾客展示的页面内容一定亦是动态的,动态URL做的一般比较少,动态URL做的是个静态页面,这样不但搜索引擎看起来会比较新鲜,也便于维护和改进,而动态URL亦是一个大忌,容易出现的错误就是同一个页面的URL链接不一样,导致蜘蛛误判,这样的话蜘蛛也就无法识别,而且动态的URL同样也会占用蜘蛛的大量资源,这样的话蜘蛛自然不会再去抓取你的网站,而是直接把你的网站放入“小黑屋”。
3、路径太长
路径的长短也非常重要,在robots里写了限制蜘蛛爬行的一些规则,就拿最简单的网站来说吧,搜索引擎蜘蛛是一个动态的程序,你的路径中,不管是哪个页面都需要写入和robots相同的规则,蜘蛛只能爬行robots.txt,否则蜘蛛爬行不顺畅,就会大大降低蜘蛛爬行效率,甚至将来在爬行的时候都会找不到路径,久而久之,蜘蛛就会在你网站上找不到其他路径,就很不利于蜘蛛的爬行,所以路径的长度是需要设置的,最好设定成1-3个。
4、站内太单一
5、内部结构混乱
网站优化中就会有一个内部优化的话题,而内部优化又是两个优化相关内容,而内部优化又是两个独立的,但是搜索引擎的排名规则,也有所不一样,比方受众体验方面,蜘蛛亦是动态的,不也许会把搜索引擎平台中的某个页面的权重给提高上去,所以我们在建设内部页面的时候,就要做出面包屑导航的设置,告诉蜘蛛这一个页面是什么内容,这样蜘蛛就会知道这一个页面是关于什么的。