很多SEOer都把蜘蛛比作一个人,有它自己的喜好,有它自己的原则,你配合它的工作,它会给你收录足够多的东西,来网站也勤快,你不配合它,那就等着被降权吧。下面我就说说蜘蛛的一些喜好和原则。
1、蜘蛛来爬取网站的时间一般都差不多,一般每天2次,当然一些大型网站都不一样,我说的都是中小型网站,如果来了2次以上,说明你网站让蜘蛛喜欢,如果没有2次,抱歉,你该检讨下自己做站的方法了。根据蜘蛛来的时间,我们可以制定出网站更新内容的时间,在蜘蛛来之前,把内容更新好,对收录有很大的提升。像武汉众睿自己的优化网站也不例外,他们审核通过的软文不会立刻就放出来,而是统一在三个时间段来放,估计也是这个原因。
2、蜘蛛和人一样,在第一次来的时候,就会给蜘蛛留下比较深的印象,它会记着你网站是做什么的,记着你网站的标题,记着你的排版,如果你的这些做的让蜘蛛看不下去,那么你网站的首页收录时间可能要比平常人多1-2周,甚至更久,而且当它已经记下这些的时候,你不能随意更改,改动大了,结局你懂的,要改最好在蜘蛛没来过你网站之前就改好。
3、蜘蛛决定着网站的快照,在网站的不断爬取中不断的带走东西,说明网站的内容质量好,它以后就来的越勤快,那么网站的快照肯定也会更好,形成一个良好的循环,这也是成就高权重网站的一个基本要求。
4、随着搜索引擎的不断发展,就会淘汰旧信息,留下最新的信息,这也造就了蜘蛛的喜新厌旧,对于新鲜信息,总会乐此不疲的去抓取,如果你每天都给它喂食新鲜的信息,那么它就会爬的越欢,它越欢就不愁网站没发展了,所以原创很重要,是必须的,虽然原创很困难,尤其是每天原创,想想就让人头疼,但是为了收录,为了网站,我们必须这么做,。
5、人越多的地方,蜘蛛也越喜欢去,众人喜欢的地方,必有其可爱之处,这也造就了那么多高权重论坛的权重越来越高,尤其是一些视频网站,优酷、土豆、搜狐什么的,权重都满10了,就是由于每天点击观看的人数超多,点击量大和跳出率都很低的网站权重都很高。
6、蜘蛛最烦的应该就是那些服务器不稳定的网站,网站不稳定会导致蜘蛛在网站里面爬取的时候撞得头晕眼花,无法正常的去爬取内容,火大的时候,甚至直接回家,毛都不带走,可能回去就要告你状,降你权。
7、蜘蛛也会被人影响,人多的它喜欢,别人喜欢、推崇的它也会喜欢,就如友情链接,就比如书签。
8、还有很多蜘蛛都不喜欢的,像网站层次很多的、动态URL的、有大量JS代码的、有FLASH的、有跳转的、要登录才能浏览的