安徽SEO顾问

毛主席说过,实践出真知(也许他老人家也许没说过...不过这些不重要)重要的是本博将持续更新,持续分享。
网络营销优化QQ交流群:436867053

关于蜘蛛陷阱-万年历陷阱

     做博客的时候之前一直是robots屏蔽蜘蛛的,没有注意这些,这俩天放开后,也没注意,等我今天打开一看,嚯,好家伙都是谷歌蜘蛛,再仔细看,咋回事,我哪里有这些页面,再仔细看这不都是时间吗,蜘蛛爬进万年历里就爬不出来了,因为蜘蛛的爬行一直点击下一个链接的,而万年历是无限循环的,每次蜘蛛点击就产生新的链接从而无限死循环,导致蜘蛛爬不出去,蜘蛛的资源是有限的,从而导致网站的页面得不到有效的收录。

蜘蛛万年历陷阱.jpg

发表看法

额 本文暂时没人评论 来添加一个吧

Top