正在读取数据,页面载入中,请稍后...

屏蔽蜘蛛抓取站外链接,完美的支持动静态网站

想禁止搜索引擎蜘蛛爬取站外链接,使用meta标签、Robots协议、nofollow属性等,明显的都属于掩耳盗铃,蜘蛛根本不按套路出牌。所以,想真正的屏蔽、禁止、限制抓取外链,还得靠代码来实现,下面,小千个人博客把代码贴出来,希望能够帮到各位站长解决问题。

静态网站

该部分是专属区

登录后查看

该部分是专属区

静态网站,可以根据用户UA来源,解决根源问题,不使用href标签和onclick标签,即可完美的解决屏蔽蜘蛛抓取外链。

动态网站

该部分是专属区

登录后查看

该部分是专属区

动态网站也是一样,获取User Agent信息,然后判断是否是真蜘蛛,使用PHP内置exit()函数,停止继续执行程序,即可完美的解决屏蔽蜘蛛抓取外链。

代码作用

对站长来说,代码是万能的,循规蹈矩的做站,专治不按套路出牌的蜘蛛。
对蜘蛛来说,限制假的蜘蛛,不浪费抓取时间,把蜘蛛圈养起来才是赢家。
对用户来说,提高用户体验,节省服务器资源,大大的提高网站打开速度。
对服务器来说,降低服务器消耗,降低服务器资源,只有服务器稳定了,网站才能屹立不倒,排名才能扶摇直上。

本文结束

评论专区

发表评论

评论列表(无评论)