虽然有人希望网站被更多的搜索引擎收录,但世上也是存在那种不希望被某些搜索引擎收录的人,比如我。
我前几天才发现 360 蜘蛛几乎时时刻刻都在我的小博客上爬,但我不喜欢它(小博客就是任性),所以要想要屏蔽它。参考网上的方法,再自己思考,写了这么一篇小小的博文,但是不知道其中有没有什么错误或者需要修改的地方,希望各位 V 友帮忙指正。
- 方法一:robots.txt (可能有些蜘蛛不遵守)
- 方法二:屏蔽 IP。
- 方法三:屏蔽 UA。
地址:
https://www.hello1995.com/archives/forbidden_360spider.html