首页 > 如何防止自己的网站直接被人curl抓走自己展示了?

如何防止自己的网站直接被人curl抓走自己展示了?

我使用这种方法把百度放到自己的域名下展示都不成问题,可是有方法避免么?


只要你的页面是公开的,就避免不了这个问题。


其实彻底防止被抓是做不到的,只能提高对方抓取的门槛,有时候搜索引擎的抓取也是有利的。如果真的要做防抓取,可以从很多方面去做,eg:图片防盗链,展示文本时通过一些算法,或者服务器端做一些限制等等。抓取与反抓取是一个博弈过程,嘻嘻嘻~~~


ajax动态加载可以防一些,不过也有办法。

不过私以为这没什么不妥吧.....别人curl了你的不代表软件著作权也被curl了,研究代码,作出稳定性高,用户体验好的网站才是一个工程师首要关注的


ip,访问频率,访问次数等。


还是要做一些限制的,节省带宽也是不错的,nginx设置防盗链


只要你能正常访问,都能模拟,这个没办法


这个没法避免 不过你可以判断一下他的refer防止抓取 然而这个也是有办法解决的、。。。不过你可以ip限制访问次数。。

【热门文章】
【热门文章】