码迷,mamicode.com
首页 > Web开发 > 详细

使用nginx 防止网站爬虫

时间:2016-09-26 21:55:56      阅读:208      评论:0      收藏:0      [点我收藏+]

标签:return   网站   china   

if ($http_user_agent ~* "qihoobot|Baiduspider|Googlebot|Googlebot-Mobile|Googlebot-Image|Mediapartners-Google|Adsbot-Google|Feedfetcher-Google|Yahoo! Slurp|Yahoo! Slurp China|YoudaoBot|Sosospider|Sogou spider|Sogou web spider|MSNBot|ia_archiver|Tomato Bot”)  {

return 403;

        }


本文出自 “12103362” 博客,谢绝转载!

使用nginx 防止网站爬虫

标签:return   网站   china   

原文地址:http://12113362.blog.51cto.com/12103362/1856717

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!