今天学习Python爬虫的时候，对于某个的域名访问次数有点多，到最后导致整个公司ping这个域名都出现超时（一个科技资讯网站，我也是非恶意）。想了解是否我的访问被视为了DDOS攻击而被这个网站限制访问了？能否稍微介绍一下Python爬虫如何避免被视为DDOS攻击？
控制频率，使用代理
都是爬虫高手啊，借帖子问一下其他同仁，有遇到过加代理后和本地一样的都是403错误么，目标地址是HTTPS的。
urllib2.HTTPError: HTTP Error 403: Forbidden
类似于这个吗？
一般这种情况时，我会先到 VPS 上 ping 一下目标域名，看看是不是他家网站挂了……
如果他确实是把你的 IP 屏了，那你就挂 HTTP 代理去爬吧。HTTP 可以买，也可以到网上找免费的。