python利用代理ip爬虫的时候遇到了“HTTP Error 403: Forbidden”的提醒，是哪里出现了错误?我们先来看看会有哪些场景是会出现这样的错误代码的。

1、网站禁止特定的用户访问所有内容，例：网站屏蔽某个ip访问。

2、用户访问只能被内网访问的文件。

3、访问禁止目录浏览的目录，例：设置autoindex off后访问目录。

以上几种常见的需要返回 403 Forbidden 的场景。

所以为了防止返回403状态码防止爬虫被封，我们要做到的是及时更换不同IP，下面记录一下python 使用代理爬取的过程，一起来看看代码部分：

大家在选择爬虫代理ip的时候，不要因为看着免费代理ip不用花钱，就用它来爬虫，其实免费代理很不太稳定，而且可用率太低，安全性不高。

如果是需要大量ip长时间爬取，靠谱的代理ip才是最好的选择。那么，如何物色好用的代理ip服务?

1、首先要看一下代理ip的数量，毕竟代理ip的数量其实跟质量也有一些关系，比如说如果在全国都有自己的自营服务器，那么就能够提供更多高质量的代理ip数量，这个时候想要做一些工作就会很方便，但是，现在网上也有很多免费的代理ip，虽然数量很多，但是也有一定的不安全性，一是代理ip获取途径不一定是正式途径，二是稳定性不好，使用过程中很容易出现问题。

2、代理ip的安全性和稳定性，网上的很多代理ip都是从网上直接扫描的，安全性和稳定性都没有保证。黑洞代理就不一样了，代理ip信息是跟专业的运营商合作沟通获得的，安全性和稳定性都有保证。

3、代理ip的更新速度要快，代理ip更新的速度快，我们的工作效率也会提升，比如说，如果我们需要使用代理ip抓取数据，更新快的代理ip能够让我们在相同的时间之内顺利的抓取采集更多有用的信息。

而且黑洞代理的套餐非常具有性价比，用户可以根据不同的数量来购买，不会造成浪费，合理使用ip代理服务。