写web爬虫数据收集数据时，经常会遇到“HTTPError403:Forbidden”提示，实际上这只是一个HTTP状态代码，表示正在请求资源文件，但在nginx上显示虽然不是技术上的错误，但也需要技术上的解决。
403需要返回状态代码的场景是什么？
1、网站禁止特定用户访问所有内容。 /网站切断某个ip访问。
2、访问禁止浏览目录。 示例：设置自动索引关闭后，访问目录。
3、用户访问只能通过内部网访问的文件
有几个场景需要返回这些常见的403Forbidden。
因此，为了返回403状态码防止爬行动物被困，需要立即更换不同的IP。 然后记录python使用代理数据收集的过程。
从网络爬虫的经验来看：
免费代理不太稳定，而且利用率太低，不隐蔽，安全性不高。 如果有大量、长时间的数据采集，还是花一点钱由IP代理提供，高效放心，代行IP操作方法。
1、进入软件-提取代理ip
2、生成APL链接打开链接生成白名单
3、进入个人中心-点击IP白名单-点击保存
4、ip地址生成-使用
爬行动物和攀岩已经战斗了很多年。 在网络时代，数据收集已成为技术主流，但大量的数据收集受到各种限制。 其中最常见的是IP限制，该如何解决代理IP也成为一大热点。 太阳HTTP代理提供高质量的代理定制服务，轻松战胜互联网时代。