爬虫代理搭建教程,python 爬虫 ip 代理池搭建方案

微软早已停止对IE浏览器的更新维护,但不少单位内网系统、老旧业务平台,依旧只能依靠IE打开。给IE配置代理本质就是修改系统层面网络参数,设置入口藏得比较深,操作本身并不复杂。

打开IE浏览器,右上角齿轮图标点开,选择Internet选项。找不到齿轮图标的话,可以打开控制面板操作,或者Win+R输入inetcpl.cpl直接调出设置窗口。弹窗上方有一排选项卡,切换到连接页面。这里分两种场景,使用拨号或者VPN连接,选中列表内对应连接,点击右侧设置;网线或者WiFi局域网环境,直接点击下方局域网设置,大部分场景属于后者。

爬虫代理搭建教程,python 爬虫 ip 代理池搭建方案

局域网设置窗口,上方是自动配置板块,中间区域为代理服务器。手动填写代理,勾选“为LAN使用代理服务器”。地址栏填写代理IP或者域名,端口栏填入对应数字。端口数值不能随意填写,以服务商提供信息为准。HTTP代理常用端口包含8080、3128、8888,SOCKS代理常用1080,IE该面板主要配置HTTP代理,SOCKS代理需要额外配置或者插件支持。地址端口填写完成,代理需要账号密码的情况下,访问网页时IE会弹出弹窗输入凭证。也可以在代理地址前面拼接“用户名:密码@”格式,但不推荐,密码会明文保存在注册表。

旁边高级按钮点开,能够单独为HTTP、HTTPS、FTP设置独立代理。常规场景不需要,勾选“对所有协议均使用相同的代理服务器”即可。下方例外地址输入框,填写不走代理的域名,企业OA、localhost、127.0.0.1都可以填入,多个地址用分号分隔。不填写例外列表,访问内网资源会经过代理转发,速度变慢甚至打不开页面。

全部设置完成,逐层点击确定关闭窗口。完全关闭IE再重新打开,残留进程会沿用旧配置,不会加载新参数。测试方式简单,打开查询IP的网页,确认页面展示IP切换为代理IP。网页无法访问,先检查地址端口有没有多余空格,确认代理节点正常。换电脑或者手机测试同一代理,其他设备也无法连通,故障属于代理服务端。取消代理,回到局域网设置页面,取消勾选“为LAN使用代理服务器”,保存确认。

需要注意,IE代理配置和Windows系统代理共用同一套参数,修改IE的设置,Chrome、旧版Edge以及很多桌面软件联网规则都会变动,这类程序读取WinINET配置。想要只给IE单独配置代理,没法做到完全隔离,需要使用PAC脚本或者第三方代理工具。PAC脚本属于另一种方案,局域网设置勾选使用自动配置脚本,填入脚本地址,适合域名分流这类复杂场景。手动代理和自动脚本不能同时开启,两者会产生冲突。

新版系统中IE入口被Edge接管,但Internet选项配置面板保留,运行inetcpl.cpl就能调出,设置逻辑没有改动。企业环境要求自动脚本配置,就不要手动填写代理地址,勾选自动配置脚本填入地址,避免两套设置冲突。

免责声明:本文提供的方法与建议仅供技术参考,实际部署效果受机房环境、运营商线路、系统配置等多重因素影响。请在专业人员指导下操作,因自行操作导致的业务损失本站不承担责任。

相关推荐