51Testing软件测试论坛

 找回密码
 (注-册)加入51Testing

QQ登录

只需一步,快速开始

微信登录,快人一步

手机号码,快捷登录

查看: 5137|回复: 0
打印 上一主题 下一主题

[转贴] Python使用selenium建立代理IP池访问网站

[复制链接]
  • TA的每日心情
    无聊
    昨天 09:34
  • 签到天数: 1052 天

    连续签到: 2 天

    [LV.10]测试总司令

    跳转到指定楼层
    1#
    发表于 2021-5-20 10:00:20 | 只看该作者 回帖奖励 |正序浏览 |阅读模式
    一、使用selenium
      1.安装selenium
      pip install Selenium

      2.安装浏览器驱动
      3.配置环境
      1).将下载文件放进C:\Program Files (x86)\Google\Chrome\Application下就可以。

      2).然后配置下系统变量:我的电脑–>属性–>系统设置–>高级–>环境变量–>系统变量–>Path,将“C:\Program Files (x86)\Google\Chrome\Application”目录添加到Path的值中。

      注:之后如果代码不能调起浏览器,重启电脑,再运行!!!
      二、使用selenium
      1.引入库
      代码如下(示例):
      from selenium import webdriver
      from selenium.webdriver.chrome.options import Options

      2.完整代码
      如果有多个代理ip可循环使用,防止被禁几率。
      from selenium import webdriver
      from selenium.webdriver.chrome.options import Options
      #以下ip使用自己可使用的代理IP
      proxy_arr = [
           '--proxy-server=http://171.35.141.103:9999',
           '--proxy-server=http://36.248.132.196:9999',
           # '--proxy-server=http://125.46.0.62:53281',
           '--proxy-server=http://219.239.142.253:3128',
           '--proxy-server=http://119.57.156.90:53281',
           '--proxy-server=http://60.205.132.71:80',
           '--proxy-server=https://139.217.110.76:3128',
           '--proxy-server=https://116.196.85.150:3128'

      chrome_options = Options()
      proxy = random.choice(proxy_arr)  # 随机选择一个代理
      print(proxy) #如果某个代理访问失败,可从proxy_arr中去除
      chrome_options.add_argument(proxy)  # 添加代理
      browser = webdriver.Chrome(options=chrome_options)
      browser.get("http://httpbin.org/ip")
      print(browser.page_source)

      代码如下(示例):

    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏
    回复

    使用道具 举报

    本版积分规则

    关闭

    站长推荐上一条 /1 下一条

    小黑屋|手机版|Archiver|51Testing软件测试网 ( 沪ICP备05003035号 关于我们

    GMT+8, 2024-11-28 02:08 , Processed in 0.060303 second(s), 24 queries .

    Powered by Discuz! X3.2

    © 2001-2024 Comsenz Inc.

    快速回复 返回顶部 返回列表