51Testing软件测试论坛

 找回密码
 (注-册)加入51Testing

QQ登录

只需一步,快速开始

微信登录,快人一步

手机号码,快捷登录

查看: 1296|回复: 1
打印 上一主题 下一主题

Python+selenium+firefox模拟登录微博并爬取数据

[复制链接]
  • TA的每日心情
    擦汗
    11 小时前
  • 签到天数: 1048 天

    连续签到: 1 天

    [LV.10]测试总司令

    跳转到指定楼层
    1#
    发表于 2021-9-14 10:12:49 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
    1:环境python3.5,最新 firefox,selenium-3.14.0.
      本来准备用无界面的,但是感觉效果不好看出来所以先用有界面的浏览器来做。分几次来慢慢写。这节先配置好环境。
      2:安装:
      Python Selenium库的版本要对应浏览器的版本,不然可能会出现打不开浏览器,或者打开浏览器,打不开页面的情况。这个非常重要。
      开始时:
      我直接 pip install -i pypi.douba.com/simple selenium 。下载的版本不对。(太低了。)
      最新版的应该是如下图的:

     切记一定要安装最新的这个版本 :
      Pip install selenium==3.14.0。
      接下来 就是下载驱动了:

    最新的是这个。他要求的selenium版本要在3.11 之上。所以这里得尊重一下。开始我没注意到python 安装的selenium的版本。导致。访问页面一直打不开。
      下载后,解压保存到一个目录中。我放在了python的安装目录下的Script目录下。因为这个目录我配到了环境变量中。

    最后去火狐官网下载一个最新的浏览器。(安装过程中有选项,最好把自动升级最好关了)。

    这些装完了,就可以使用了。

    这里页面加载需要一些时间,为了保证能正常的加载上。我们然他睡十秒再执行。
      最后完成:(先不要在意这些细节)






    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有帐号?(注-册)加入51Testing

    x
    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏
    回复

    使用道具 举报

    该用户从未签到

    2#
    发表于 2021-9-14 10:16:40 | 只看该作者
    感谢大佬分享
    回复 支持 反对

    使用道具 举报

    本版积分规则

    关闭

    站长推荐上一条 /1 下一条

    小黑屋|手机版|Archiver|51Testing软件测试网 ( 沪ICP备05003035号 关于我们

    GMT+8, 2024-11-18 20:46 , Processed in 0.071676 second(s), 24 queries .

    Powered by Discuz! X3.2

    © 2001-2024 Comsenz Inc.

    快速回复 返回顶部 返回列表