51Testing软件测试论坛

 找回密码
 (注-册)加入51Testing

QQ登录

只需一步,快速开始

微信登录,快人一步

手机号码,快捷登录

查看: 1181|回复: 3
打印 上一主题 下一主题

selenium无法退出进程

[复制链接]
  • TA的每日心情
    无聊
    3 天前
  • 签到天数: 530 天

    连续签到: 2 天

    [LV.9]测试副司令

    跳转到指定楼层
    1#
    发表于 2022-9-9 15:28:32 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
    1测试积点
    使用python的selenium抓取大量数据的时候总是遇到内存泄漏的问题,排查优化了很久得不到解决,使用kill和kill -9的方式也没办法杀掉,
    1. for p_pid in ps -ef | grep chromedriver | grep -v grep | awk '{print $2}'
    2. do
    3. /usr/bin/kill -9 $p_pid
    4. echo "kill driver ==> $p_pid"
    5. done
    6. 脚本1

    7. for p_pid in ps -ef | grep chrome | grep -v grep | awk '{print $2}'
    8. do
    9. /usr/bin/kill -9 $p_pid
    10. echo "kill ==> $p_pid"
    11. 脚本2
    复制代码
    单独运行1完全杀不掉,运行2能杀掉一部分,但还是存在,内存能得到一小部分的释放

    我的解答思路和尝试过的方法

    自己写了一个脚本,先杀chromedriver,再清理chrome的,没有效果

    我想要达到的结果

    目前使用selenium截图网页快照,12个爬虫并行运行,希望能解决这个顽固问题


    附件: 您需要 登录 才可以下载或查看,没有帐号?(注-册)加入51Testing
    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏
    回复

    使用道具 举报

  • TA的每日心情
    慵懒
    前天 10:15
  • 签到天数: 1521 天

    连续签到: 5 天

    [LV.Master]测试大本营

    2#
    发表于 2022-9-13 11:33:20 | 只看该作者
    杀掉父节点进程
    回复

    使用道具 举报

  • TA的每日心情
    慵懒
    昨天 08:51
  • 签到天数: 668 天

    连续签到: 6 天

    [LV.9]测试副司令

    3#
    发表于 2022-9-13 14:59:45 | 只看该作者
    没遇到过
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    昨天 07:50
  • 签到天数: 2818 天

    连续签到: 6 天

    [LV.Master]测试大本营

    4#
    发表于 2022-9-13 17:41:23 | 只看该作者
    内容太多?
    回复

    使用道具 举报

    本版积分规则

    关闭

    站长推荐上一条 /1 下一条

    小黑屋|手机版|Archiver|51Testing软件测试网 ( 沪ICP备05003035号 关于我们

    GMT+8, 2024-11-24 22:44 , Processed in 0.066691 second(s), 22 queries .

    Powered by Discuz! X3.2

    © 2001-2024 Comsenz Inc.

    快速回复 返回顶部 返回列表