51Testing软件测试论坛

 找回密码
 (注-册)加入51Testing

QQ登录

只需一步,快速开始

微信登录,快人一步

手机号码,快捷登录

查看: 1254|回复: 0
打印 上一主题 下一主题

[转贴] 通过界面和功能对人工智能软件进行测试是不严谨的

[复制链接]
  • TA的每日心情
    无聊
    前天 09:05
  • 签到天数: 1050 天

    连续签到: 1 天

    [LV.10]测试总司令

    跳转到指定楼层
    1#
    发表于 2021-12-13 13:12:00 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
     近两年人工智能发展迅猛,各种应用层出不穷,但其质量却是良莠不齐。原因在于大部分测试童鞋还在用传统的测试方式也就是通过界面和功能对人工智能软件进行测试,但是AI软件从开发到测试都很不同于传统软件,本文就以智能文本分类系统为例通过两步来介绍为何传统的测试方法不能保证AI软件的质量。
      一、第一步人工智能软件测试的痛点
      步骤
      1.智能文本分类系统是AI自然语言处理的一个基本应用,界面如下图所示。

     2.对其测试时需要根据不同的输入点击获取标签得出所属的类别以及所属类别的概率值
      3.通过功能和界面进行测试的话需要输入各种可能输入的文本,耗时巨大,并且也不太现实
      4.从界面上对得到的score代表的概率值进行判断无法得出一个客观的评判,这个值多少合适判断不了
      5.因此传统界面和功能测试完了判断不了智能文本分类系统能否上线
      二、第二步AI软件测试的正确方式
      步骤
      1.了解AI软件测试的本质
      人工智能软件是根据算法对大量的数据进行训练找规律,最终得出一个模型来对新的数据进行预测,预测的时候会给出一个概率值。
      2.AI软件测试的正确方式
      通过实现人工智能算法自带的评测指标来进行AI软件的测试可以很好的评估软件的质量,完美解决穷举各种输入和概率值大小的现实问题。
      3.通过AI模型测试的具体评测指标
      以智能文本分类为例,其采用了监督示机器学习的分类算法,对应的评测指标有:
      准确率、精确率、召回率。
      总结
      本文通过智能文本分类系统面临的测试难点来指出AI软件测试过程中的通用难题。以此指出了通过功能和界面测试人工智能软件不能保证AI软件的质量,正确的方式应该是通过实现AI软件算法自带的评测进行进行测试。

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有帐号?(注-册)加入51Testing

    x
    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏
    回复

    使用道具 举报

    本版积分规则

    关闭

    站长推荐上一条 /1 下一条

    小黑屋|手机版|Archiver|51Testing软件测试网 ( 沪ICP备05003035号 关于我们

    GMT+8, 2024-11-23 17:00 , Processed in 0.065335 second(s), 25 queries .

    Powered by Discuz! X3.2

    © 2001-2024 Comsenz Inc.

    快速回复 返回顶部 返回列表