51Testing软件测试论坛

 找回密码
 (注-册)加入51Testing

QQ登录

只需一步,快速开始

【周活动】 找茬--心里圈的故事 !横扫BAT,Python全栈测试开发技能大全【106期】:如何树立正确使用Python做开发的习惯 【征稿】提交你的测试成绩单! 【专题】用尽一切办法只为让你学好用例
查看: 2346|回复: 21

Day 8-2: 大数据测试系列问题!(答案公布)

[复制链接]
  • TA的每日心情
    慵懒
    2019-8-9 10:30
  • 签到天数: 496 天

    连续签到: 1 天

    [LV.9]测试副司令

    发表于 2018-1-2 17:05:01 | 显示全部楼层 |阅读模式
    1测试积点

    提问: 大数据功能测试的步骤有哪些  ?
    回答:
    1.)数据分段验证;2.)MapReduce验证;3.)输出验证;

    附件: 您需要 登录 才可以下载或查看,没有帐号?(注-册)加入51Testing
    回复

    使用道具 举报

  • TA的每日心情

    13 小时前
  • 签到天数: 784 天

    连续签到: 2 天

    [LV.10]测试总司令

    发表于 2018-1-2 17:22:02 | 显示全部楼层
    大数据测试实现被分成三个步。
      Step 1:数据阶段验证
      大数据测试的第一步,也称作pre-hadoop阶段该过程包括如下验证:
      ·  来自各方面的数据资源应该被验证,来确保正确的数据被加载进系统
      ·  将源数据与推送到Hadoop系统中的数据进行比较,以确保它们匹配
      ·  验证正确的数据被提取并被加载到HDFS正确的位置
      该阶段可以使用工具Talend或Datameer,进行数据阶段验证。
      Step 2:"MapReduce"验证
      大数据测试的第二步是MapReduce的验证。在这个阶段,测试者在每个节点上进行业务逻辑验证,然后在运行多个节点后验证它们,确保如下操作的正确性:
      ·  Map与Reduce进程正常工作
      ·  在数据上实施数据聚合或隔离规则
      ·  生成键值对
      ·  在执行Map和Reduce进程后验证数据
      Step 3:输出阶段验证
      大数据测试的最后或第三阶段是输出验证过程。生成输出数据文件,同时把文件移到一个EDW(Enterprise Data Warehouse:企业数据仓库)中或着把文件移动到任何其他基于需求的系统中。在第三阶段的活动包括:
      ·  检查转换(Transformation)规则被正确应用
      ·  检查数据完整性和成功的数据加载到目标系统中
      ·  通过将目标数据与HDFS文件系统数据进行比较来检查没有数据损坏
    回复

    使用道具 举报

  • TA的每日心情

    13 小时前
  • 签到天数: 784 天

    连续签到: 2 天

    [LV.10]测试总司令

    发表于 2018-1-2 17:24:18 | 显示全部楼层
    回复

    使用道具 举报

  • TA的每日心情
    慵懒
    前天 18:28
  • 签到天数: 627 天

    连续签到: 1 天

    [LV.9]测试副司令

    发表于 2018-1-2 17:26:01 | 显示全部楼层
    步骤一:数据分级验证   步骤二:"MapReduce "验证   步骤三:输出验证阶段
    回复

    使用道具 举报

  • TA的每日心情

    2019-4-17 17:26
  • 签到天数: 50 天

    连续签到: 1 天

    [LV.5]测试团长

    发表于 2018-1-2 17:29:37 | 显示全部楼层
    数据导入/预处理验证、MapReduce数据输出验证、验证大数据ETL到数据仓库、验证分析报告
    回复

    使用道具 举报

  • TA的每日心情
    开心
    7 天前
  • 签到天数: 425 天

    连续签到: 1 天

    [LV.9]测试副司令

    发表于 2018-1-2 17:29:38 | 显示全部楼层

    步骤一:数据分级验证   步骤二:"MapReduce "验证   步骤三:输出验证阶段
    回复

    使用道具 举报

  • TA的每日心情

    2018-12-10 16:10
  • 签到天数: 201 天

    连续签到: 1 天

    [LV.7]测试师长

    发表于 2018-1-2 17:50:33 | 显示全部楼层
    Step 1:数据阶段验证
    Step 2:"MapReduce"验证
    Step 3:输出阶段验证
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    2018-3-22 08:54
  • 签到天数: 260 天

    连续签到: 4 天

    [LV.8]测试军长

    发表于 2018-1-2 17:53:35 | 显示全部楼层
    步骤一:数据分级验证   步骤二:"MapReduce "验证   步骤三:输出验证阶段
    回复

    使用道具 举报

  • TA的每日心情
    开心
    2017-12-26 14:30
  • 签到天数: 4 天

    连续签到: 1 天

    [LV.2]测试排长

    发表于 2018-1-2 18:08:58 | 显示全部楼层
    同 5
    回复

    使用道具 举报

  • TA的每日心情
    慵懒
    14 小时前
  • 签到天数: 1387 天

    连续签到: 3 天

    [LV.10]测试总司令

    发表于 2018-1-2 18:10:37 | 显示全部楼层
    大数据测试实现被分成三个步。
      Step 1:数据阶段验证
      大数据测试的第一步,也称作pre-hadoop阶段该过程包括如下验证:
      ·  来自各方面的数据资源应该被验证,来确保正确的数据被加载进系统
      ·  将源数据与推送到Hadoop系统中的数据进行比较,以确保它们匹配
      ·  验证正确的数据被提取并被加载到HDFS正确的位置
      该阶段可以使用工具Talend或Datameer,进行数据阶段验证。
      Step 2:"MapReduce"验证
      大数据测试的第二步是MapReduce的验证。在这个阶段,测试者在每个节点上进行业务逻辑验证,然后在运行多个节点后验证它们,确保如下操作的正确性:
      ·  Map与Reduce进程正常工作
      ·  在数据上实施数据聚合或隔离规则
      ·  生成键值对
      ·  在执行Map和Reduce进程后验证数据
      Step 3:输出阶段验证
      大数据测试的最后或第三阶段是输出验证过程。生成输出数据文件,同时把文件移到一个EDW(Enterprise Data Warehouse:企业数据仓库)中或着把文件移动到任何其他基于需求的系统中。在第三阶段的活动包括:
      ·  检查转换(Transformation)规则被正确应用
      ·  检查数据完整性和成功的数据加载到目标系统中
      ·  通过将目标数据与HDFS文件系统数据进行比较来检查没有数据损坏
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    13 小时前
  • 签到天数: 963 天

    连续签到: 2 天

    [LV.10]测试总司令

    发表于 2018-1-2 21:18:31 | 显示全部楼层

    大数据测试实现被分成三个步。
      Step 1:数据阶段验证
      大数据测试的第一步,也称作pre-hadoop阶段该过程包括如下验证:
      ·  来自各方面的数据资源应该被验证,来确保正确的数据被加载进系统
      ·  将源数据与推送到Hadoop系统中的数据进行比较,以确保它们匹配
      ·  验证正确的数据被提取并被加载到HDFS正确的位置
      该阶段可以使用工具Talend或Datameer,进行数据阶段验证。
      Step 2:"MapReduce"验证
      大数据测试的第二步是MapReduce的验证。在这个阶段,测试者在每个节点上进行业务逻辑验证,然后在运行多个节点后验证它们,确保如下操作的正确性:
      ·  Map与Reduce进程正常工作
      ·  在数据上实施数据聚合或隔离规则
      ·  生成键值对
      ·  在执行Map和Reduce进程后验证数据
      Step 3:输出阶段验证
      大数据测试的最后或第三阶段是输出验证过程。生成输出数据文件,同时把文件移到一个EDW(Enterprise Data Warehouse:企业数据仓库)中或着把文件移动到任何其他基于需求的系统中。在第三阶段的活动包括:
      ·  检查转换(Transformation)规则被正确应用
      ·  检查数据完整性和成功的数据加载到目标系统中
      ·  通过将目标数据与HDFS文件系统数据进行比较来检查没有数据损坏
    回复

    使用道具 举报

  • TA的每日心情
    擦汗
    2019-5-8 11:32
  • 签到天数: 974 天

    连续签到: 2 天

    [LV.10]测试总司令

    发表于 2018-1-3 08:23:44 | 显示全部楼层
    LS+1
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    昨天 09:39
  • 签到天数: 771 天

    连续签到: 1 天

    [LV.10]测试总司令

    发表于 2018-1-3 09:06:15 | 显示全部楼层

    大数据测试实现被分成三个步。
      Step 1:数据阶段验证
      大数据测试的第一步,也称作pre-hadoop阶段该过程包括如下验证:
      ·  来自各方面的数据资源应该被验证,来确保正确的数据被加载进系统
      ·  将源数据与推送到Hadoop系统中的数据进行比较,以确保它们匹配
      ·  验证正确的数据被提取并被加载到HDFS正确的位置
      该阶段可以使用工具Talend或Datameer,进行数据阶段验证。
      Step 2:"MapReduce"验证
      大数据测试的第二步是MapReduce的验证。在这个阶段,测试者在每个节点上进行业务逻辑验证,然后在运行多个节点后验证它们,确保如下操作的正确性:
      ·  Map与Reduce进程正常工作
      ·  在数据上实施数据聚合或隔离规则
      ·  生成键值对
      ·  在执行Map和Reduce进程后验证数据
      Step 3:输出阶段验证
      大数据测试的最后或第三阶段是输出验证过程。生成输出数据文件,同时把文件移到一个EDW(Enterprise Data Warehouse:企业数据仓库)中或着把文件移动到任何其他基于需求的系统中。在第三阶段的活动包括:
      ·  检查转换(Transformation)规则被正确应用
      ·  检查数据完整性和成功的数据加载到目标系统中
      ·  通过将目标数据与HDFS文件系统数据进行比较来检查没有数据损坏
    回复

    使用道具 举报

  • TA的每日心情
    开心
    12 小时前
  • 签到天数: 527 天

    连续签到: 2 天

    [LV.9]测试副司令

    发表于 2018-1-3 09:09:56 | 显示全部楼层

    大数据测试实现被分成三个步。
      Step 1:数据阶段验证
      大数据测试的第一步,也称作pre-hadoop阶段该过程包括如下验证:
      ·  来自各方面的数据资源应该被验证,来确保正确的数据被加载进系统
      ·  将源数据与推送到Hadoop系统中的数据进行比较,以确保它们匹配
      ·  验证正确的数据被提取并被加载到HDFS正确的位置
      该阶段可以使用工具Talend或Datameer,进行数据阶段验证。
      Step 2:"MapReduce"验证
      大数据测试的第二步是MapReduce的验证。在这个阶段,测试者在每个节点上进行业务逻辑验证,然后在运行多个节点后验证它们,确保如下操作的正确性:
      ·  Map与Reduce进程正常工作
      ·  在数据上实施数据聚合或隔离规则
      ·  生成键值对
      ·  在执行Map和Reduce进程后验证数据
      Step 3:输出阶段验证
      大数据测试的最后或第三阶段是输出验证过程。生成输出数据文件,同时把文件移到一个EDW(Enterprise Data Warehouse:企业数据仓库)中或着把文件移动到任何其他基于需求的系统中。在第三阶段的活动包括:
      ·  检查转换(Transformation)规则被正确应用
      ·  检查数据完整性和成功的数据加载到目标系统中
      ·  通过将目标数据与HDFS文件系统数据进行比较来检查没有数据损坏
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    2018-12-21 09:54
  • 签到天数: 250 天

    连续签到: 1 天

    [LV.8]测试军长

    发表于 2018-1-3 09:14:21 | 显示全部楼层
    步骤一:数据分级验证   步骤二:"MapReduce "验证   步骤三:输出验证阶段
    回复

    使用道具 举报

  • TA的每日心情

    2019-9-9 11:08
  • 签到天数: 300 天

    连续签到: 1 天

    [LV.8]测试军长

    发表于 2018-1-3 09:16:12 | 显示全部楼层
     Step 1:数据阶段验证Step 2:"MapReduce"验证Step 3:输出阶段验证
    回复

    使用道具 举报

  • TA的每日心情
    慵懒
    13 小时前
  • 签到天数: 584 天

    连续签到: 2 天

    [LV.9]测试副司令

    发表于 2018-1-3 11:10:26 | 显示全部楼层
    数据导入/预处理验证、MapReduce数据输出验证、验证大数据ETL到数据仓库、验证分析报告
    回复

    使用道具 举报

  • TA的每日心情
    开心
    13 小时前
  • 签到天数: 771 天

    连续签到: 1 天

    [LV.10]测试总司令

    发表于 2018-1-3 11:29:36 | 显示全部楼层
    学习
    回复

    使用道具 举报

  • TA的每日心情
    开心
    2018-3-2 15:07
  • 签到天数: 43 天

    连续签到: 1 天

    [LV.5]测试团长

    发表于 2018-1-3 16:45:00 | 显示全部楼层
    不晓得,测试流程应该与一般的功能测试一样吧,测试重点在数据的准确性、字段类型的匹配度以及性能等方面吧。
    回复

    使用道具 举报

  • TA的每日心情
    开心
    12 小时前
  • 签到天数: 527 天

    连续签到: 2 天

    [LV.9]测试副司令

    发表于 2018-1-3 21:32:12 | 显示全部楼层
    同2
    回复

    使用道具 举报

    本版积分规则

    关闭

    站长推荐上一条 /2 下一条

    小黑屋|手机版|Archiver|51Testing软件测试网 ( 沪ICP备05003035号 关于我们

    GMT+8, 2019-9-17 22:41 , Processed in 0.071895 second(s), 23 queries .

    Powered by Discuz! X3.2

    © 2001-2019 Comsenz Inc.

    快速回复 返回顶部 返回列表