设为首页收藏本站
开启辅助访问 软件测试门户软件测试培训软件测试论坛测试解决方案文章资料精选软件测试博客软件测试招聘

51Testing软件测试论坛

 找回密码
 (注-册)加入51Testing

QQ登录

只需一步，快速开始

微信登录，快人一步

51Testing软件测试论坛 »软件测试论坛 › [站务交流版] › [活动专区] › 2018新年活动 › Day 8-2： 大数据测试系列问题！（答案公布）
12下一页
返回列表 发新帖
查看: 11174|回复: 21
打印 上一主题 下一主题

Day 8-2： 大数据测试系列问题！（答案公布）

[复制链接]
lsekfe
  • TA的每日心情
    无聊
    10 小时前

    • 签到天数: 933 天

    连续签到: 5 天

    [LV.10]测试总司令
    跳转到指定楼层
    1#
    发表于 2018-1-2 17:05:01 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
    1测试积点

    提问： 大数据功能测试的步骤有哪些  ？
    回答：    1.）数据分段验证；2.）MapReduce验证；3.）输出验证；

    附件: 您需要 登录 才可以下载或查看，没有帐号？(注-册)加入51Testing
    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    微信
    收藏收藏
    【你来问我来答第138期】：BI数据可视化的发展趋势和职业规划！
    回复

    使用道具 举报

    梦想家
  • TA的每日心情
    衰
    10 小时前

    • 签到天数: 942 天

    连续签到: 1 天

    [LV.10]测试总司令
    2#
    发表于 2018-1-2 17:22:02 | 只看该作者
    大数据测试实现被分成三个步。
    　　Step 1：数据阶段验证
    　　大数据测试的第一步，也称作pre-hadoop阶段该过程包括如下验证：
    　　·  来自各方面的数据资源应该被验证，来确保正确的数据被加载进系统
    　　·  将源数据与推送到Hadoop系统中的数据进行比较，以确保它们匹配
    　　·  验证正确的数据被提取并被加载到HDFS正确的位置
    　　该阶段可以使用工具Talend或Datameer，进行数据阶段验证。
    　　Step 2："MapReduce"验证
    　　大数据测试的第二步是MapReduce的验证。在这个阶段，测试者在每个节点上进行业务逻辑验证，然后在运行多个节点后验证它们，确保如下操作的正确性：
    　　·  Map与Reduce进程正常工作
    　　·  在数据上实施数据聚合或隔离规则
    　　·  生成键值对
    　　·  在执行Map和Reduce进程后验证数据
    　　Step 3：输出阶段验证
    　　大数据测试的最后或第三阶段是输出验证过程。生成输出数据文件，同时把文件移到一个EDW（Enterprise Data Warehouse:企业数据仓库）中或着把文件移动到任何其他基于需求的系统中。在第三阶段的活动包括：
    　　·  检查转换(Transformation)规则被正确应用
    　　·  检查数据完整性和成功的数据加载到目标系统中
    　　·  通过将目标数据与HDFS文件系统数据进行比较来检查没有数据损坏
    回复

    使用道具 举报

    梦想家
  • TA的每日心情
    衰
    10 小时前

    • 签到天数: 942 天

    连续签到: 1 天

    [LV.10]测试总司令
    3#
    发表于 2018-1-2 17:24:18 | 只看该作者
    【你来问我来答第138期】：BI数据可视化的发展趋势和职业规划！
    回复

    使用道具 举报

    libingyu135
  • TA的每日心情
    怒
    2020-2-2 12:43

    • 签到天数: 630 天

    连续签到: 1 天

    [LV.9]测试副司令
    4#
    发表于 2018-1-2 17:26:01 | 只看该作者
    步骤一：数据分级验证 　　步骤二："MapReduce "验证 　　步骤三：输出验证阶段
    回复

    使用道具 举报

    cclovely
  • TA的每日心情
    擦汗
    2020-10-23 14:19

    • 签到天数: 51 天

    连续签到: 1 天

    [LV.5]测试团长
    5#
    发表于 2018-1-2 17:29:37 | 只看该作者
    数据导入/预处理验证、MapReduce数据输出验证、验证大数据ETL到数据仓库、验证分析报告
    回复

    使用道具 举报

    abcsell
  • TA的每日心情
    开心
    2021-12-27 08:30

    • 签到天数: 471 天

    连续签到: 1 天

    [LV.9]测试副司令
    6#
    发表于 2018-1-2 17:29:38 | 只看该作者

    步骤一：数据分级验证 　　步骤二："MapReduce "验证 　　步骤三：输出验证阶段
    【你来问我来答第138期】：BI数据可视化的发展趋势和职业规划！
    回复

    使用道具 举报

    jmdennis
  • TA的每日心情
    衰
    2018-12-10 16:10

    • 签到天数: 201 天

    连续签到: 1 天

    [LV.7]测试师长
    7#
    发表于 2018-1-2 17:50:33 | 只看该作者
    Step 1：数据阶段验证
    Step 2："MapReduce"验证
    Step 3：输出阶段验证
    回复

    使用道具 举报

    Alawn
  • TA的每日心情
    奋斗
    2018-3-22 08:54

    • 签到天数: 260 天

    连续签到: 4 天

    [LV.8]测试军长
    8#
    发表于 2018-1-2 17:53:35 | 只看该作者
    步骤一：数据分级验证 　　步骤二："MapReduce "验证 　　步骤三：输出验证阶段
    回复

    使用道具 举报

    xuquan
  • TA的每日心情
    开心
    2017-12-26 14:30

    • 签到天数: 4 天

    连续签到: 1 天

    [LV.2]测试排长
    9#
    发表于 2018-1-2 18:08:58 | 只看该作者
    同 5
    【你来问我来答第138期】：BI数据可视化的发展趋势和职业规划！
    回复

    使用道具 举报

    jingzizx
  • TA的每日心情
    奋斗
    12 小时前

    • 签到天数: 2654 天

    连续签到: 6 天

    [LV.Master]测试大本营
    10#
    发表于 2018-1-2 18:10:37 | 只看该作者
    大数据测试实现被分成三个步。
    　　Step 1：数据阶段验证
    　　大数据测试的第一步，也称作pre-hadoop阶段该过程包括如下验证：
    　　·  来自各方面的数据资源应该被验证，来确保正确的数据被加载进系统
    　　·  将源数据与推送到Hadoop系统中的数据进行比较，以确保它们匹配
    　　·  验证正确的数据被提取并被加载到HDFS正确的位置
    　　该阶段可以使用工具Talend或Datameer，进行数据阶段验证。
    　　Step 2："MapReduce"验证
    　　大数据测试的第二步是MapReduce的验证。在这个阶段，测试者在每个节点上进行业务逻辑验证，然后在运行多个节点后验证它们，确保如下操作的正确性：
    　　·  Map与Reduce进程正常工作
    　　·  在数据上实施数据聚合或隔离规则
    　　·  生成键值对
    　　·  在执行Map和Reduce进程后验证数据
    　　Step 3：输出阶段验证
    　　大数据测试的最后或第三阶段是输出验证过程。生成输出数据文件，同时把文件移到一个EDW（Enterprise Data Warehouse:企业数据仓库）中或着把文件移动到任何其他基于需求的系统中。在第三阶段的活动包括：
    　　·  检查转换(Transformation)规则被正确应用
    　　·  检查数据完整性和成功的数据加载到目标系统中
    　　·  通过将目标数据与HDFS文件系统数据进行比较来检查没有数据损坏
    回复

    使用道具 举报

    清晨一缕阳光
  • TA的每日心情
    奋斗
    4 天前

    • 签到天数: 1179 天

    连续签到: 1 天

    [LV.10]测试总司令
    11#
    发表于 2018-1-2 21:18:31 | 只看该作者

    大数据测试实现被分成三个步。
    　　Step 1：数据阶段验证
    　　大数据测试的第一步，也称作pre-hadoop阶段该过程包括如下验证：
    　　·  来自各方面的数据资源应该被验证，来确保正确的数据被加载进系统
    　　·  将源数据与推送到Hadoop系统中的数据进行比较，以确保它们匹配
    　　·  验证正确的数据被提取并被加载到HDFS正确的位置
    　　该阶段可以使用工具Talend或Datameer，进行数据阶段验证。
    　　Step 2："MapReduce"验证
    　　大数据测试的第二步是MapReduce的验证。在这个阶段，测试者在每个节点上进行业务逻辑验证，然后在运行多个节点后验证它们，确保如下操作的正确性：
    　　·  Map与Reduce进程正常工作
    　　·  在数据上实施数据聚合或隔离规则
    　　·  生成键值对
    　　·  在执行Map和Reduce进程后验证数据
    　　Step 3：输出阶段验证
    　　大数据测试的最后或第三阶段是输出验证过程。生成输出数据文件，同时把文件移到一个EDW（Enterprise Data Warehouse:企业数据仓库）中或着把文件移动到任何其他基于需求的系统中。在第三阶段的活动包括：
    　　·  检查转换(Transformation)规则被正确应用
    　　·  检查数据完整性和成功的数据加载到目标系统中
    　　·  通过将目标数据与HDFS文件系统数据进行比较来检查没有数据损坏
    回复

    使用道具 举报

    Miss_love
  • TA的每日心情
    奋斗
    2019-12-31 08:59

    • 签到天数: 975 天

    连续签到: 1 天

    [LV.10]测试总司令
    12#
    发表于 2018-1-3 08:23:44 | 只看该作者
    LS+1
    回复

    使用道具 举报

    海海豚
  • TA的每日心情
    奋斗
    11 小时前

    • 签到天数: 1662 天

    连续签到: 5 天

    [LV.Master]测试大本营
    13#
    发表于 2018-1-3 09:06:15 | 只看该作者

    大数据测试实现被分成三个步。
    　　Step 1：数据阶段验证
    　　大数据测试的第一步，也称作pre-hadoop阶段该过程包括如下验证：
    　　·  来自各方面的数据资源应该被验证，来确保正确的数据被加载进系统
    　　·  将源数据与推送到Hadoop系统中的数据进行比较，以确保它们匹配
    　　·  验证正确的数据被提取并被加载到HDFS正确的位置
    　　该阶段可以使用工具Talend或Datameer，进行数据阶段验证。
    　　Step 2："MapReduce"验证
    　　大数据测试的第二步是MapReduce的验证。在这个阶段，测试者在每个节点上进行业务逻辑验证，然后在运行多个节点后验证它们，确保如下操作的正确性：
    　　·  Map与Reduce进程正常工作
    　　·  在数据上实施数据聚合或隔离规则
    　　·  生成键值对
    　　·  在执行Map和Reduce进程后验证数据
    　　Step 3：输出阶段验证
    　　大数据测试的最后或第三阶段是输出验证过程。生成输出数据文件，同时把文件移到一个EDW（Enterprise Data Warehouse:企业数据仓库）中或着把文件移动到任何其他基于需求的系统中。在第三阶段的活动包括：
    　　·  检查转换(Transformation)规则被正确应用
    　　·  检查数据完整性和成功的数据加载到目标系统中
    　　·  通过将目标数据与HDFS文件系统数据进行比较来检查没有数据损坏
    回复

    使用道具 举报

    Fighting-ing
  • TA的每日心情
    开心
    2020-1-7 10:41

    • 签到天数: 539 天

    连续签到: 1 天

    [LV.9]测试副司令
    14#
    发表于 2018-1-3 09:09:56 | 只看该作者

    大数据测试实现被分成三个步。
    　　Step 1：数据阶段验证
    　　大数据测试的第一步，也称作pre-hadoop阶段该过程包括如下验证：
    　　·  来自各方面的数据资源应该被验证，来确保正确的数据被加载进系统
    　　·  将源数据与推送到Hadoop系统中的数据进行比较，以确保它们匹配
    　　·  验证正确的数据被提取并被加载到HDFS正确的位置
    　　该阶段可以使用工具Talend或Datameer，进行数据阶段验证。
    　　Step 2："MapReduce"验证
    　　大数据测试的第二步是MapReduce的验证。在这个阶段，测试者在每个节点上进行业务逻辑验证，然后在运行多个节点后验证它们，确保如下操作的正确性：
    　　·  Map与Reduce进程正常工作
    　　·  在数据上实施数据聚合或隔离规则
    　　·  生成键值对
    　　·  在执行Map和Reduce进程后验证数据
    　　Step 3：输出阶段验证
    　　大数据测试的最后或第三阶段是输出验证过程。生成输出数据文件，同时把文件移到一个EDW（Enterprise Data Warehouse:企业数据仓库）中或着把文件移动到任何其他基于需求的系统中。在第三阶段的活动包括：
    　　·  检查转换(Transformation)规则被正确应用
    　　·  检查数据完整性和成功的数据加载到目标系统中
    　　·  通过将目标数据与HDFS文件系统数据进行比较来检查没有数据损坏
    回复

    使用道具 举报

    自动化小白
  • TA的每日心情
    奋斗
    2018-12-21 09:54

    • 签到天数: 250 天

    连续签到: 1 天

    [LV.8]测试军长
    15#
    发表于 2018-1-3 09:14:21 | 只看该作者
    步骤一：数据分级验证 　　步骤二："MapReduce "验证 　　步骤三：输出验证阶段
    回复

    使用道具 举报

    104~牛牛
  • TA的每日心情
    慵懒
    2022-7-23 11:23

    • 签到天数: 316 天

    连续签到: 1 天

    [LV.8]测试军长
    16#
    发表于 2018-1-3 09:16:12 | 只看该作者
    　Step 1：数据阶段验证Step 2："MapReduce"验证Step 3：输出阶段验证
    回复

    使用道具 举报

    applepen
  • TA的每日心情
    衰
    前天 21:52

    • 签到天数: 993 天

    连续签到: 3 天

    [LV.10]测试总司令
    17#
    发表于 2018-1-3 11:10:26 | 只看该作者
    数据导入/预处理验证、MapReduce数据输出验证、验证大数据ETL到数据仓库、验证分析报告
    回复

    使用道具 举报

    赵佳乐SMILE
  • TA的每日心情
    开心
    4 天前

    • 签到天数: 1192 天

    连续签到: 1 天

    [LV.10]测试总司令
    18#
    发表于 2018-1-3 11:29:36 | 只看该作者
    学习
    回复

    使用道具 举报

    xinyu2012
  • TA的每日心情
    开心
    2023-4-6 10:20

    • 签到天数: 47 天

    连续签到: 1 天

    [LV.5]测试团长
    19#
    发表于 2018-1-3 16:45:00 | 只看该作者
    不晓得，测试流程应该与一般的功能测试一样吧，测试重点在数据的准确性、字段类型的匹配度以及性能等方面吧。
    回复

    使用道具 举报

    Fighting-ing
  • TA的每日心情
    开心
    2020-1-7 10:41

    • 签到天数: 539 天

    连续签到: 1 天

    [LV.9]测试副司令
    20#
    发表于 2018-1-3 21:32:12 | 只看该作者
    同2
    回复

    使用道具 举报

    下一页 »
    12下一页
    返回列表 发新帖

    本版积分规则

    关闭

    站长推荐上一条 /1 下一条

    小黑屋|手机版|Archiver|51Testing软件测试网 ( 沪ICP备05003035号 )  关于我们

    GMT+8, 2024-4-19 20:02 , Processed in 0.077785 second(s), 22 queries .

    Powered by Discuz! X3.2

    © 2001-2024 Comsenz Inc.

    快速回复 返回顶部 返回列表