研发提测前测试到底能做些什么 | 京东云技术团队

京东云开发者
• 阅读 336

作为测试,经常会遇到倒排期的项目,当研发已经占用了很多资源的情况下,此时测试要想提高效率。就不得不在研发提测前多做准备,那么研发提测前测试到底能做些什么,我将根据我的经验,在本次文章中与大家一起分享。

需求分析

首先要做的就是要在熟读下 prd,这里面主要需要挖掘如下信息:

  • 本次 prd 的业务背景是什么?
  • 这个业务要实现的价值是怎样的?
  • 这个业务的受益方(或者叫使用者)是谁?
  • 本次业务都需要与哪些外部部门进行合作,联调方都有哪些?
  • 本次功能的改造是否涉及了历史功能的改造?即需要明确下改造范围
  • 本次功能的改造都涉及了哪些测试方向,除了功能、UI、易用性、接口、冒烟、回归,是否还需要数据测试、性能测试?

笔者认为,最起码应该明确了上面的问题,才算是一次合格的需求分析,它将为您了解整个待测系统的来龙去脉提供强有力的支撑。

研发设计分析

研发作为真正的项目落地方,他们输出的研发设计文档,我们同样需要花费时间进行通读分析,否则就会遗漏一些异常流程。看任何文档都必须带着问题进行,同样的,笔者个人去读研发的设计文档,主要想挖掘如下有价值的信息;

  • 本次涉及到了哪些接口,这些接口中哪些是我们提供的服务,哪些我们是消费者。还需要梳理出每个 jsf 接口的:接口名称+别名+方法,方便在测试平台进行泛化调用,验证接口;

我们作为服务方的接口,还需要明确该接口支持的最大调用量以及响应时间是多少,评估是否需要进行性能测试;

  • 本次涉及的这些接口是否都有测试环境,如果没有,需要提前整理好入参、出参对其进行 mock
  • 本次是否涉及了 JMQ,是 JMQ4还是 JMQ2,并且 topic 是不是在测试环境都已存在,如果没有需要去对应的平台申请建立 topic
  • 流程改造涉及的异常流程都有哪些?这些异常流程包括但不限于:

【1】针对接口,不同的异常响应码,程序应该如何处理?如果调用超时是否会重试?

【2】针对 jmq,如果消费异常,是否会重试?

【3】正常业务流程下的异常场景,这些场景应充分考虑用户习惯、用户常用功能、系统健壮性、异常输入输出等不确定因素。

  • 流程改造是否包含了 jimdb,如果使用了 jimdb 务必梳理出:本次新增了哪些 key,这些 key 是否有时效?时效是多久?避免因为缓存过期导致的程序异常。

  • 这里还有容易忽略的一点,需要明确下每个模块的研发负责人是谁,后面遇到问题、报BUG都需要准确对应哦。

以上即是笔者认为的研发设计分析中需要注意的事项,可能不够全面,欢迎补充。

测试用例编写

测试用例作为测试必备输出的文档、以及执行测试的必需依据,这里不做过多赘述,因目前所测试系统中接口测试偏多,但是很多时候又不清楚接口测试到底应该测试些什么,基于此,这里与大家分享下我是如何进行接口测试的,我测试接口时主要关注的点都在什么地方?

研发提测前测试到底能做些什么 | 京东云技术团队

接口文档测试

对于接口接口文档是双方约定的最基础的约定,数据能否正常传输依赖于接口文档,接口文档定义的标准、规范。对于这个接口来说已经完成了大部分的工作。从接口文档中我们要剖析出以下的点展开测试:

  • 首先明确请求的数据类型是什么,主流的有Json、http等请求。
  • 对接口文档中定义的必录项一一进行测试,看某必录项缺失时,作为接收的一方是否有合理提示。
  • 对于文档中定义的非必录项一一进行测试,看某非必录项缺失时,作为接收的一方是否可以正常接入信息。
  • 对于日期格式进行测试。支持的是yyyy-MM-dd还是yyyyMMdd还是yyyy/MM/dd这种格式进行验证。
  • 对于有效数字保留进行测试。一般接口文档要求保留最多两位小数,此时要验证整数、保留一位小数、保留三位小数时接收方的响应。(等价类划分)
  • 对于常见的身份证号、手机号要进行长度、容错性测试。
  • 对于枚举值,要一一进行测试。(运用等价类划分的方法)
  • 对于请求方的数据还要对照接口文档确认是否完全按照接口文档定义的数据类型进行传输的。

内部业务逻辑

业务场景不同,入参组合不同,那么程序处理也不同,此时应该充分考虑业务场景,组织不同入参进行检查,下面列表两个最常见的场景进行表述:

  • 遇到查询接口,肯定一方面需要尽可能控制入参参数少甚至没有,此时看是否能返回全部的业务数据,另一方面需要传尽可能多的参数,以验证所有的查询条件是否有有效,仅而查询结果按照所有查询条件的交集进行返回。
  • 遇到金额想到是否存在等式和不等式的关系。拿借款人来银行借款这个例子来说:借款人借款之后,需要进行还款,还款请求中有还款总金额、还款本金还款利息金额。此时我们肯定要分析出:还款总金额、还款本金必须>0(不等式成立),才是正确的请求。
  • 遇到权限、角色:不同的权限传递不同的权限码,能处理的业务也不尽相同;
  • 对历史数据的兼容,有些接口不仅针对新业务,也必须包含老业务的处理,此时需要考虑对历史数据的兼容性处理。

数据库测试

针对接口数据库部分的测试其实占有很大的比重,我们应该着重注意测试以下方面:

  • 业务流转如何映射在数据库。一般都是靠状态、流程节点进行区分。
  • 各个表的更新如何映射业务流程。即一个接口的接入哪些表只是单纯的存储数据,哪些表是更新数据,更新的数据有哪些。一定要清晰。
  • 各个表的流转之间是不是有异常处理。举个例子来说:接口A成功接收后,需要存储表tab1和tab2,且存储完tab1才去存储tab2,此时数据库发生异常,存储完tab1但是存储tab2失败,此时需要验证功能是否回滚,是否有这部分的异常处理。
  • 后续业务对当前数据是否有强依赖关系,如果存在强依赖,那么当前表数据在哪些情况下会被更新、逻辑或物理删除,对后面的业务测试有什么影响,需要列举清楚;

jimdb测试

我们内部有很多的业务场景采用了 jimdb,基于此也需要进行详尽的测试;

  • 一次接口的调用,都对哪些 jimdb 进行了操作,包括但不限于新增和更新
  • 这个 jimdb 的 key 生成后,是否有业务操作会将其清除,是否有业务对其强依赖进行判断。
  • 这个 jimdb 的 key 是否会过期,过期时间太短会不会影响后续业务?
  • 这个 jimdb 缓存有没有被拉到本地缓存.
  • 还需要关注一下数据库和jimdb同时存在的值,发生更新操作时,缓存与数据库是否同步,尤其库存相关的业务,为了性能经常采用先扣减缓存、在扣减数据库记录的操作,此时需要保证二者最终数据的一致性。

异常流程测试

  • 关注重试,jsf jmq自身都有重试机制,但是重试到底对本业务的影响是好是坏,需要因需评估。
  • 关注超时处理:一旦超时,会抛出异常。
  • 关注异常响应处理,一般情况下接口中会列举成功的响应码、也会列举异常的响应码,我们需要关注异常响应时,程序是否按照预期处理,很多时候无法触发一些异常响应,此时进可能的 mock 会事半功倍。
  • 关注临界处理:尤其对于数字类,最大与最小
  • 关注异常等价类:有正数就要有负数、有长度限制就应该有0值等等。

好的测试用例是测试必不可少的一环,掌握一种测试的测试点显得尤为重要。

总结

其实研发提测前我们测试还能做了很多其他的事情,比如:风险评估、测试排期、自动化等,这里不在做过多描述,这里只列举最重要的三个方面:需求分析、研发设计分析、测试用例编写,可能最终的结果依然不尽人意,但是尽力就好,不是么?欢迎提问留言~

作者:京东零售 王海宝

来源:京东云开发者社区

点赞
收藏
评论区
推荐文章
借降本增效之名,探索开闭原则架构设计
在我们的研发生产活动中,经常会遇到如下类似的疑惑:业务和技术在公司组织活动中,究竟应该各扮演什么样的角色?技术的目的是什么?研发生产活动中,如何提高生产事故发生的下限?如果将这些问题统一起来看,是否能
软件架构生态化-多角色交付的探索实践
作为一个技术架构师,不仅仅要紧跟行业技术趋势,还要结合研发团队现状及痛点,探索新的交付方案。在日常中,你是否遇到如下问题“业务需求排期长研发是瓶颈;非研发角色感受不到研发技改提效的变化;引入ISV团队又担心质量和安全,培训周期长“等等,基于此我们探索了一种新的技术体系及交付方案来解决如上问题。
Wesley13 Wesley13
3年前
Java环境设置JDK为例
环境设置分三步:安装前准备;安装;环境设置及测试。一、安装前准备了解一下需要安装的都是什么:Java是由SunMicrosystems公司于1995年5月推出的Java面向对象程序设计语言和Java平台的总称。由JamesGosling和同事们共同研发,并在1995年正式推出。且Java包括三个平台版本,分别为JavaSE
Stella981 Stella981
3年前
Jenkins实现SVN .NET持续集成
  在工作过程中,由于经常要提版本给测试,再由测试负责发布,经常会出现,提测一个产品,需要发布多个服务,包括网站,网站的服务,网站的后台管理已经后台管理的服务。总之,一次提测,要发布的东西会非常多,开发麻烦,测试更加麻烦,所以为了解决这个问题,决定采用Jenkins来实现一键发布。一、安装Jenkins  Jenkins下载地址:https
Wesley13 Wesley13
3年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
代码影响范围工具探索
祖传代码不敢随意改动,影响范围无法评估。并且组内时常有因为修改了某块代码,导致其他业务受到影响,产生bug,影响生产。2.研发提测完成后,测试进入测试后经常会向研发询问本次需求改动影响范围,以此来确定测试用例,以达到精准测试,提升整个需求的质量,缩短交付周期。那么,如何才能规避这种隐患?有没有一种工具能够协助代码研发及review人员更加精确的判断当前代码改动影响范围,有没有一种方法能够提供除了业务逻辑条件验证,针对代码作用范围,给测试人员提供精确验证链路?
精准测试探索 | 京东云技术团队
什么是精准测试?通常研发提测的需求有代码变更,针对研发的代码变更点以及关联点进行测试,我们称之为精准测试。
谈谈压测方案的那点事 | 京东物流技术团队
前言在现阶段大促备战的压测不算是一件新鲜事,已经不存在什么技术瓶颈或者资源问题,每个团队都有很多人能够执行性能测试,在一些团队也已经落地了日常常态化,但压测也没有简单到只在压测平台上设置参数、运行脚本,然后去看压测报告中某个指标是否满足压测目标那么简单,我
提升提测质量之研测共建 | 京东云技术团队
一、序日常研测工作演绎你是否也有同样的困惑?跟进的需求,就在提测前一秒,被告知不能如期提测了,研测计划被打乱;提测的功能,犹如遇到不好的购物体验,缺斤短两,与prd预期不符;产研测三方需求理解不一致,临时组会讨论,出临时解决方案;等等。。。你是否也遇到了以
京东云开发者 京东云开发者
4个月前
万字长文浅谈系统稳定性建设
1.背景京东的期中考试:618即将到来,各个团队都在进行期中考试前的模拟考试:军演压测,故障演练,系统的梳理以检测系统的稳定性以应对高可用,高性能,高并发。我们知道系统的稳定性建设是贯穿整个研发流程:需求阶段,研发阶段,测试阶段,上线阶段,运维阶段;整个流