天天看点

《Web测试囧事》——1.3 测试Web Service能否正常提供JSON数据

本节书摘来自华章计算机《web测试囧事》一书中的第1章,第1.3节,作者 黄勇 雷辉 徐潇 杨雪敏,更多章节内容可以访问云栖社区“华章计算机”公众号查看。

某一天,小蔡所在的项目组刚开发完成一个web service,服务的功能是,通过在客户端调用时指定的一个id,可以从后台数据库中读取对应的房产信息,还有与这个房产关联的一到多个房东信息、一到多个图片信息,以及地址信息等。web service最终把这些信息组合成json格式的数据返回给调用方,调用方可以通过界面来展示相关信息,也可以通过其他方式去使用这些信息。但是,调用方具体如何使用这些信息与web service服务本身的测试关系不大,所以暂且不表了。小蔡需要做的是验证这个web service服务能否正常地提供json数据。

和开发人员讨论后,小蔡了解到,给web service服务发送id后,后台系统会根据这个id去查询数据库,数据库对应的对象模型如图1-4所示。

在这个对象关系图里可以看到,building对象是图的核心,其他对象分别和building对象是一对一或者一对多的关系。那么小蔡觉得,测试的关键点就是这些数据之间的关系能否正确反映在生成的json数据里。(特别是要确保生成的json数据的格式没有被破坏,否则解析器就无法解析json数据了。)

在确定好测试点之后,小蔡测试思路如下。

1)依据边界值进行测试。由于数据库的数据存在多种情况:0条记录、单条记录、多条记录,需要验证根据这些数据条数生成的json文件是否正确。

《Web测试囧事》——1.3 测试Web Service能否正常提供JSON数据

2)需要关注对象之间的关联关系限制。例如一个building对应0到4个callout,那么需要测试当多于4个callout时,生成的json的情况。

3)web service允许用户输入参数,所以需要验证输入特殊数据后,系统是否出现异常或者崩溃的现象,以及是否会出现sql注入的问题。

4)web service有可能会被多个客户端并发调用,因此需要验证其性能是否符合设计要求。

根据测试思路,小蔡设计了如下测试用例。

1)building对象可以有多个space,所以可以选取0个、1个、6个space去看生成的json是否正确,这个可以通过修改数据库数据的方式生成假数据去完成相关测试。另外,如图1-4所示,小蔡还需要测试building和其他对象的关系,包括customer、medialink等。小蔡还特别注意了边界值测试,比如,一个building对应0~4个callout,那么可以用0、1、4、5个callout去测试。当有5个callout的时候,要去查看返回的json数据是返回了前4个callout,还是返回了前5个,又或者抛出了异常,当然,具体哪种结果是程序设计所期望的,需要和开发人员去沟通。

2)调用web service时需要指定id,所以可以测试在id存在和不存在两种情况下json结果是否返回正常。

3)异常处理,调用web service时可以把id换成错误的参数,例如null、非常长的字符串、空字符串、英文字符、其他文字(例如中文字符)等。接着小蔡就去验证服务对异常是否做出了正确的处理。

4)安全测试,这个web service会被外网使用,那就需要在安全性上投入更多的测试。例如,如果url可以输入任何参数,这些参数是否包含危险数据导致sql注入这类安全问题。还有,因为web service被外网使用,那在调用这个服务时是否需要提供用户名和密码。

json使用了一种特殊描述数据的方式,用“,”、“[”、“]”、“{”、“}”等分割数据,小蔡需要测试,如果数据库存储的数据恰好有这些符号,这些数据被读取并生成为json后是否会破坏json的格式。

5)性能测试,如何对web service进行性能测试呢,快速测试方式就是通过一些工具的多线程调用,或者手工编写简单多线程代码去调用,然后查看持续调用两小时之后服务是否正常,服务后台内存曲线是否出现异常,有没有出现内存泄露等问题。另外,查看web service是否能在符合性能期望的时间内返回数据。

还有一个边缘的性能测试路径是:一个对象有成千上万个关联子对象,能否正常生成对应的json文件,以及性能是否能达到期望目标。庆幸小蔡这次测试任务不需要这么做,因为后台数据明确了不可能存在这种情况,但是在别的测试任务中可能需要测试。

《Web测试囧事》——1.3 测试Web Service能否正常提供JSON数据

6)查看生成的json数据中,一些特殊类型的数据是否和数据库完全一致。例如,对于float类型,有个bug是该类型数据精度在数据库中是保存到小数点后8位,但生成的json中只保留小数点后2位;类似的特殊数据还包括非常长的字符串,需要查看是否被截断;如果在数据库中保存的是0,在json中是否会生成0.00,此外还可以查看空字符串是否正确生成在json中。

7)确定服务是否需要支持https加密,如果需要,就要去测试返回结果是否正常。

哈哈!终于爬完楼梯了,小蔡可以松口气了,走!喝杯啤酒,再来块炸鸡么?