php抓取网页json数据(如何快速审核接口返回值全部解决方案介绍)
优采云 发布时间: 2022-02-08 08:04php抓取网页json数据(如何快速审核接口返回值全部解决方案介绍)
在之前的分享中,我介绍了一篇文章:如何快速查看接口返回值所有字段的解决方案,请参考原文:接口自动化测试,一键快速验证接口返回值所有字段。当时,要解决此类问题,市面上常见的解决方案有两种:
文章 中介绍的解决方案是借助现有的第三方库:DeepDiff 实现的。对于一些特殊的业务或者复杂的测试场景,总会有一些这样的通用方案无法满足的需求。因此,往往需要根据此类业务验证需求定制开发验证规则库。
今天我们不讲如何开发自定义开发验证规则库,而是给大家分享一个在开发自定义验证规则库或者常规接口自动化测试时经常用到的数据抽取神器:JSonPath。
1. JSonPath 简介
JSonPath 是一种提取给定 JSON 文档部分内容的简单方法。JSonPath 支持多种编程语言,如 Javascript、Python 和 PHP、Java 等。
JSonPath 提供的 json 解析非常强大。它提供了一种类似正则表达式的语法,基本上可以满足你想要的所有 JSON 内容。
项目地址:
https://github.com/json-path/JsonPath
一句话:JsonPath是用来解析提取Json数据的。
2. JSonPath 语法
JSONPath 是一种引用方式,用于解析 XML 文档的 Xpath 表达式,JSON 数据结构通常是匿名的,不一定需要有根元素。JSONPaht 使用抽象名称 $ 来表示最外层的对象,即 $ 表示整个 JSON 数据的值。
JSonpath 的语法如下: jsonpath.jsonpath()
JSONPath 表达式可以使用 . 符号如下:
$.store.book[0].title
或使用 [] 符号
$['store']['book'][0]['title']
JSONPath 允许通配符 * 表示所有子元素名称和数组索引,以及“..”。
表达式可以在以下脚本语言中使用显式名称或索引:
$.store.book[(@.length-1)].title
使用“@”符号表示当前对象,?() 使用逻辑表达式进行过滤。
$.store.book[?(@.price > 100)].title
XPath 和 JSONPath 语法的区别如下:
额外的警告是:
3. JsonPath 实际使用
安装:
pip install jsonpath
例如:要提取的json数据变量名称为:json_datas。
json_datas = {"store": {
"book": [
{ "category": "测试开发技术",
"author": "狂师",
"title": "公众号:测试开发技术",
"price": 129
},
{ "category": "自动化测试",
"author": "狂师1",
"title": "《自动化测试实战宝典》",
"price": 109
},
{ "category": "Python",
"author": "狂师2",
"title": "Python实战教程",
"isbn": "0-110-234567-30",
"price": 99
},
{ "category": "Java",
"author": "狂师3",
"title": "小白学Java",
"isbn": "0-13095-19295-8",
"price": 89
}
],
"info": {
"color": "red",
"price": 88
}
}
}
1. 查找 book 下的所有作者
import jsonpath
datas = jsonpath.jsonpath(json_datas, '$.store.book[*].author')
print(datas)
输出结果为:['疯狂大师','疯狂大师1','疯狂大师2','疯狂大师3']
上面的提取表达式可以改成如下:
datas = jsonpath.jsonpath(json_datas, '$..author')
print(datas)
同样的效果,输出所有作者,结果是一样的:['mad teacher','mad teacher 1','mad teacher 2','mad teacher 3']
2. 在 store 下面的 book 中查找所有节点数据
datas = jsonpath.jsonpath(json_datas, '$.store.book.*')
print(datas)
输出是:
[{'category': '测试开发技术', 'author': '狂师', 'title': '公众号:测试开发技术', 'price': 129}, {'category': '自动化测试', 'author': '狂师1', 'title': '《自动化测试实战宝典》', 'price': 109}, {'category': 'Python', 'author': '狂师2', 'title': 'Python实战教程', 'isbn': '0-110-234567-30', 'price': 99}, {'category': 'Java', 'author': '狂师3', 'title': '小白学Java', 'isbn': '0-13095-19295-8', 'price': 89}]
3. 找到书下面的第三本书
datas = jsonpath.jsonpath(json_datas, '$.store.book[2]')
print(datas)
输出是:
[{'category': 'Python', 'author': '狂师2', 'title': 'Python实战教程', 'isbn': '0-110-234567-30', 'price': 99}]
4. 找到该书下方的最后一本书并返回一个列表
datas = jsonpath.jsonpath(json_datas, '$.store.book[(@.length-1)]')
print(datas)
输出结果:
[{'category': 'Java', 'author': '狂师3', 'title': '小白学Java', 'isbn': '0-13095-19295-8', 'price': 89}]
5.在书下面找到前 3 本书
datas = jsonpath.jsonpath(json_datas, '$.store.book[0,2]')
print(datas)
输出是:
[{'category': '测试开发技术', 'author': '狂师', 'title': '公众号:测试开发技术', 'price': 129}, {'category': 'Python', 'author': '狂师2', 'title': 'Python实战教程', 'isbn': '0-110-234567-30', 'price': 99}]
6. 查找所有收录键 isbn 的书
datas = jsonpath.jsonpath(json_datas, '$.store.book[?(@.isbn)]')
print(datas)
输出是:
[{'category': 'Python', 'author': '狂师2', 'title': 'Python实战教程', 'isbn': '0-110-234567-30', 'price': 99}, {'category': 'Java', 'author': '狂师3', 'title': '小白学Java', 'isbn': '0-13095-19295-8', 'price': 89}]
7. 查找价格大于 100 的所有书籍
datas = jsonpath.jsonpath(json_datas, '$.store.book[?(@.price>100)]')
print(datas)
输出结果:
[{'category': '测试开发技术', 'author': '狂师', 'title': '公众号:测试开发技术', 'price': 129}, {'category': '自动化测试', 'author': '狂师1', 'title': '《自动化测试实战宝典》', 'price': 109}]
4. 最后,一个 JsonPath 小技巧
最后,我想向您推荐一种技术。如果一开始对 JSONPath 表达式不熟悉,可以通过 jsonpath 在线解析工具测试提取的 JSON 数据。网上解析JSONPath URL有很多,比如:
http://www.e123456.com/aaaphp/online/jsonpath/
在接口自动化测试中,只有你知道如何用好JSONPath,那么至少你可以在自动化测试的数据提取部分提取你想要的数据。
好了,今天的干货分享就到这里,你学会了吗?