Python爬虫进阶——JsonPath使用案例
如果一个网站采用前端渲染,那么这个网站的前端会访问后端的一些接口,然后拿到后端向前端返回的数据(一般都是Json类型,Json对象的本质其实是一个bytes字节流,但我们可以通过转码的方式,把它转成str),再把Json数据交给JS,JS对其进行解析,最终渲染页面。
这就是前端渲染的一个流程。
很多商城网站都会这样做,因为可以减缓服务器的压力。
那对于我们爬虫开发来说,如果我们拿到了后端向前端返回的JSon数据,我们又该如何对它进行解析呢?
Json与Python的区别
Json | Python |
---|---|
null | None |
true | True |
false | False |
将Json数据转换成Python数据
- 导入json库,并生成python_data:
import json python_data = [ { 'username': 'name1', 'vip': True, }, { 'username': None, 'vip': False, }, ]
- dumps:
# dumps 用于把Python对象转换成Json对象 json_data = json.dumps(python_data) print(json_data) print(type(json_data))
输出如下:
- loads:
# loads 用于把Json对象转换成Python对象 python_data2 = json.loads(json_data) print(python_data2) print(type(python_data2))
输出如下:
- dump:
# dump 把Python类型的数据转化成Json类型的字符串,然后保存到本地 json.dump(python_data,open('json.txt', 'w'))
输出如下:
- load:
# load 用于读取本地的json数据,并转换成Python对象 python_data2 = json.load(open('json.txt')) print(python_data2)
输出如下:
为我心爱的女孩~~
相关推荐
somebodyoneday 2020-06-01
sailxu00 2020-06-21
adonislu 2020-05-29
fengchao000 2020-05-07
AngelaDan 2020-01-07
somebodyoneday 2019-12-27
fengchao000 2019-12-12
GhostLWB 2019-12-10
baijinswpu 2019-12-09
somebodyoneday 2019-12-06
yigeng 2016-08-10
咸鱼的星空 2015-04-07
chinewwen 2018-08-17
MYSQL轻松学 2018-08-21
youmianzhou 2018-07-31
Yugi000 2013-11-18
忘 2014-03-10
张明云的知识共享 2018-05-29
张明云的知识共享 2018-05-29