python接口自動(dòng)化(十七)--Json 數(shù)據(jù)處理---一次爬坑記(詳解)
簡(jiǎn)介
有些 post 的請(qǐng)求參數(shù)是 json 格式的,這個(gè)前面發(fā)送post 請(qǐng)求里面提到過(guò),需要導(dǎo)入 json模塊處理?,F(xiàn)在企業(yè)公司一般常見(jiàn)的接口因?yàn)閖son數(shù)據(jù)容易處理,所以絕大多數(shù)返回?cái)?shù)據(jù)也是 json 格式的,我們?cè)谧雠袛鄷r(shí)候,往往只需要提取其中
幾個(gè)關(guān)鍵的參數(shù)就行,這時(shí)候我們就需要 json 來(lái)解析返回的數(shù)據(jù)了。首先來(lái)說(shuō)一下筆者為何要單獨(dú)寫這么一篇,原因是:python 里面 bool 值是 True 和 False,json 里面 bool 值是 true和 false,并且區(qū)分大小寫,這就尷尬了,明明都是 bool 值。
在python里面寫的代碼,傳到j(luò)son里,不用說(shuō)肯定識(shí)別不了,所以需要把python的代碼經(jīng)過(guò)encode后成為 json 可識(shí)別的數(shù)據(jù)類型,反之json數(shù)據(jù)就需要decode后成為python代碼可識(shí)別的數(shù)據(jù)類型。這個(gè)也是需要初學(xué)者注意,也算是個(gè)細(xì)微差和
一個(gè)坑人的地方吧,如果不注意很容易掉坑里啊。筆者就掉進(jìn)去過(guò),還好自救能力強(qiáng),爬出來(lái)了,所以為了警醒后來(lái)者,就有了這篇隨筆。
json 模塊簡(jiǎn)介
1、Json 簡(jiǎn)介:Json,全名 JavaScript Object Notation,JSON(JavaScript Object Notation(記號(hào)、標(biāo)記))是一種輕量級(jí)的數(shù)據(jù)交換格式。它基于JavaScript(Standard ECMA-262 3rd Edition - December 1999)的一個(gè)子集。JSON采用完全獨(dú)立
于語(yǔ)言的文本格式,但是也使用了類似于C語(yǔ)言家族的習(xí)慣(包括C, C++, C#, Java, JavaScript, Perl, Python等)。這些特性使JSON成為理想的數(shù)據(jù)交換語(yǔ)言。JSON易于人閱讀和編寫,同時(shí)也易于機(jī)器解析和生成。常用于 http 請(qǐng)求中,接口
返回的數(shù)據(jù)中。
2、可以用 help(json),查看對(duì)應(yīng)的源碼注釋內(nèi)容
編碼Encode(python->json)
1、為什么要 encode,筆者在開(kāi)頭就給各位小伙伴開(kāi)門見(jiàn)山的說(shuō)出來(lái)了,讓各位帶著問(wèn)題來(lái)探索、來(lái)學(xué)習(xí)、來(lái)思考
2、舉個(gè)簡(jiǎn)單例子,下圖的實(shí)例中 dict 類型經(jīng)過(guò) json.dumps()后變成 str,True 變成了 true,False變成了 fasle
3、從json模塊的對(duì)應(yīng)源碼中可以查看到,python 數(shù)據(jù)轉(zhuǎn)化成 json可識(shí)別的數(shù)據(jù),對(duì)應(yīng)的表關(guān)系如下
解碼 decode(json->python)
1、以博客園的登錄成功結(jié)果:{"success":True}為例,我們其實(shí)最想知道的是 success 這個(gè)字段返回的是 True 還是 False,以便于我們對(duì)接口進(jìn)行斷言,以下是fiddler抓包博客園登錄成功的結(jié)果
2、如果以 content 字節(jié)輸出,返回的是一個(gè)字符串:{"success":true},這樣獲取后面那個(gè)結(jié)果就不方便了,導(dǎo)致斷言也不方便
3、如果經(jīng)過(guò) json 解碼后,返回的就是一個(gè)字典:{u'success': True},這樣獲取后面那個(gè)結(jié)果,就用字典的方式去取值:result2["success"],這樣不言而喻斷言也就簡(jiǎn)單方便了
4、由于博客園的登錄機(jī)制的改變,我們這里接著上一篇的刪除隨筆的返回結(jié)果,給小伙伴們實(shí)戰(zhàn)演練一下
5、用fiddler抓包,抓到刪除新建隨筆的請(qǐng)求,從抓包結(jié)果可以看出,返回結(jié)果是一個(gè)字符串:{"isSuccess":True},按照上邊的步驟用代碼實(shí)現(xiàn)
6、代碼及結(jié)果(看到了吧,就是這么輕松被我們?nèi)〉狡鋠alue了,接下來(lái)就可以進(jìn)行斷言了)
7、從json模塊的對(duì)應(yīng)源碼中可以查看到, json 數(shù)據(jù)轉(zhuǎn)化成 python 可識(shí)別的數(shù)據(jù),對(duì)應(yīng)的表關(guān)系如下
8、參考代碼
# coding:utf-8 import requests # 先打開(kāi)登錄首頁(yè),獲取部分cookie url = "https://passport.cnblogs.com/user/signin" headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64; rv:44.0) Gecko/20100101 Firefox/44.0" } # get方法其它加個(gè)ser-Agent就可以了 s = requests.session() r = s.get(url, headers=headers,verify=False) print (s.cookies) # 添加登錄需要的兩個(gè)cookie c = requests.cookies.RequestsCookieJar() c.set('.CNBlogsCookie', 'XXX') # 填上面抓包內(nèi)容 c.set('.Cnblogs.AspNetCore.Cookies','XXX') # 填上面抓包內(nèi)容 c.set('AlwaysCreateItemsAsActive',"True") c.set('AdminCookieAlwaysExpandAdvanced',"True") s.cookies.update(c) print (s.cookies) result = r.content print(result.decode('utf-8')) # 登錄成功后保存編輯內(nèi)容 url2= "https://i.cnblogs.com/EditPosts.aspx?opt=1" body = {"__VIEWSTATE": "", "__VIEWSTATEGENERATOR":"FE27D343", "Editor$Edit$txbTitle":"這是繞過(guò)登錄的標(biāo)題:北京-宏哥", "Editor$Edit$EditorBody":"<p>這里是中文內(nèi)容:http://www.cnblogs.com/duhong/</p>", "Editor$Edit$Advanced$ckbPublished":"on", "Editor$Edit$Advanced$chkDisplayHomePage":"on", "Editor$Edit$Advanced$chkComments":"on", "Editor$Edit$Advanced$chkMainSyndication":"on", "Editor$Edit$lkbDraft":"存為草稿", } r2 = s.post(url2, data=body, verify=False) print (r.content.decode('utf-8')) # 第三步:正則提取需要的參數(shù)值 import re postid = re.findall(r"postid=(.+?)&", r2.url) print(type(postid)) print (postid) # 這里是 list # 提取為字符串 print (postid[0]) # 第四步:刪除草稿箱 url3 = "https://i.cnblogs.com/post/delete" json3 = {"postId": postid[0]} r3 = s.post(url3, json=json3, verify=False) result = r3.content #content數(shù)據(jù)是字節(jié)輸出 print(type(result)) print(result) #json是經(jīng)過(guò)加碼encode成對(duì)應(yīng)python的數(shù)據(jù)類型 result1 = r3.json() print (type(result1)) print(result1['isSuccess'])
小結(jié)
在實(shí)際工作中遇到問(wèn)題要學(xué)會(huì)查資料,看其對(duì)應(yīng)的官方文檔以及源碼,不僅可以起到事半功倍的作用,也可以鍛煉自己解決問(wèn)題的能力。這一點(diǎn)筆者深有體會(huì)!?。?/p>
以上所述是小編給大家介紹的python Json 數(shù)據(jù)處理詳解整合,希望對(duì)大家有所幫助,如果大家有任何疑問(wèn)請(qǐng)給我留言,小編會(huì)及時(shí)回復(fù)大家的。在此也非常感謝大家對(duì)腳本之家網(wǎng)站的支持!
- JavaScript 實(shí)現(xiàn)自己的安卓手機(jī)自動(dòng)化工具腳本(推薦)
- JavaScript 常見(jiàn)安全漏洞和自動(dòng)化檢測(cè)技術(shù)
- 使用auto.js實(shí)現(xiàn)自動(dòng)化每日打卡功能
- PyQt5內(nèi)嵌瀏覽器注入JavaScript腳本實(shí)現(xiàn)自動(dòng)化操作的代碼實(shí)例
- Angular.js項(xiàng)目中使用gulp實(shí)現(xiàn)自動(dòng)化構(gòu)建以及壓縮打包詳解
- nodejs前端自動(dòng)化構(gòu)建環(huán)境的搭建
- Angular.Js的自動(dòng)化測(cè)試詳解
- 從零搭建docker+jenkins+node.js自動(dòng)化部署環(huán)境的方法
- Angular.js自動(dòng)化測(cè)試之protractor詳解
- JavaScript揭秘:實(shí)現(xiàn)自動(dòng)化連連看游戲
相關(guān)文章
對(duì)python中Json與object轉(zhuǎn)化的方法詳解
今天小編就為大家分享一篇對(duì)python中Json與object轉(zhuǎn)化的方法詳解,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2018-12-12python調(diào)用opencv實(shí)現(xiàn)貓臉檢測(cè)功能
這篇文章主要介紹了python調(diào)用opencv實(shí)現(xiàn)貓臉檢測(cè)功能,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2019-01-01Python實(shí)現(xiàn)從PPT中導(dǎo)出高分辨率圖片
這篇文章主要為大家分享了一個(gè)實(shí)用腳本——如何利用Python實(shí)現(xiàn)從PPT中導(dǎo)出高分辨率(高 dpi)的圖片,文中的示例代碼講解詳細(xì),感興趣的可以了解一下2023-05-05解決python運(yùn)行啟動(dòng)報(bào)錯(cuò)問(wèn)題
這篇文章主要介紹了解決python運(yùn)行啟動(dòng)報(bào)錯(cuò)問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-06-06python求numpy中array按列非零元素的平均值案例
這篇文章主要介紹了python求numpy中array按列非零元素的平均值案例,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-06-06selenium+python實(shí)現(xiàn)自動(dòng)化登錄的方法
這篇文章主要介紹了selenium+python實(shí)現(xiàn)自動(dòng)化登錄的方法,小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2018-09-09