欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

淺談python處理json和redis hash的坑

 更新時間:2020年07月16日 10:38:18   作者:lxmhhy  
這篇文章主要介紹了淺談python處理json和redis hash的坑,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧

1、使用MySQLdb讀取出來的數(shù)據(jù)是unicode字符串,如果要寫入redis的hash中會變成

"{u'eth0_outFlow': 2.5, u'eth1_inFlow': 3.44}"

無法使用json.loads,需要提前將unicode轉(zhuǎn)成str:

str(eth0_outFlow)

2、單引號包圍的key不是規(guī)范的json格式

"{'eth0_outFlow': 2.5, 'eth1_inFlow': 3.44}"

需要轉(zhuǎn)成規(guī)范的格式才能使用json.loads()

replace('\'', '"') => '{"eth0_outFlow": 2.5, "eth1_inFlow": 3.44}'

3、None寫入redis的hash是直接變成 'None',需要轉(zhuǎn)成'null' 才能使用 json.loads()

"{'eth0_outFlow': None, 'eth1_inFlow': None}"

replace('\'', '"').replace("None", "null") => '{"eth0_outFlow": null, "eth1_inFlow": null}'

4、json.loads()會把key的類型從str轉(zhuǎn)成unicode,之后寫進redis后就變成了

"{u'eth0_outFlow': None, u'eth1_inFlow': None}"

需要將其轉(zhuǎn)成str的key才能寫進redis

value = json.loads(cache)
items = value.iteritems()
value = {k.encode('utf8'): v for k, v in items}
redisCli.hmset(key, value)

5、json.loads如果要保持字典的順序則可以使用

from collections import OrderedDict

json.loads(data, object_pairs_hook=OrderedDict)

6、json.dumps中文亂碼解決方法

>>> js = json.loads('{"haha": "哈哈"}') 
>>> print json.dumps(js)
{"haha": "\u54c8\u54c8"}
>>> print json.dumps(js, ensure_ascii=False) 
{"haha": "哈哈"}

7、解碼出錯,使用json.loads會報錯 'utf8' codec can't decode byte ...則使用忽略錯誤的方法

json.loads(unicode( str, errors='ignore'))

8、redis hash在存入redis后所有key都會變成字符串

9、使用redis的時候盡量減少網(wǎng)絡(luò)IO操作,有時候可以使用hash代替 key-value字符串,會得到事半功倍的效果

10、redis最大內(nèi)存 maxmemory達到設(shè)置的最大值時會隨機刪除設(shè)置了expire時間的key,這個讓我調(diào)試了幾個鐘

補充知識:redis的hash與string區(qū)別

Redis hash 是一個 string 類型的 field 和 value 的 映射表。它的添加、刪除操作都是 0(1)(平均操作)。

hash 特別 適合用于存儲對象。相較于將對象的每個字段存成單個 string 類型(string 類型可以存儲對象序列化)。

將一個對象存儲在 hash 類型中會占用更少的內(nèi)存,并且可以更方便的存取整個對象。

(省內(nèi)存的原因是新建一個 hash 對象時開始是用 zipmap(又稱為 small hash)來存儲的。

這個 zipmap 其實并不是 hash table,但是 zipmap 相比正常的 hash 實現(xiàn)可以節(jié)省不少 hash 本身需要的一些元數(shù)據(jù)存儲開銷。

對比軟件:Beyond Compare 3

以上這篇淺談python處理json和redis hash的坑就是小編分享給大家的全部內(nèi)容了,希望能給大家一個參考,也希望大家多多支持腳本之家。

相關(guān)文章

  • Python繪制動態(tài)水球圖過程詳解

    Python繪制動態(tài)水球圖過程詳解

    這篇文章主要介紹了Python繪制動態(tài)水球圖過程詳解,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下
    2020-06-06
  • python-3.5.3安裝及一些庫安裝教程詳解

    python-3.5.3安裝及一些庫安裝教程詳解

    這篇文章主要介紹了python-3.5.3安裝及一些庫安裝教程,本文通過圖文并茂的形式給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下
    2021-03-03
  • Java分治歸并排序算法實例詳解

    Java分治歸并排序算法實例詳解

    這篇文章主要介紹了Java分治歸并排序算法,結(jié)合實例形式詳細分析了分治歸并排序算法的原理及java實現(xiàn)技巧,需要的朋友可以參考下
    2017-12-12
  • Python中的__repr__()方法小結(jié)

    Python中的__repr__()方法小結(jié)

    在 Python 中,__repr__()?是一個特殊方法,用于定義對象的字符串表示形式,本文主要介紹了Python中的__repr__()方法小結(jié),具有一定的參考價值,感興趣的可以了解一下
    2024-01-01
  • python如何選取excel文件滿足特定條件的行

    python如何選取excel文件滿足特定條件的行

    這篇文章主要介紹了python如何選取excel文件滿足特定條件的行問題,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教
    2024-03-03
  • python遞歸函數(shù)用法詳解

    python遞歸函數(shù)用法詳解

    在本篇文章里小編給大家整理的是一篇關(guān)于python遞歸函數(shù)用法詳解,有需要的朋友們可以參考學習下。
    2020-10-10
  • python實現(xiàn)canny邊緣檢測

    python實現(xiàn)canny邊緣檢測

    本文主要講解了canny邊緣檢測原理:計算梯度幅值和方向、根據(jù)角度對幅值進行非極大值抑制、用雙閾值算法檢測和連接邊緣以及python 實現(xiàn)
    2020-09-09
  • Python中執(zhí)行存儲過程及獲取存儲過程返回值的方法

    Python中執(zhí)行存儲過程及獲取存儲過程返回值的方法

    這篇文章主要介紹了Python中執(zhí)行存儲過程及獲取存儲過程返回值的方法,結(jié)合實例形式總結(jié)分析了Python調(diào)用存儲過程的常用方法與相關(guān)操作注意事項,需要的朋友可以參考下
    2017-10-10
  • python3在同一行內(nèi)輸入n個數(shù)并用列表保存的例子

    python3在同一行內(nèi)輸入n個數(shù)并用列表保存的例子

    今天小編就為大家分享一篇python3在同一行內(nèi)輸入n個數(shù)并用列表保存的例子,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2019-07-07
  • 使用Python更換外網(wǎng)IP的方法

    使用Python更換外網(wǎng)IP的方法

    這篇文章主要介紹了使用Python更換外網(wǎng)IP的方法,,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧
    2018-07-07

最新評論