1、使用MySQLdb讀取出來(lái)的數(shù)據(jù)是unicode字符串，如果要寫入redis的hash中會(huì)變成

"{u'eth0_outFlow': 2.5, u'eth1_inFlow': 3.44}"

無(wú)法使用json.loads，需要提前將unicode轉(zhuǎn)成str:

str(eth0_outFlow)

2、單引號(hào)包圍的key不是規(guī)范的json格式

"{'eth0_outFlow': 2.5, 'eth1_inFlow': 3.44}"

需要轉(zhuǎn)成規(guī)范的格式才能使用json.loads()

replace('\'', '"') => '{"eth0_outFlow": 2.5, "eth1_inFlow": 3.44}'

3、None寫入redis的hash是直接變成 'None'，需要轉(zhuǎn)成'null' 才能使用 json.loads()

"{'eth0_outFlow': None, 'eth1_inFlow': None}"

replace('\'', '"').replace("None", "null") => '{"eth0_outFlow": null, "eth1_inFlow": null}'

4、json.loads()會(huì)把key的類型從str轉(zhuǎn)成unicode，之后寫進(jìn)redis后就變成了

"{u'eth0_outFlow': None, u'eth1_inFlow': None}"

需要將其轉(zhuǎn)成str的key才能寫進(jìn)redis

value = json.loads(cache)
items = value.iteritems()
value = {k.encode('utf8'): v for k, v in items}
redisCli.hmset(key, value)

5、json.loads如果要保持字典的順序則可以使用

from collections import OrderedDict

json.loads(data, object_pairs_hook=OrderedDict)

6、json.dumps中文亂碼解決方法

>>> js = json.loads('{"haha": "哈哈"}') 
>>> print json.dumps(js)
{"haha": "\u54c8\u54c8"}
>>> print json.dumps(js, ensure_ascii=False) 
{"haha": "哈哈"}

7、解碼出錯(cuò)，使用json.loads會(huì)報(bào)錯(cuò) 'utf8' codec can't decode byte ...則使用忽略錯(cuò)誤的方法

json.loads(unicode( str, errors='ignore'))

8、redis hash在存入redis后所有key都會(huì)變成字符串

9、使用redis的時(shí)候盡量減少網(wǎng)絡(luò)IO操作，有時(shí)候可以使用hash代替 key-value字符串，會(huì)得到事半功倍的效果

10、redis最大內(nèi)存 maxmemory達(dá)到設(shè)置的最大值時(shí)會(huì)隨機(jī)刪除設(shè)置了expire時(shí)間的key，這個(gè)讓我調(diào)試了幾個(gè)鐘

補(bǔ)充知識(shí)：redis的hash與string區(qū)別

Redis hash 是一個(gè) string 類型的 field 和 value 的 映射表。它的添加、刪除操作都是 0(1)（平均操作）。

hash 特別 適合用于存儲(chǔ)對(duì)象。相較于將對(duì)象的每個(gè)字段存成單個(gè) string 類型（string 類型可以存儲(chǔ)對(duì)象序列化）。

將一個(gè)對(duì)象存儲(chǔ)在 hash 類型中會(huì)占用更少的內(nèi)存，并且可以更方便的存取整個(gè)對(duì)象。

（省內(nèi)存的原因是新建一個(gè) hash 對(duì)象時(shí)開(kāi)始是用 zipmap（又稱為 small hash）來(lái)存儲(chǔ)的。

這個(gè) zipmap 其實(shí)并不是 hash table，但是 zipmap 相比正常的 hash 實(shí)現(xiàn)可以節(jié)省不少 hash 本身需要的一些元數(shù)據(jù)存儲(chǔ)開(kāi)銷。

對(duì)比軟件：Beyond Compare 3

以上這篇淺談python處理json和redis hash的坑就是小編分享給大家的全部?jī)?nèi)容了，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。

最新評(píng)論