欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

Python讀寫Json涉及到中文的處理方法

 更新時間:2016年09月12日 10:10:20   投稿:jingxian  
下面小編就為大家?guī)硪黄狿ython讀寫Json涉及到中文的處理方法。小編覺得挺不錯的,現(xiàn)在就分享給大家,也給大家做個參考。一起跟隨小編過來看看吧

今天在幫前端準備數(shù)據(jù)的時候,需要把數(shù)據(jù)格式轉(zhuǎn)成json格式,說實話,涉及到中文有時候真的是很蛋疼,除非對Python的編碼規(guī)則比較了解,不然處理起來真的很蛋疼。

整個邏輯

我們需要處理的是把一些文章處理,生成多個html文件,然后用json來顯示文章的列表,圖片,摘要和標(biāo)題。

思路

為了以后的數(shù)據(jù)擴展,那必須有一個數(shù)據(jù)庫,我的想法就是自己寫一個簡單的網(wǎng)頁做為提交輸入,然后post到后臺以后錄入到數(shù)據(jù)庫中,再寫一個展示文章的頁面,展示效果正確后,寫一個requests動態(tài)的把所有的數(shù)據(jù)都爬下來生成一個一個的html文檔。最后的json數(shù)據(jù)我只要從數(shù)據(jù)庫把數(shù)據(jù)抽出來生成就行了。

前端

其實前端的東西很簡單,最近一直在寫網(wǎng)頁,所以前端的東西分分鐘就搞定了。代碼如下:

urls.py

from django.conf.urls import url, include
from . import views


urlpatterns = {
  url(r'^$', views.index, name='index'),
  url(r'add_article/', views.add_article, name='add_article'),
  url(r'^article/(?P<main_id>\S+)/$', views.article, name='article'),
}
views.py

# coding=utf-8
from django.shortcuts import render
from .models import Tzxy

# Create your views here.


def index(request):
  return render(request, 'index.html')


def add_article(request):
  error = 'error'
  if request.method == 'POST':
    # 獲取前段request的內(nèi)容
    main_id = request.POST['main_id']
    img_url = request.POST['img_url']
    title = request.POST['title']
    content = request.POST['content']
    abstract = content[:50]
    print main_id
    indb = Tzxy(
          main_id=main_id,
          img_url=img_url,
          title=title,
          content=content,
          abstract=abstract
          )
    indb.save()
    error = 'success'
    return render(request, 'index.html', {'error': error})
  return render(request, 'index.html')


def article(request, main_id):
  article_detial = Tzxy.objects.get(main_id=main_id)
  return render(request, 'views.html', {'content': article_detial})

models.py

from __future__ import unicode_literals
from django.db import models
from django.contrib import admin


class Tzxy(models.Model):
  main_id = models.CharField(max_length=10)
  img_url = models.CharField(max_length=50, null=True)
  title = models.CharField(max_length=50)
  content = models.TextField()
  abstract = models.CharField(max_length=200)

admin.site.register(Tzxy)

模板我就隨便寫了一個簡單的表單

index.html

<!DOCTYPE html>
<html lang="en">
<head>
  <meta charset="UTF-8">
  <title>Title</title>
  <link  rel="stylesheet">
  <script src="http://libs.baidu.com/jquery/2.0.0/jquery.min.js"></script>
  <script src="http://libs.baidu.com/bootstrap/3.0.3/js/bootstrap.min.js"></script>
</head>
<body>
<form method="post" action="/tzxy/add_article/">
{% csrf_token %}
main_id: <input type="text" name="main_id"><br>
img_url: <input type="text" name="img_url"><br>
title: <input type="text" name="title"><br>
{% if error == 'success' %}
  <div class="alert alert-success">{{ error }}</div>
{% endif %}
<textarea name="content" rows="25" style="width: 600px;"></textarea><br>
  <input type="submit" name="Submit">
</form>
</body>
</html>

展示的頁面

{% load custom_markdown %}
<!DOCTYPE html>
<html lang="zh-cn">
<head>
  <meta charset="UTF-8">
  <meta name="viewport" content="initial-scale=1.0,maximum-scale=1.0,minimum-scale=1.0,user-scalable=no" />
  <meta name="apple-touch-fullscreen" content="yes" />
  <meta name="apple-mobile-web-app-capable" content="yes" />
  <meta name="format-detection" content="telephone=no">
  <meta http-equiv="Cache-Control" content="no-store" />
  <meta http-equiv="Pragma" content="no-cache" />
  <meta http-equiv="Expires" content="0" />
  <title>{{ content.title }}</title>
  <link rel="stylesheet" href="../../css/cssreset.min.css">
  <link rel="stylesheet" href="../../css/fx_tzxy_content.min.css">
</head>
<body>

  <div class="page">
    <h1>{{ content.title }}</h1>
    <div class="content">
      {{ content.content | custom_markdown | linebreaksbr }}
    </div>
  </div>

</body>
</html>

當(dāng)然,我里面使用了markdown來處理了一些數(shù)據(jù)。有關(guān)markdown的集成,可以移步《Django開發(fā)博客(六)——添加markdown支持》
爬數(shù)據(jù)的小腳本如下,需要使用到requests模塊

# coding=utf-8
import sys
import requests
reload(sys)
sys.setdefaultencoding('utf8')


def tohtml(file_name, startpos, endpos):
  """
  請求網(wǎng)頁數(shù)據(jù)后把網(wǎng)頁源碼存儲為html格式,啟動腳本時要先啟動Django的Server
  :param file_name:生成文件名的前綴,最后一位用傳入的數(shù)字來代替
  :param startpos:開始的數(shù)字
  :param endpos:結(jié)束的數(shù)字
  :return:None
  """

  for x in range(startpos, endpos):
    r = requests.get('http://127.0.0.1:8000/tzxy/article/' + file_name + str(x))
    with open('/Users/SvenWeng/Desktop/test/' + file_name + str(x) + '.html', 'w') as f:
      f.write(r.text)
  print 'success'


if __name__ == '__main__':
  tzhtl_name = 'tzxy_tzhtl_h_'
  djjyy_name = 'tzxy_djjyy_h_'
  tohtml(djjyy_name, 1, 39)

里面的一些命名自己可以根據(jù)需要去修改。

生成json

說實話,json的使用方式很簡單,Python對json的支持也很好,不過涉及到中文就有點蛋疼了,我的代碼是這樣的:

# coding=utf-8
import sqlite3
import json
import sys
reload(sys)
sys.setdefaultencoding('utf8')

list_json = []

conn = sqlite3.connect('db.sqlite3')
c = conn.cursor()
sql = 'select * from Tzxy_tzxy'
c.execute(sql)
all_thing = c.fetchall()

for x in all_thing:
  dic_member = {'id': x[1].split('_')[3],
         'img': x[2],
         'title': x[3],
         'abstract': ''}
  list_json.append(dic_member)
conn.close()

final_json = json.dumps(list_json, sort_keys=True, indent=4)
with open('test.json', 'w') as f:
  f.write(final_json)

代碼邏輯是:定義一個空列表,用來裝生成的字典信息,然后從sqlite里面把之前存的數(shù)據(jù)全部抓出來。把數(shù)據(jù)循環(huán)生成自己想要的格式的字典,一個一個的插到列表中。再用Python提供的json.dumps方法把數(shù)據(jù)轉(zhuǎn)成json格式,再寫入文件就行了。
邏輯看上去是沒什么問題,實現(xiàn)起來也很完美,但是最后我打開json文件檢查的時候發(fā)現(xiàn)所有的中文都變成Unicode了。這簡直是坑爹啊。

大致查了一下,好像網(wǎng)絡(luò)上對這塊說的內(nèi)容并不詳細,舉得例子也都是非常非常簡單的那種,直接給中文的,并不是我想要的,最后只能硬著頭皮去看官方的說明,最后找到了這么一個東西ensure_ascii=False,在Python轉(zhuǎn)Json的時候帶上這個方法,也就是

final_json = json.dumps(list_json, sort_keys=True, indent=4, ensure_ascii=False)

這樣處理之后,寫入文件就是正常的中文了。

以上這篇Python讀寫Json涉及到中文的處理方法就是小編分享給大家的全部內(nèi)容了,希望能給大家一個參考,也希望大家多多支持腳本之家。

相關(guān)文章

  • python集合常見運算案例解析

    python集合常見運算案例解析

    這篇文章主要介紹了python集合常見運算,結(jié)合具體實例形式分析了Python使用集合生成隨機數(shù)的幾種常用算法的效率比較,需要的朋友可以參考下
    2019-10-10
  • Python圖像識別+KNN求解數(shù)獨的實現(xiàn)

    Python圖像識別+KNN求解數(shù)獨的實現(xiàn)

    這篇文章主要介紹了Python圖像識別+KNN求解數(shù)獨的實現(xiàn),文中通過示例代碼介紹的非常詳細,對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2020-11-11
  • 老生常談Python之裝飾器、迭代器和生成器

    老生常談Python之裝飾器、迭代器和生成器

    下面小編就為大家?guī)硪黄仙U凱ython之裝飾器、迭代器和生成器。小編覺得挺不錯的,現(xiàn)在就分享給大家,也給大家做個參考。一起跟隨小編過來看看吧
    2017-07-07
  • Python中利用pyqt5制作指針鐘表顯示實時時間(指針時鐘)

    Python中利用pyqt5制作指針鐘表顯示實時時間(指針時鐘)

    這篇文章主要介紹了Python中利用pyqt5制作指針鐘表顯示實時時間(動態(tài)指針時鐘),本文通過示例代碼給大家介紹的非常詳細,對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下
    2022-02-02
  • 為python設(shè)置socket代理的方法

    為python設(shè)置socket代理的方法

    這篇文章主要介紹了為python設(shè)置socket代理的方法,需要的朋友可以參考下
    2015-01-01
  • pip安裝庫報錯[notice]?A?new?release?of?pip?available:?22.2?->?22.2.2

    pip安裝庫報錯[notice]?A?new?release?of?pip?available:?22.2

    這篇文章主要給大家介紹了關(guān)于pip安裝庫報錯[notice]?A?new?release?of?pip?available:?22.2?->?22.2.2的相關(guān)資料,文中通過圖文將解決的方法介紹的非常詳細,需要的朋友可以參考下
    2023-03-03
  • django 在原有表格添加或刪除字段的實例

    django 在原有表格添加或刪除字段的實例

    今天小編就為大家分享一篇django 在原有表格添加或刪除字段的實例,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2018-05-05
  • python開發(fā)之str.format()用法實例分析

    python開發(fā)之str.format()用法實例分析

    這篇文章主要介紹了python開發(fā)之str.format()用法,結(jié)合實例形式較為詳細的分析了str.format()函數(shù)的功能,使用方法與相關(guān)注意事項,代碼包含詳盡的注釋說明,需要的朋友可以參考下
    2016-02-02
  • Python mlxtend庫數(shù)據(jù)科學(xué)和機器學(xué)習(xí)補充工具功能探索

    Python mlxtend庫數(shù)據(jù)科學(xué)和機器學(xué)習(xí)補充工具功能探索

    這篇文章主要介紹了Python mlxtend庫數(shù)據(jù)科學(xué)和機器學(xué)習(xí)補充工具功能探索,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪
    2024-01-01
  • python 隨機生成10位數(shù)密碼的實現(xiàn)代碼

    python 隨機生成10位數(shù)密碼的實現(xiàn)代碼

    這篇文章主要介紹了python 隨機生成10位數(shù)密碼的實現(xiàn)代碼,在文中給大家提到了生成隨機密碼要實現(xiàn)的功能,本文通過實例代碼給大家介紹的非常詳細,具有一定的參考借鑒價值,需要的朋友可以參考下
    2019-06-06

最新評論