欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

Python將json文件寫入ES數(shù)據(jù)庫的方法

 更新時間：2019年04月10日 10:00:54   作者：poziiey  
這篇文章主要介紹了Python將json文件寫入ES數(shù)據(jù)庫的方法，本文給大家介紹的非常詳細(xì)，具有一定的參考借鑒價值 ,需要的朋友可以參考下

1、安裝Elasticsearch數(shù)據(jù)庫

PS：在此之前需首先安裝Java SE環(huán)境

下載elasticsearch-6.5.2版本，進(jìn)入/elasticsearch-6.5.2/bin目錄，雙擊執(zhí)行elasticsearch.bat 打開瀏覽器輸入http://localhost:9200 顯示以下內(nèi)容則說明安裝成功

安裝head插件，便于查看管理（還可以用kibana）

首先安裝Nodejs（下載地址https://nodejs.org/en/）

再下載elasticsearch-head-master包解壓到/elasticsearch-6.5.2/下（鏈接: https://pan.baidu.com/s/1q3kokFhpuJ2Q3otPgu7ldg

提取碼: 1rpp

修改配置文件elasticsearch-6.5.2\config\elasticsearch.yml如下：

進(jìn)入elasticsearch-head-master目錄下執(zhí)行npm install -g grunt-cli，再執(zhí)行npm install安裝依賴

在elasticsearch-head-master目錄下找到Gruntfile.js文件修改服務(wù)器監(jiān)聽地址如下：

執(zhí)行g(shù)runt server命令啟動head服務(wù)

訪問地址 http://localhost:9100/ 即可訪問head管理頁面

2、將json文件寫入ES數(shù)據(jù)庫（py腳本如下）

# -*- coding: UTF-8 -*-
from itertools import islice
import json , sys
from elasticsearch import Elasticsearch , helpers
import threading
_index = 'indextest' #修改為索引名
_type = 'string'  #修改為類型名
es_url = 'http://192.168.116.1:9200/' #修改為elasticsearch服務(wù)器
reload(sys)
sys.setdefaultencoding('utf-8')
es = Elasticsearch(es_url)
es.indices.create(index=_index, ignore=400)
chunk_len = 10
num = 0
def bulk_es(chunk_data):
 bulks=[]
 try:
  for i in xrange(chunk_len):
   bulks.append({
     "_index": _index,
     "_type": _type,
     "_source": chunk_data[i]
    })
  helpers.bulk(es, bulks)
 except:
  pass
with open(sys.argv[1]) as f:
 while True:
  lines = list(islice(f, chunk_len))
  num =num +chunk_len
  sys.stdout.write('\r' + 'num:'+'%d' % num)
  sys.stdout.flush()
  bulk_es(lines)
  if not lines:
   print "\n"
   print "task has finished"
   break

總結(jié)

以上所述是小編給大家介紹的Python將json文件寫入ES數(shù)據(jù)庫的方法，希望對大家有所幫助，如果大家有任何疑問請給我留言，小編會及時回復(fù)大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持！

如果你覺得本文對你有幫助，歡迎轉(zhuǎn)載，煩請注明出處，謝謝！

相關(guān)文章

最新評論