91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Python將json文件寫入ES數據庫的方法

發布時間:2020-10-16 11:01:51 來源:腳本之家 閱讀:249 作者:poziiey 欄目:開發技術

1、安裝Elasticsearch數據庫

PS:在此之前需首先安裝Java SE環境

下載elasticsearch-6.5.2版本,進入/elasticsearch-6.5.2/bin目錄,雙擊執行elasticsearch.bat 打開瀏覽器輸入http://localhost:9200 顯示以下內容則說明安裝成功

Python將json文件寫入ES數據庫的方法

安裝head插件,便于查看管理(還可以用kibana)

首先安裝Nodejs(下載地址https://nodejs.org/en/)

再下載elasticsearch-head-master包解壓到/elasticsearch-6.5.2/下(鏈接: https://pan.baidu.com/s/1q3kokFhpuJ2Q3otPgu7ldg

提取碼: 1rpp

修改配置文件elasticsearch-6.5.2\config\elasticsearch.yml如下:

Python將json文件寫入ES數據庫的方法

進入elasticsearch-head-master目錄下執行npm install -g grunt-cli,再執行npm install安裝依賴

elasticsearch-head-master目錄下找到Gruntfile.js文件修改服務器監聽地址如下:

Python將json文件寫入ES數據庫的方法

執行grunt server命令啟動head服務

Python將json文件寫入ES數據庫的方法

訪問地址 http://localhost:9100/ 即可訪問head管理頁面

Python將json文件寫入ES數據庫的方法

2、將json文件寫入ES數據庫(py腳本如下)

# -*- coding: UTF-8 -*-
from itertools import islice
import json , sys
from elasticsearch import Elasticsearch , helpers
import threading
_index = 'indextest' #修改為索引名
_type = 'string'  #修改為類型名
es_url = 'http://192.168.116.1:9200/' #修改為elasticsearch服務器
reload(sys)
sys.setdefaultencoding('utf-8')
es = Elasticsearch(es_url)
es.indices.create(index=_index, ignore=400)
chunk_len = 10
num = 0
def bulk_es(chunk_data):
 bulks=[]
 try:
  for i in xrange(chunk_len):
   bulks.append({
     "_index": _index,
     "_type": _type,
     "_source": chunk_data[i]
    })
  helpers.bulk(es, bulks)
 except:
  pass
with open(sys.argv[1]) as f:
 while True:
  lines = list(islice(f, chunk_len))
  num =num +chunk_len
  sys.stdout.write('\r' + 'num:'+'%d' % num)
  sys.stdout.flush()
  bulk_es(lines)
  if not lines:
   print "\n"
   print "task has finished"
   break

總結

以上所述是小編給大家介紹的Python將json文件寫入ES數據庫的方法,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對億速云網站的支持!

如果你覺得本文對你有幫助,歡迎轉載,煩請注明出處,謝謝!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

比如县| 宜宾市| 澎湖县| 潮安县| 沈阳市| 肥西县| 平阴县| 偏关县| 灵石县| 宜州市| 乌海市| 周至县| 土默特左旗| 贡嘎县| 合水县| 来安县| 金平| 汾西县| 西华县| 基隆市| 靖宇县| 南丰县| 定远县| 霍邱县| 嵊州市| 许昌市| 峡江县| 赣州市| 平潭县| 泗洪县| 定陶县| 营口市| 云林县| 张家界市| 东源县| 高淳县| 成安县| 晋宁县| 安吉县| 夏河县| 吉林市|