您好,登錄后才能下訂單哦!
1、安裝Elasticsearch數據庫
PS:在此之前需首先安裝Java SE環境
下載elasticsearch-6.5.2版本,進入/elasticsearch-6.5.2/bin目錄,雙擊執行elasticsearch.bat 打開瀏覽器輸入http://localhost:9200 顯示以下內容則說明安裝成功
安裝head插件,便于查看管理(還可以用kibana)
首先安裝Nodejs(下載地址https://nodejs.org/en/)
再下載elasticsearch-head-master
包解壓到/elasticsearch-6.5.2/下(鏈接: https://pan.baidu.com/s/1q3kokFhpuJ2Q3otPgu7ldg
提取碼: 1rpp
修改配置文件elasticsearch-6.5.2\config\elasticsearch.yml如下:
進入elasticsearch-head-master目錄下執行npm install -g grunt-cli,再執行npm install安裝依賴
在elasticsearch-head-master
目錄下找到Gruntfile.js文件修改服務器監聽地址如下:
執行grunt server命令啟動head服務
訪問地址 http://localhost:9100/ 即可訪問head管理頁面
2、將json文件寫入ES數據庫(py腳本如下)
# -*- coding: UTF-8 -*- from itertools import islice import json , sys from elasticsearch import Elasticsearch , helpers import threading _index = 'indextest' #修改為索引名 _type = 'string' #修改為類型名 es_url = 'http://192.168.116.1:9200/' #修改為elasticsearch服務器 reload(sys) sys.setdefaultencoding('utf-8') es = Elasticsearch(es_url) es.indices.create(index=_index, ignore=400) chunk_len = 10 num = 0 def bulk_es(chunk_data): bulks=[] try: for i in xrange(chunk_len): bulks.append({ "_index": _index, "_type": _type, "_source": chunk_data[i] }) helpers.bulk(es, bulks) except: pass with open(sys.argv[1]) as f: while True: lines = list(islice(f, chunk_len)) num =num +chunk_len sys.stdout.write('\r' + 'num:'+'%d' % num) sys.stdout.flush() bulk_es(lines) if not lines: print "\n" print "task has finished" break
總結
以上所述是小編給大家介紹的Python將json文件寫入ES數據庫的方法,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對億速云網站的支持!
如果你覺得本文對你有幫助,歡迎轉載,煩請注明出處,謝謝!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。