91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Postgresql與Elasticsearch數據同步提高

發布時間:2020-06-11 16:39:58 來源:網絡 閱讀:1704 作者:郭柏雅 欄目:關系型數據庫

一般來說,影響數據庫最大的性能問題有兩個,一個是對數據庫的讀寫操作,一個是數據庫中的數據太大導致操作慢,對于前者我們可以適當借助緩存來減少一部分讀操作,而針對一些復雜的報表分析和搜索可以交給hadoop和elasticsearch,對于寫并發大,讀也并發大,我們可以考慮分庫分表,主從讀寫分離或者兩者結合等方式來提高并發性和時效性,例如PG大并發寫,大數據查看可以用elasticsearch與PG數據同步來讀,可以啟到很好的效果。
ElasticSearch做為搜索服務器,在性能上確實優勢突出,是當前流行的企業級搜索引擎。它提供了一個分布式多用戶能力的全文搜索引擎,基于RESTful web接口。主要用于實時搜索和分析引擎,,支持對結構化數據和非結構數據處理檢索。
例如,我們使用的數據庫時Postgres數據庫,主從配置,從庫主要用于數據分析檢索為主,如果使用postgres進行多表多維度全量方式檢索分析用戶行為等挖掘有價值的數據,這樣性能上無法及時滿足客戶時時性要求,因此我們可以使用Elasticsearch數據庫代替PG從庫做為挖掘分析數據庫,使用過程中發現兩者表與數據的兼容性都還不錯,而且展現數據的性能確實快,
如下圖是同一張表數據在postgres數據庫中對應的表,在Elasticsearch數據庫中對應,說明數據是兼容的。
Postgresql與Elasticsearch數據同步提高

而在postgres數據庫中針對visit_plan_qz 表3073920筆數據進行全量查詢,耗時大于5分鐘都無法正常展現出來,
Postgresql與Elasticsearch數據同步提高

如果使用Elasticsearch進程全量查詢僅使用0.0005秒就可以展現出數據,當然Elasticsearch會自動對該表劃分為5個分片來展現數據。

Postgresql與Elasticsearch數據同步提高
工作原理:
PG關系數據庫 ? 數據庫 ? 表 ? 行 ? 列(Columns)
Elasticsearch ? 索引(Index) ? 類型(type) ? 文檔(Docments) ? 字段(Fields)
可以看出Elasticsearch性能上的優勢在索引,它提供強大的索引能力,Elasticsearch 是通過 Lucene 的倒排索引技術實現比關系型數據庫更快的過濾
Elasticsearch的索引思路:將磁盤里的東西盡量搬進內存,減少磁盤隨機讀取次數(同時也利用磁盤順序讀特性),結合各種算法,用及其苛刻的態度使用內存。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

航空| 榕江县| 鲁甸县| 神池县| 林西县| 新民市| 温州市| 广西| 郯城县| 宜兴市| 扶风县| 舞阳县| 内丘县| 宜章县| 嘉义县| 桑植县| 沾益县| 玉山县| 本溪| 克什克腾旗| 鹤壁市| 织金县| 古浪县| 托克托县| 四子王旗| 兴化市| 克什克腾旗| 土默特左旗| 丹东市| 满城县| 普定县| 明光市| 饶阳县| 宜章县| 朝阳市| 六盘水市| 濉溪县| 盐山县| 衡东县| 山东| 长泰县|