91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

基于hanlp的es分詞插件

發布時間:2020-08-10 04:47:05 來源:ITPUB博客 閱讀:198 作者:adnb34g 欄目:互聯網科技


摘要: elasticsearch是使用比較廣泛的分布式搜索引擎,es提供了一個的單字分詞工具,還有一個分詞插件ik使用比較廣泛,hanlp是一個自然語言處理包,能更好的根據上下文的語義,人名,地名,組織機構名等來切分詞

Elasticsearch

默認分詞

  基于hanlp的es分詞插件

輸出:  

  基于hanlp的es分詞插件

IK分詞  

  基于hanlp的es分詞插件

輸出:  

  基于hanlp的es分詞插件

hanlp分詞

  基于hanlp的es分詞插件

輸出:

  基于hanlp的es分詞插件

ik分詞沒有根據句子的含義來分詞,hanlp能根據語義正確的切分出詞

安裝步驟:  

1、進入https://github.com/pengcong90/elasticsearch-analysis-hanlp,下載插件并解壓到es的plugins目錄下,修改analysis-hanlp目錄下的hanlp.properties文件,修改root的屬性,值為analysis-hanlp下的data

目錄的地址

2、修改es config目錄下的jvm.options文件,最后一行添加

-Djava.security.policy=../plugins/analysis-hanlp/plugin-security.policy

 

重啟 es

GET /_analyze?analyzer=hanlp-index&pretty=true

{

“text”:”張柏芝士蛋糕店”

}

測試是否安裝成功

analyzer有hanlp-index(索引模式)和hanlp-smart(智能模式)

自定義詞典

修改 plugins/analysis-hanlp/data/dictionary/custom下的 我的詞典.txt文件

格式遵從 [單詞] [詞性A] [A的頻次]

修改完后刪除同目錄下的 CustomDictionary.txt.bin文件

重啟 es服務

 


向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

兴国县| 新兴县| 临清市| 浦城县| 乐至县| 乡城县| 太康县| 东乡县| 迁安市| 凤凰县| 富宁县| 福建省| 金堂县| 舒兰市| 龙海市| 油尖旺区| 光泽县| 琼海市| 砚山县| 淳化县| 基隆市| 阿瓦提县| 伊宁市| 正蓝旗| 安泽县| 沧源| 涞源县| 玉田县| 台中县| 南丹县| 桓台县| 焉耆| 额敏县| 蒙山县| 杭锦旗| 彝良县| 惠安县| 盐边县| 永年县| 瑞昌市| 长武县|