作者sean72 (.)
看板Soft_Job
标题[问题] full text search / elastic
时间Fri Mar 10 02:44:55 2017
请问我想在我的资料库建构一个full text search
而且需要能够支援中文字型
请问elastic search能够做到吗?
某A朋友曾经随口跟我说过solr 但是某B跟我说solr对於中文的支援度非常差
或是该用什麽其他的engine?
谢谢
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 207.141.218.17
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Soft_Job/M.1489085099.A.922.html
1F:推 ghchen: elastic与solr的背後都是lucene,本身工作有用到solr,中 03/10 07:26
2F:→ ghchen: 文处理是可以的,elastic大概也行吧 03/10 07:26
3F:推 ahli: google elastic 全文检索 中文 感觉蛮多人用的 03/10 10:23
4F:→ ahli: 你看要不要参考一下他们做出来的东西来考虑一下 03/10 10:24
5F:→ ahli: 好像还有看到类似金庸小说的search engine XD.. 03/10 10:24
6F:推 NCUking: 中文搜寻重点在切token 关键字:analyzer 03/10 12:49
7F:推 NCUking: 只要求有就好的话 用standard也是可以 03/10 12:51
8F:推 cookie1115: elastic中文搜寻还ok 但是要调到"准"要花很多时间 03/10 14:30
9F:推 ldkrsi: 不用管断词 把中文当成英文的片语搜就好 03/10 18:29
10F:→ manaup: 中文全文检索的灵魂就是断词的说... 03/10 21:55
11F:推 coronach: es跟solr主要的差异不在底层,底下都是lucene,断词也 03/10 22:40
12F:→ coronach: 都可以换,主要是看你喜欢那种API跟需要什麽功能,两者 03/10 22:40
13F:→ coronach: 都要注意版本差异。中文断词的部分就是看你的搜寻是找 03/10 22:40
14F:→ coronach: 得到就好还是会在意正确性,前者随便切个bigram,後者 03/10 22:40
15F:→ coronach: 就是要建词典跟找个好的断词lib 03/10 22:40
16F:→ realbout: 中文没断好,会很搞笑 03/11 09:58
17F:→ hanbz: solr跟elasticsearch对中文的支援是一模一样的< 03/11 13:07
18F:→ hanbz: 都是吃底层的analyzer,中文大多使用cjk,你也可以自建词库 03/11 13:09
19F:→ hanbz: 要做到语意分析会很不容易 03/11 13:09
20F:推 allan80625: 可以,建议可以下载RTF版,里面有内建中文analyzer 03/12 00:51
21F:→ allan80625: 再去设定你要mapping的资料库 03/12 00:52
22F:→ allan80625: 中文分词器(analyzer)关键字:ik分词器 03/12 00:53