Elasticsearch使用系列-ES增删查改基本操作+ik分词

  • A+
所属分类:.NET技术
摘要

Elasticsearch使用系列-ES简介和环境搭建Elasticsearch使用系列-ES增删查改基本操作+ik分词

Elasticsearch使用系列-ES简介和环境搭建

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

一、安装可视化工具Kibana

ES是一个NoSql数据库应用。和其他数据库一样,我们为了方便操作查看它,需要安装一个可视化工具 Kibana。

官网:https://www.elastic.co/cn/downloads/kibana

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 

 

 

 和前面安装ES一样,选中对应的环境下载,这里选择windows环境,注意安装的版本一定要和ES的版本一致,不然可能会启动不起来。

解压后进到config目录下修改kibana.yml配置文件

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 

 修改完配置,进入bin目录,双击 kibana.bat 文件启动。

启动后,打开kibana地址:http://localhost:5601/ ,出现下面界面就是安装成功了。

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

点自己浏览进入下面

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 点开发工具进入操作ES的界面,我们ES就在下面界面操作。

Elasticsearch使用系列-ES增删查改基本操作+ik分词

二、ES数据结构和数据类型

1.ES数据结构

这里以Mysql作对比,ES7.0以前的结构是Index,Type,Document,ES7.0以后废弃了Type,现在ES和Mysql的结构对比如下

 

MySql Elasitcsearch
database(数据库) Elasitcsearch(实例)
table(表) index(索引)
row(行) document(文档)
column(列) field(字段)

 

2.ES数据类型

  • 字符串:textkeyword  (重点类型)
  • 数值:long,integer,short,byte,double,float,half float,scaled float
  • 日期类型:date
  • 布尔类型:boolean
  • 二进制类型:binary
  • 等等。。。

这里的数据类型标红的是ES的重点类型,其它的和平时开发的类型一样,没什么特别。

三、ES的增删查改基本操作

请求方式 url地址 描述
PUT http://localhost:9200/索引名称 创建索引
POST http://local  
     
     
     
     

1.创建索引,相当于数据库创建表

PUT  index

Elasticsearch使用系列-ES增删查改基本操作+ik分词Elasticsearch使用系列-ES增删查改基本操作+ik分词

PUT user {       "mappings" : {       "properties" : {         "age" : {           "type" : "integer"         },                "name" : {           "type" : "text"         },          "name2" : {           "type" : "keyword"         },            "name3" : {           "type" : "text",           "fields" : {             "keyword" : {               "type" : "keyword",               "ignore_above" : 256             }           }         },         "hobby" : {           "type" : "text"         }       }     } }

View Code

 

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 

这里说一下kibana执行的原理,kibana执行的是http请求,前面的PUT为请求方式,还有POST,GET等,后面的user是索引名称,因为kibana配置了es的信息,

所以会自动带上es的地址和端口,实际的请求为 PUT http://192.168.101.13:9200/user

查看索引字段信息

GET index

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 2.创建文档,相当于数据库插入数据记录

POST index/_doc/id (index:索引名称,_doc:固定,id:指定记录id,不填会自动生成一个唯一id)

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 4.查询

 4.1查询全部

GET index/_search

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 4.2按条件查询

GET user/_search {  "query": {    "term": {      "FIELD": {        "value": "VALUE"      }    }  } }

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 

5.更新

对应sql语句:update user set age=19 where id=1

_doc,doc,_update:固定写法

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 

6.删除

6.1删除文档(相当于删除一条数据)

对应sql语句: delete from user where id=1

DELETE user/_doc/1

6.2删除索引(相当于删除表)

对应sql语句:drop table user

DELETE user

四、全文索引和ik分词

1.全文索引

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

创建索引的时候我上面故意创建了name(text),name1(keyword),name2(text+keyword),然后数据类型也说了text,keyword是ES的重点类型,这里演示他们的区别。

  • keyword类型:查询时条件只能全匹配
  • text类型:全文索引查询,查询时会先分词,然后用分词去匹配查询
  • keyword+text类型,一个字段两种类型,可以全匹配,也可以全文索引查询

keyword查询例子,name2(keyword)的查询:

keyword的查询用term,或terms(配置多个值)

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

因为是全匹配,条件”张三“查到数据,条件”张“时查不到数据。 

text查询例子,name(text)的查询

text的查询用match 

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 因为是全文索引分词匹配,所以条件“张三”和条件“张”的,都把匹配到的数据都查询出来了。

keyword+text查询例子,name3(text+keyword)的查询。

当只想查全匹配时,用term查询

 Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

当想用全文索引查询时,用match

 Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

2.ik分词

1.什么是分词?

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

我搜的是爱祖国,为什么,“爱钓鱼,爱唱歌"的都被搜出来了呢?

因为ES默认内置了一个分词器standard,看下这个分词器的分词结果

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 

 可以看到“爱祖国”的分词结果为“爱,祖,国”,被拆分成了单个字,只要一个字匹配到就查出来,这样的结果很多不是我们想要的。我们需要一款根据常用词语的分词器,这样查到的结果会更准确,

这里就用到了ik分词,ik分词也是企业开发用的最多的。

 2.ik分词器插件安装

官网下载:https://github.com/medcl/elasticsearch-analysis-ik/releases

下载的版本要和es一致。

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 把文件下载后,解压复制到es部署文件的plugins文件夹下,并把文件夹的名称改为ik,必须要叫ik。windows,linux,docker(docker为挂载文件夹的方式把文件映射进去)一样,

然后重启es即可生效。

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 再看一下用ik分词器的分词结果。

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 可以看到,已经是按常用词语分词了。

3.自定义词组

上面“爱祖国”,被分成“爱祖国,祖国”,假如我想“爱组”也是一个词,现在这个词没被收怎么办?

打开刚才的ik文件夹下的config目录

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 里面的.dic结尾的都是分词,打开其中一个看一下。

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 所以我们要自定义词语,可以新建一个myword.dic

里面写上想要的分词

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

然后在IKAnalyzer.cfg.xml文件加上刚才的文件名

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 

 重启es,再看一下分词结果。

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 4.ik分词怎么在索引中使用

创建索引的时候,text类型如果没指定使用分词器,就会默认内置的分词器,所以使用ik分词器时,创建索引时需要指定。

Elasticsearch使用系列-ES增删查改基本操作+ik分词Elasticsearch使用系列-ES增删查改基本操作+ik分词

PUT user2 {       "mappings" : {       "properties" : {         "age" : {           "type" : "integer"         },                "name" : {           "type" : "text"                   },          "name2" : {           "type" : "keyword"         },            "name3" : {           "type" : "text",           "fields" : {             "keyword" : {             "type" : "keyword",             "ignore_above" : 256             }           },           "analyzer": "ik_max_word",           "search_analyzer": "ik_max_word"         },         "hobby" : {           "type" : "text",           "analyzer": "ik_max_word",          "search_analyzer" : "ik_max_word"         }       }     } }

View Code

 Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 把user的数据复制到user2。

Elasticsearch使用系列-ES增删查改基本操作+ik分词

 

 再次查询“爱祖国”,得到一条想要的数据,没有多余数据。证明ik分词在索引中生效了。

 Elasticsearch使用系列-ES增删查改基本操作+ik分词