首页 / ELEASTATICSEARCH / Elasticsearch初体验

Elasticsearch初体验

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Elasticsearch初体验，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含5467字，纯文字阅读大概需要8分钟。

内容图文

简介

技术分享图片

官网：https://www.elastic.co/cn/products/elasticsearch

技术分享图片

安装
版本说明
Elasticsearch的发展是非常快速的，所以在ES5.0之前，ELK的各个版本都不统一，出现了版本号混乱的状态，所以从5.0开始，所有Elastic Stack中的项目全部统一版本号。

下载
地址：https://www.elastic.co/cn/downloads/elasticsearch

技术分享图片

或者，使用资料中提供的已下载好的安装包。
单机版安装

            #创建elsearch用户，Elasticsearch不支持root用户运行
useradd elsearch
#解压安装包
tar -xvf elasticsearch-6.5.4.tar.gz -C /topcheer/es/
#修改配置文件
vim conf/elasticsearch.yml
network.host: 0.0.0.0  #设置ip地址，任意网络均可访问
#说明：在Elasticsearch中如果，network.host不是localhost或者127.0.0.1的话，就会认为是生产环境，
会对环境的要求比较高，我们的测试环境不一定能够满足，一般情况下需要修改2处配置，如下：
#1：修改jvm启动参数
vim conf/jvm.options
-Xms128m #根据自己机器情况修改
-Xmx128m
#2：一个进程在VMAs(虚拟内存区域)创建内存映射最大数量
vim /etc/sysctl.conf
vm.max_map_count=655360
sysctl -p #配置生效
#启动ES服务
su - elsearch
cd bin
./elasticsearch 或 ./elasticsearch -d #后台启动
#通过访问进行测试，看到如下信息，就说明ES启动成功了
{
  "name": "dSQV6I8",
  "cluster_name": "elasticsearch",
  "cluster_uuid": "v5GPTWAtT5emxFdjigFg-w",
  "version": {
    "number": "6.5.4",
    "build_flavor": "default",
    "build_type": "tar",
    "build_hash": "d2ef93d",
    "build_date": "2018-12-17T21:17:40.758843Z",
    "build_snapshot": false,
    "lucene_version": "7.5.0",
    "minimum_wire_compatibility_version": "5.6.0",
    "minimum_index_compatibility_version": "5.0.0"
 },
  "tagline": "You Know, for Search"
}
#停止服务
root@topcheer:~# jps
68709 Jps
68072 Elasticsearch
kill 68072  #通过kill结束进程

常见问题

            #启动出错，环境：Centos6
[
            1]: max file descriptors [4096] for elasticsearch process is too low, increase to at
least [65536]
#解决：切换到root用户，编辑limits.conf 添加类似如下内容
vi /etc/security/limits.conf
添加如下内容:
* soft nofile 65536
* hard nofile 131072
* soft nproc 2048
* hard nproc 4096
[2]: max number of threads [1024] for user [elsearch] is too low, increase to at least
[4096]
#解决：切换到root用户，进入limits.d目录下修改配置文件。
vi /etc/security/limits.d/90-nproc.conf
#修改如下内容：
* soft nproc 1024
#修改为
* soft nproc 4096
[3]: system call filters failed to install; check the logs and fix your configuration
or disable system call filters at your own risk
#解决：Centos6不支持SecComp，而ES5.2.0默认bootstrap.system_call_filter为true
vim config/elasticsearch.yml
添加：
bootstrap.system_call_filter: false

我此处就直接用docker安装了

技术分享图片

安装的可视化界面，可以查看：https://www.cnblogs.com/dalianpai/p/12347272.html

基本概念
索引

索引（index）是Elasticsearch对逻辑数据的逻辑存储，所以它可以分为更小的部分。
可以把索引看成关系型数据库的表，索引的结构是为快速有效的全文索引准备的，特别是它不存储原始值。
Elasticsearch可以把索引存放在一台机器或者分散在多台服务器上，每个索引有一或多个分片（shard），每个分片可以有多个副本（replica）

文档

存储在Elasticsearch中的主要实体叫文档（document）。用关系型数据库来类比的话，一个文档相当于数据库表中的一行记录。
Elasticsearch和MongoDB中的文档类似，都可以有不同的结构，但Elasticsearch的文档中，相同字段必须有相同类型。
文档由多个字段组成，每个字段可能多次出现在一个文档里，这样的字段叫多值字段（multivalued）。
每个字段的类型，可以是文本、数值、日期等。字段类型也可以是复杂类型，一个字段包含其他子文档或者数组。

映射

所有文档写进索引之前都会先进行分析，如何将输入的文本分割为词条、哪些词条又会被过滤，这种行为叫做映射（mapping）。一般由用户自己定义规则。

文档类型

在Elasticsearch中，一个索引对象可以存储很多不同用途的对象。例如，一个博客应用程序可以保存文章和评论。
每个文档可以有不同的结构。
不同的文档类型不能为相同的属性设置不同的类型。例如，在同一索引中的所有文档类型中，一个叫title的字段必须具有相同的类型。

RESTful API
在Elasticsearch中，提供了功能丰富的RESTful API的操作，包括基本的CRUD、创建索引、删除索引等操作。
创建非结构化索引
在Lucene中，创建索引是需要定义字段名称以及字段的类型的，在Elasticsearch中提供了非结构化的索引，就是不需要创建索引结构，即可写入数据到索引中，实际上在Elasticsearch底层会进行结构化操作，此操作对用户是透明的。
创建空索引：

技术分享图片

            {
    
            "
            acknowledged
            ": true,
    "shards_acknowledged": true,
    "index": "haoke"
}

插入数据：/{索引}/{类型}/{id}

技术分享图片

            {
    
            "
            _index
            ": "haoke",
    "_type": "user",
    "_id": "1001",
    "_version": 1,
    "result": "created",
    "_shards": {
        "total": 1,
        "successful": 1,
        "failed": 0
    },
    "created": true
}

技术分享图片

更新数据
在Elasticsearch中，文档数据是不为修改的，但是可以通过覆盖的方式进行更新。

技术分享图片

            {
    
            "
            _index
            ": "haoke",
    "_type": "user",
    "_id": "1001",
    "_version": 2,
    "result": "updated",
    "_shards": {
        "total": 1,
        "successful": 1,
        "failed": 0
    },
    "created": false
}

技术分享图片

            {
    
            "
            _index
            ": "haoke",
    "_type": "user",
    "_id": "1001",
    "_version": 3,
    "result": "updated",
    "_shards": {
        "total": 1,
        "successful": 1,
        "failed": 0
    }
}

技术分享图片

可以看到数据已经被局部更新了。
删除数据:
在Elasticsearch中，删除文档数据，只需要发起DELETE请求即可。

技术分享图片

            {
    
            "
            found
            ": true,
    "_index": "haoke",
    "_type": "user",
    "_id": "1001",
    "_version": 4,
    "result": "deleted",
    "_shards": {
        "total": 1,
        "successful": 1,
        "failed": 0
    }
}

需要注意的是，result表示已经删除，version也更加了。
如果删除一条不存在的数据，会响应404：

技术分享图片

说明：
删除一个文档也不会立即从磁盘上移除，它只是被标记成已删除。Elasticsearch将会在你之后添加更多索引的时候才会在后台进行删除内容的清理。
搜索数据
根据id搜索数据

技术分享图片

            {
    
            "
            found
            ": true,
    "_index": "haoke",
    "_type": "user",
    "_id": "AXFVSPqV-VE94cJaGxi_",
    "_version": 2,
    "result": "deleted",
    "_shards": {
        "total": 1,
        "successful": 1,
        "failed": 0
    }
}

技术分享图片

DSL搜索
Elasticsearch提供丰富且灵活的查询语言叫做DSL查询(Query DSL),它允许你构建更加复杂、强大的查询。DSL(Domain Specific Language特定领域语言)以JSON请求体的形式出现。

技术分享图片

            {
    
            "
            took
            ": 1,
    "timed_out": false,
    "_shards": {
        "total": 2,
        "successful": 2,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": 1,
        "max_score": 1.0,
        "hits": [
            {
                "_index": "haoke",
                "_type": "user",
                "_id": "1003",
                "_score": 1.0,
                "_source": {
                    "id": 1003,
                    "name": "张1",
                    "age": 25,
                    "sex": "女"
                }
            }
        ]
    }
}

高亮显示

技术分享图片

            {
    
            "
            took
            ": 12,
    "timed_out": false,
    "_shards": {
        "total": 2,
        "successful": 2,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": 3,
        "max_score": 0.5804671,
        "hits": [
            {
                "_index": "haoke",
                "_type": "user",
                "_id": "1001",
                "_score": 0.5804671,
                "_source": {
                    "id": 1001,
                    "name": "张三",
                    "age": 21,
                    "sex": "女"
                },
                "highlight": {
                    "name": [
                        "<em>张</em><em>三</em>"
                    ]
                }
            },
            {
                "_index": "haoke",
                "_type": "user",
                "_id": "1002",
                "_score": 0.46705723,
                "_source": {
                    "id": 1001,
                    "name": "张三1",
                    "age": 22,
                    "sex": "女"
                },
                "highlight": {
                    "name": [
                        "<em>张</em><em>三</em>1"
                    ]
                }
            },
            {
                "_index": "haoke",
                "_type": "user",
                "_id": "1003",
                "_score": 0.12842764,
                "_source": {
                    "id": 1003,
                    "name": "张1",
                    "age": 25,
                    "sex": "女"
                },
                "highlight": {
                    "name": [
                        "<em>张</em>1"
                    ]
                }
            }
        ]
    }
}

聚合统计：

技术分享图片

原文：https://www.cnblogs.com/dalianpai/p/12657298.html

内容总结

以上是互联网集市为您收集整理的Elasticsearch初体验全部内容，希望文章能够帮你解决Elasticsearch初体验所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1076094.html

来源：【匿名】

【上一篇】全文检索-Elasticsearch （三） DSL 【下一篇】Elasticsearchik插件如果能精准查中文？

更多 ►

【Elasticsearch初体验】教程文章相关的互联网学习教程文章

用【NEST】在C#中操作ElasticSearch【代码】【图】

准备工作： VSCode开发环境，在终端控制台（Ctrl+~）输入命令 dotnet add package Nest 安装NEST包，安装好后打开项目的.csproj文件如下图。一、索引数据： 1using Nest;2using System;3 4namespace NetCoreFirst5{6publicclass ImportES7 {8publicstaticstring ElasticsearchMethod()9 { 10//1.通过es服务器 localhost:9200 来定义es client11var node = new Uri("http://localhost:9200"); 12var indexName = "esbot";...

elasticsearch + logstash + kibana 搭建实时日志收集系统【原创】【代码】【图】

实时日志统一收集的好处： 1、快速定位集群中问题机器 2、无需下载整个日志文件（往往比较大，下载耗时多） 3、可以对日志进行统计 a、发现出现次数最多的异常，进行调优处理 b、统计爬虫ip c、统计用户行为，做聚类分析等基于上面的需求，我采用了 ELK（elasticsearch + logstash + kibana）的方案，安装方法请到他们的官网：https://www.elastic.co/ 上面查询，这里我主要讲讲我遇到的问题。...

elasticsearch,http://ip:9200访问不到的解决办法【图】

现在解压elasticsearch之后，启动，通过http://localhost:9200可以访问的到，但是http://ip:9200访问不到，怎么办呢？带你解决，带你飞修改elasticsearch-2.3.3\config\elasticsearch.yml文件重启一下，你就可以好好的玩耍了，good luck ！！！原文：http://www.cnblogs.com/dragkiss/p/5613602.html

【ElasticSearch】中文分词器-IK分词器（六）【代码】【图】

分词介绍什么是分词　　分词就是指将一个文本转化成一系列单词的过程，也叫文本分析，在Elasticsearch中称之为Analysis。　　举例:我是中国人 --> 我/是/中国人分词api　　指定分词器进行分词　　示例：1POST /_analyse 23{ 4 "analyzer": "standard", 5 "text": "hello world" 6 }　　效果如下：　　　　在结果中不仅可以看出分词的结果，还返回了该词在文本中的位置。　　指定索引分词　　示例1POST /person/_analyse 23{...

ElasticSearch-倒排索引

一、正向索引当用户在主页上搜索关键词“手机”时，假设只存在正向索引（forward index），那么就需要扫描索引库中的所有文档，找出所有包含关键词“手机”的文档，再根据打分模型进行打分，排出名次后呈现给用户。因为互联网上收录在搜索引擎中的文档的数目是个天文数字，这样的索引结构根本无法满足实时返回排名结果的要求。文档 --> 单词二、倒排索引把文档ID对应到关键词的映射转换为关键词到文档ID的映射，每个关键词都对应...

Elasticsearch7.6 环境部署【图】

一、安装 Elasticsearch只允许普通用户操作，不允许root用户注意：因为elasticsearch有远程执行脚本的功能所以容易中木马病毒，所以不允许用root用户启动，root用户是起不来的，赋权限，用一般的用户启动要配置network.host才能别的机器或者网卡访问，否则只能是127.0.0.1或者localhost访问，这里配置成自己的局域网ip注意配置yml结尾的配置文件都需要冒号后面加空格才行1、下载elasticsearch7.6版本，上传到/opt路径下。下载地址...

elasticsearch搜索类型简介【代码】

简单搜索GET请求非常简单——你能轻松获取你想要的文档。让我们来进一步尝试一些东西，比如简单的搜索！我们尝试一个最简单的搜索全部员工的请求：GET /megacorp/employee/_search接下来，让我们搜索姓氏中包含“jake”的员工。要做到这一点，我们将在命令行中使用轻量级的搜索方法。这种方法常被称作查询字符串(query string)搜索，因为我们像传递URL参数一样去传递查询语句：GET /megacorp/employee/_search?q=last_name:jake 我...

Elasticsearch的javaAPI之get,delete,bulk【代码】

Elsasticsearch的javaAPI之getget API同意依据其id获得指定index中的基于json document。以下的样例得到一个JSON document（index为twitter,type为tweet,id为价值1） GetResponse response = client.prepareGet("twitter","tweet","1") .execute() .actionGet();在get操作的很多其它信息,能够查看REST get docs 线程操作Get API同意你设置线程来运行操作。这样实际将运行API上运行的是同样的节点(API上运行一个分配在...

ElasticSearch之动态映射和模板

1 类型确定机制mappingsnumeric_detectiondynamic :是否支持动态添加字段2 动态映射希望根据不同情形，如JSON格式中的字段名称和字段类型，来确定不同类型。3 索引模板本文出自 “实践高并发架构” 博客，请务必保留此出处http://feifan0416.blog.51cto.com/1319656/1757371原文：http://feifan0416.blog.51cto.com/1319656/1757371

elasticsearch API列表

获取当前的所有配置curl -XPUT ‘http://localhost:9200/_all/_settings‘{"debitlist":{"settings":{"index":{"creation_date":"1485160809262","number_of_shards":"1","number_of_replicas":"0","version":{"created":"1060299"},"uuid":"f5_trQOERqWoHTDqdbMTxw"}}}会返回所有的索引，创建日期、主分片数量、从分片数量等信息获取文档数量curl -XPUT ‘http://localhost:9200/_count?pretty‘_count?pretty 可以简写为_count65...

Elasticsearch安装说明【代码】

ElasticSearch是一个基于Lucene构建的开源，分布式，RESTful搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便1、下载jdk-7u71-linux-x64.gz2、 Tar zxvf jdk-7u71-linux-x64.gz3、 mv jdk1.7.0_71/ /home/work/local/java/4、 vim /etc/profileexport JAVA_HOME=/home/work/local/javaexportJRE_HOME=/home/work/local/java/jreexportCLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATHexpo...

ElasticSearch 索引、文档的使用【代码】

ES中的几个概念索引 index相当于关系数据库中的数据库类型 type相当于关系数据库中的表ES 5.x中?个index可以新建多个typeES 6.x中?个index中只能新建?个typeES 7.x中只能使用内置的_doc，不能自己新建type 映射 mapping定义每个字段的类型等信息，相当于关系数据库中的表结构字段 field相当于关系数据库表的字段 ?档 document相当于关系数据库中的?条记录分? shard集群之后，每个节点存储index的一部分，这一部分叫做一个分片。...

ELK---- Elasticsearch 使用ik中文分词器【代码】【图】

0、默认分词器。默认分词器，查询的时候会把中文一个汉字当作一个关键字拆分，这样是不符合我们的需求的，所以需要安装分词器。1、下载分词器。当前有多种分词器可下载，据说比较好用的是IK分词器。注意，下载分词器的时候，版本必须要与Elasticsearch安装的版本一致，否则会出现不可描述的错误。下载地址: https://github.com/medcl/elasticsearch-analysis-ik/releases注意: es-ik分词插件版本一定要和es安装的版本对应之前自带的...

Elasticsearch 7 : 文档 _id 的长度限制【代码】【图】

PUT student {"mappings" : {"properties" : {"name" : {"type" : "keyword"}}},"settings" : {"index" : {"number_of_shards" : 1}} }插入简单数据测试POST student/_doc/1 {"name": "1111" }成功插入。POST student/_doc/0123456789 {"name": "2222" }成功插入。插入 _id 长度为 230 字节的数据POST student/_doc/0123456789_0123456789_0123456789_0123456789_0123456789_0123456789_0123456789_0123456789_0123456789_01234567...

ElasticSearch 搜索【代码】

ES有2种搜索方式term系列match系列 term系列搜索termPOST 192.168.1.9:9200/mall/_search { "query":{"term":{"goods_name":"苹果"}} }匹配机制是equals，指定字段的值要相等才算匹配，返回所有匹配的document。如果是float这种数值型，10.0、10是equals的，也算匹配的。 termsPOST 192.168.1.9:9200/mall/_search { "query":{"terms":{"goods_name":["桃子","梨子"]}} }数组，只要该字段的值是数组中的任意一个元素，就认为该文...

ELEASTATICSEARCH - 最新教程

用【NEST】在C#中操作ElasticSearch elasticsearch + logstash + kibana 搭...elasticsearch,http://ip:9200访问不到...【ElasticSearch】中文分词器-IK分词器...ElasticSearch-倒排索引 Elasticsearch7.6 环境部署 elasticsearch搜索类型简介 Elasticsearch的javaAPI之get,delete,b...ElasticSearch之动态映射和模板 elasticsearch API列表

ELEASTATICSEARCH - 最热教程

Elasticsearch Java 入门教程之聚合常用...搭建elasticsearch配置java11环境 elasticsearch windows下ElasticSearch7.x集群开启X-P...ElasticSearch索引字段检索时使其不区分...搜索引擎ElasticSearch系列（四）： El...java – 使用带有嵌套对象的Criteria的...Elasticsearch通关教程（五）：如何通过...elasticsearch-head连接不上es elasticsearch Terms Query 实现类似于...