我的编程空间,编程开发者的网络收藏夹
学习永远不晚

es详解-索引-索引管理详解

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

es详解-索引-索引管理详解

了解基本使用后,我们从索引操作的角度看看如何对索引进行管理。

索引管理的引入

我们在前文中增加文档时,如下的语句会动态创建一个customer的index:

PUT /customer/_doc/1
{
  "name": "John Doe"
}

而这个index实际上已经自动创建了它里面的字段(name)的类型。我们不妨看下它自动创建的mapping:

{
  "mappings": {
    "_doc": {
      "properties": {
        "name": {
          "type": "text",
          "fields": {
            "keyword": {
              "type": "keyword",
              "ignore_above": 256
            }
          }
        }
      }
    }
  }
}

那么如果我们需要对这个建立索引的过程做更多的控制:比如想要确保这个索引有数量适中的主分片,并且在我们索引任何数据之前,分析器和映射已经被建立好。那么就会引入两点:第一个禁止自动创建索引,第二个是手动创建索引

  • 禁止自动创建索引

可以通过在 config/elasticsearch.yml 的每个节点下添加下面的配置:

action.auto_create_index: false

手动创建索引就是接下来文章的内容。

索引的格式

在请求体里面传入设置或类型映射,如下所示:

PUT /my_index
{
    "settings": { ... any settings ... },
    "mappings": {
        "properties": { ... any properties ... }
    }
}
  • settings: 用来设置分片,副本等配置信息
  • mappings: 字段映射,类型等
    • properties: 由于type在后续版本中会被Deprecated, 所以无需被type嵌套

索引管理操作

我们通过kibana的devtool来学习索引的管理操作。

创建索引

我们创建一个user 索引test-index-users,其中包含三个属性:name,age, remarks; 存储在一个分片一个副本上。

PUT /test-index-users
{
  "settings": {
		"number_of_shards": 1,
		"number_of_replicas": 1
	},
  "mappings": {
    "properties": {
      "name": {
        "type": "text",
        "fields": {
          "keyword": {
            "type": "keyword",
            "ignore_above": 256
          }
        }
      },
      "age": {
        "type": "long"
      },
      "remarks": {
        "type": "text"
      }
    }
  }
}

执行结果

  • 插入测试数据

查看数据

  • 我们再测试下不匹配的数据类型(age):
POST /test-index-users/_doc
{
  "name": "test user",
  "age": "error_age",
  "remarks": "hello eeee"
}

你可以看到无法类型不匹配的错误:

修改索引

查看刚才的索引,curl 'localhost:9200/_cat/indices?v' | grep users

yellow open test-index-users                          LSaIB57XSC6uVtGQHoPYxQ 1 1     1    0   4.4kb   4.4kb

我们注意到刚创建的索引的状态是yellow的,因为我测试的环境是单点环境,无法创建副本,但是在上述number_of_replicas配置中设置了副本数是1; 所以在这个时候我们需要修改索引的配置。

修改副本数量为0

PUT /test-index-users/_settings
{
  "settings": {
    "number_of_replicas": 0
  }
}

再次查看状态:

green open test-index-users                          LSaIB57XSC6uVtGQHoPYxQ 1 1     1    0   4.4kb   4.4kb

打开/关闭索引

  • 关闭索引

一旦索引被关闭,那么这个索引只能显示元数据信息,不能够进行读写操作

当关闭以后,再插入数据时:

  • 打开索引

打开后又可以重新写数据了

删除索引

最后我们将创建的test-index-users删除。

DELETE /test-index-users

查看索引

由于test-index-users被删除,所以我们看下之前bank的索引的信息

  • mapping
GET /bank/_mapping

  • settings
GET /bank/_settings

Kibana管理索引

在Kibana如下路径,我们可以查看和管理索引

参考文章

https://www.elastic.co/guide/cn/elasticsearch/guide/current/_creating_an_index.html

https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping.html

https://www.elastic.co/guide/en/elasticsearch/reference/current/removal-of-types.html

https://www.cnblogs.com/quanxiaoha/p/11515057.html

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

es详解-索引-索引管理详解

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

es详解-索引-索引管理详解

了解基本使用后,我们从索引操作的角度看看如何对索引进行管理。ES详解 - 索引:索引管理详解索引管理的引入索引的格式索引管理操作创建索引修改索引打开/关闭索引删除索引查看索引Kibana管理索引参考文章# 索引管理的引入我们在前文中增加文档时,如下的语句会动态创建一个customer的index:PUT /custom
es详解-索引-索引管理详解
2024-04-02

es详解-索引-索引模板-index-template-详解

前文介绍了索引的一些操作,特别是手动创建索引,但是批量和脚本化必然需要提供一种模板方式快速构建和管理索引,这就是本文要介绍的索引模板(Index Template),它是一种告诉Elasticsearch在创建索引时如何配置索引的方法。为了更好的复用性,在7.8中还引入了组件模板。ES详解 - 索引:索引模板(Inde
es详解-索引-索引模板-index-template-详解
2024-04-02

es详解-原理-es原理之索引文档流程详解

ElasticSearch中最重要原理是文档的索引和文档的读取,本文带你理解ES文档的索引过程。ES详解 - 原理:ES原理之索引文档流程详解文档索引步骤顺序单个文档多个文档文档索引过程详解整体的索引流程分步骤看数据持久化过程深入ElasticSearch索引文档的实现机制写操作的关键点Lucene的写Elastics
es详解-原理-es原理之索引文档流程详解
2024-04-02

es详解-查询-dsl查询之全文搜索详解

DSL查询极为常用的是对文本进行搜索,我们叫全文搜索,本文主要对全文搜索进行详解。ES详解 - 查询:DSL查询之全文搜索详解写在前面:谈谈如何从官网学习Match类型match 查询的步骤match多个词深入控制match的匹配精度其它match类型query string类型query_stringquery_st
es详解-查询-dsl查询之全文搜索详解
2024-04-02

Sphinx搜索中的数据索引与存储技术解析(Sphinx如何管理和存储搜索索引?)

Sphinx是一款开源全文搜索引擎,其数据索引和存储技术包含以下核心优势:预先计算倒排索引,实现快速查找含查询单词的文档。索引分片提高搜索性能和可扩展性。分布式搜索允许多个Sphinx服务器协作处理请求。实时索引功能确保搜索结果的及时更新。使用Delta文件和RT索引的专有存储格式,提供快速搜索和索引完整性。支持广泛数据类型,并提供相应的过滤和排序功能。全文搜索功能包括模糊搜索、同义词扩展、标记化和词干提取。优化技术如预计算文档频率、内存映射文件和多线程处理,提高搜索性能。
Sphinx搜索中的数据索引与存储技术解析(Sphinx如何管理和存储搜索索引?)

es详解-原理-es原理之读取文档流程详解

ElasticSearch中最重要原理是文档的索引和文档的读取,前文介绍了索引文档流程,本文带你理解ES文档的读取过程。ES详解 - 原理:ES原理之读取文档流程详解文档查询步骤顺序单个文档多个文档文档读取过程详解深入ElasticSearch读取文档的实现机制读操作Lucene的读Elasticsearch的读Ela
es详解-原理-es原理之读取文档流程详解
2024-04-02

深入理解Elasticsearch的分布式索引机制(Elasticsearch分布式索引如何工作?)

Elasticsearch的分布式索引机制是一种高可用、可扩展且容错的数据管理方式。它使用分片将索引细分,并创建副本以提高数据可用性。主分片处理写入,副本分片处理读取。分片分配策略用于确定分片存储位置。路由机制确保文档始终路由到相同的分片,优化查询性能。合并有助于维护分片大小,提高性能并减少存储开销。通过分布式索引机制,Elasticsearch实现了高可用性、可伸缩性、故障容错性、并行处理和优化查询性能。
深入理解Elasticsearch的分布式索引机制(Elasticsearch分布式索引如何工作?)

Sphinx全文搜索引擎的架构与工作原理详解(Sphinx搜索引擎的内部结构和工作机制是怎样的?)

Sphinx全文搜索引擎采用分布式架构,包括索引服务器、搜索服务器和代理服务器。索引建立过程涉及词项提取、分词和索引创建。搜索查询处理包括在倒排索引中查找匹配文档。结果返回包括从索引服务器获取内容并排序。Sphinx特点包括可伸缩性、高性能、相关性、灵活性、可配置性等,适用于电子商务搜索、网站搜索、数据挖掘等场景。
Sphinx全文搜索引擎的架构与工作原理详解(Sphinx搜索引擎的内部结构和工作机制是怎样的?)

Solr搜索引擎的核心架构及工作原理详解(Solr搜索引擎的内部结构和工作机制是怎样的?)

Solr搜索引擎基于ApacheLucene构建,具有高性能、可扩展性和容错性。其核心架构包括模式、核心、处理器、索引、文档、查询、结果和分面。Solr的工作原理包含索引构建、查询解析、查询优化、查询执行、结果排序、分面聚合等步骤。Solr具备高性能、可扩展性、容错性、可定制性和社区支持等优势,使其广泛用于各种应用程序中。
Solr搜索引擎的核心架构及工作原理详解(Solr搜索引擎的内部结构和工作机制是怎样的?)

Solr搜索中的数据索引与存储机制分析(Solr如何管理搜索数据的索引和存储?)

Solr通过解析文档、词干化、建立倒排索引和段合并来管理索引。存储机制包括索引存储、数据存储和字段值存储。索引和存储协同工作,实现快速文档查找和字段值访问。优化策略包括分片、复制、回滚和快照。Solr架构使用Schema.xml定义索引架构,允许用户定制索引和存储行为。这些机制共同确保了Solr的高速和准确搜索能力,使其适用于海量数据搜索场景。
Solr搜索中的数据索引与存储机制分析(Solr如何管理搜索数据的索引和存储?)

es详解-原理-从图解构筑对es原理的初步认知

在学习ElasticSearch原理时,我推荐你先通过官方博客中的一篇图解文章(虽然是基于2.x版本)来构筑对ES的初步认知(这种认识是体系上的快速认知)。ES详解 - 原理:从图解构筑对ES原理的初步认知前言图解ElasticSearch图解LuceneSegmentInverted IndexStored Fiel
es详解-原理-从图解构筑对es原理的初步认知
2024-04-02

es详解-原理-es原理知识点补充和整体结构

通过上文图解了解了ES整体的原理后,我们便可以基于此知识体系下梳理下ES的整体结构以及相关的知识点,这将帮助你更好的理解ElasticSearch索引文档和搜索文档的原理。ES详解 - 原理:ES原理知识点补充和整体结构ElasticSearch整体结构补充:Lucene索引结构补充:Lucene处理流程补充:Elas
es详解-原理-es原理知识点补充和整体结构
2024-04-02

Elasticsearch分布式搜索在云计算平台上的部署与管理(如何在云计算平台上部署和管理Elasticsearch分布式搜索引擎?)

Elasticsearch分布式搜索在云计算平台上的部署和管理涉及选择云提供商、创建集群、配置安全和网络。管理包括监控、备份、升级、容量规划和高可用性。云平台提供按需定价、自动化、集成和容器支持等特有功能。最佳实践包括选择合适实例类型、配置索引设置、启用副本、使用快照和实施安全措施。通过利用云计算平台的优势,组织可以高效部署和管理Elasticsearch集群,满足大数据搜索和分析的需求。
Elasticsearch分布式搜索在云计算平台上的部署与管理(如何在云计算平台上部署和管理Elasticsearch分布式搜索引擎?)

编程热搜

  • Mysql分表查询海量数据和解决方案
    众所周知数据库的管理往往离不开各种的数据优化,而要想进行优化通常我们都是通过参数来完成优化的。那么到底这些参数有哪些呢?为此在本篇文章中编程学习网笔者就为大家简单介绍MySQL,以供大家参考参考,希望能帮助到大家。以上就是关于大数据的知识点了。喜欢的可以分享给你的朋友,也可以点赞噢~更多内容,就在编程学习网!
    Mysql分表查询海量数据和解决方案
  • 大数据的妙用及17年趋势
    2017年,支持大量结构化和非结构化数据的系统将继续增长。市场需要数据平台来帮助数据管理人员管理和保护大数据,同时允许最终用户进行数据分析。这些系统将逐步成熟,在企业内部的IT系统中更好地运行。所以,我们更要了解大数据!互联网普及使得网民的行为更加多元化,通过互联网产生的数据发展更加迅猛,更具代表性。互联网世界中的商品信息、社交媒体中的图片、文本信息以及视频网站的视频信息,互联网世界中的人与人交互信息、位置信息等,都已经成为大数据的最重要也是增长最快的来源。大家都了解到了吗!更多内容就在编程学习网哟
    大数据的妙用及17年趋势
  • 5G大数据时代空降来袭
    欢迎各位阅读本篇文章,本文主要讲了5G大数据时代。如今 5G 概念已不再陌生,按照行业认同的说法:2017年至2018年 5G 将在国内开始有序测试,2019年进行预商用。工信部之前已表示,中国将在2020年启动 5G 商用。编程学习网教育平台提醒各位:本篇文章纯干货~因此大家一定要认真阅读本篇文章哦!
    5G大数据时代空降来袭
  • es详解-原理-从图解构筑对es原理的初步认知
    在学习ElasticSearch原理时,我推荐你先通过官方博客中的一篇图解文章(虽然是基于2.x版本)来构筑对ES的初步认知(这种认识是体系上的快速认知)。ES详解 - 原理:从图解构筑对ES原理的初步认知前言图解ElasticSearch图解LuceneSegmentInverted IndexStored Fiel
    es详解-原理-从图解构筑对es原理的初步认知
  • elasticsearch-wrapperquery
    在工作中遇到ElasticSearch版本升级时出现Java High Level接口变更导致的兼容性问题: 之前使用的是2.4.x,考虑性能和功能的增强,需要更换为6.4.x; 2.4.x中我们使用DSL语句直接查询(数据的不确定性和方便动态建立查询规则等因素),而新的ES Java 高阶API中去掉了相关接口的支持
    elasticsearch-wrapperquery
  • 学习大数据营销思维(下)
    编程学习网: 其实,通过上面的介绍,我们知道苹果通过各类产品与服务销售相互促进以理及薄利多销的方式来盈利第二种战略联盟类型是合作方的共同赢利。苹果公司打造了一个参与方共同受益的业务系统。
    学习大数据营销思维(下)
  • 纯干货:HLS 协议详解及优化技术全面解析
    编程学习网:HLS (HTTP Live Streaming), 是由 Apple 公司实现的基于 HTTP 的媒体流传输协议。他跟 DASH 协议的原理非常类似,通过将整条流切割成一个小的可以通过 HTTP 下载的媒体文件,然后提供一个配套的媒体列表文件给客户端,让客户端顺序地拉取这些媒体文件播放, 来实现看上去是在播放一条流的效果。HLS 目前广泛地应用于点播和直播领域。
    纯干货:HLS 协议详解及优化技术全面解析
  • 关于Python 代码全面分析
    欢迎各位阅读本篇,Python(KK 英语发音:/ˈpaɪθən/)是一种面向对象、直译式计算机程序设计语言。本篇文章讲述了关于Python 代码全面分析。
    关于Python 代码全面分析
  • es详解-原理-es原理之索引文档流程详解
    ElasticSearch中最重要原理是文档的索引和文档的读取,本文带你理解ES文档的索引过程。ES详解 - 原理:ES原理之索引文档流程详解文档索引步骤顺序单个文档多个文档文档索引过程详解整体的索引流程分步骤看数据持久化过程深入ElasticSearch索引文档的实现机制写操作的关键点Lucene的写Elastics
    es详解-原理-es原理之索引文档流程详解
  • 五大“网管”必备的网络数据分析工具
    是不是在为如何分析统计网络数据和流量烦恼呢?想不想监控、运维、排障轻松一些?下面给大家提供一些免费网络分析工具,以帮助大家更好的掌控自己的网络!编程学习网教育
    五大“网管”必备的网络数据分析工具

目录