elasticsearch 索引过程-低调大师

elasticsearch 索引过程

2017-11-11 824

索引过程

1 IndexRequest

UUID工具自动生成一个uuid，代码在IndexRequest的process方法内。

2TransportIndexAction

根据索引数据的id、类型以及索引分片信息进行哈希取模，确定把该条数据分配到那个分片。

3. 并找到数据要分配到的分片的主分片，先把索引请求提交到主分片处理

路由校验，然后获取主share的信息，executeIndexRequestOnPrimary是最重要的方法

4.创建索引文档结构体

判断索引操作的类型，索引操作有两种，一种是INDEX一种是CREATE

5. 如果不是主分片，抛出异常

6. 判断文档是否自动创建，如果是开始解析文档结构

7. 如果是动态文档，增加mapping映射，否则返回Index对象

8. 如果是创建

与上面类似，只是多了一个id

9．返回到主方法

如果是需要创建文档结构，先创建文档结构

创建完后，二次校验一下，是否创建成功

10. 调用创建文档接口

11. 检验是否可写状态刷新最后更新时间，并启动状态检查

12 调用luence

13 如果是创建 addDocuments，如果是更新updateDocuments。

14 增加其实也是更新操作

15. 剩下是记录log和一些统计信息

Translog.LocationtranslogLocation =translog.add(new Translog.Index(index));

16. 里面还有很多锁，还没有看懂！！！

本文转自whk66668888 51CTO博客，原文链接:http://blog.51cto.com/12597095/1962754

微信关注我们

原文链接：https://yq.aliyun.com/articles/553786

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

elasticsearch 特殊字段

Lucene中，高亮功能和store属性是否存储息息相关，因为需要根据偏移位置到原始文档中找到关键字才能加上高亮的片段。在Elasticsearch，因为_source中已经存储了一份原始文档，可以根据_source中的原始文档实现高亮，在索引中再存储原始文档就多余了，所以Elasticsearch默认是把store属性设置为no。 ES默认检索只会返回ID，如果在禁用source情况下，你需通过根据这个ID去去倒排索引中去取每个Field数据，效率不高。而反之，在启用source的情况下可以根据ID直接检索对应source JSON的字段，不用去倒排索引去按Field取数据。所以建议保留 all字段在全文检索中很有用处，此时你不要制定检索的字段。比如你检索的范围有30多个字段（其中几个权重较高，其他都一样），不用all写查询语句将非常吃力。本文转自whk66668888 51CTO博客，原文链接:http://blog.51cto.com/12597095/1964328

2017-11-12

525

ES_JAVA_OPTS="-Xms10g-Xmx10g"./bin/elasticsearch 本文转自whk66668888 51CTO博客，原文链接:http://blog.51cto.com/12597095/1960819

2017-11-12

638

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。