ES的基本组成和es的优势以及搜索写入原理

Elasticsearch(ES)是一个基于Lucene构建的开源搜索和分析引擎,它使你的数据可被快速搜索和分析。

ES的基础组成:

  • 节点(Node):运行Elasticsearch实例的服务器被称为节点。
  • 集群(Cluster):由一个或多个节点组成,这些节点有相同的cluster.name配置,它们共同持有你的数据,并且一起提供搜索和分析服务。
  • 分片(Shard):索引可以拆分成多个分片,这些分片可以分布在不同的节点上。分片是数据的容器,分片是Elasticsearch 在集群中分配数据的基本单位。
  • 副本(Replica):每个分片可以有一个或多个副本,副本是分片的副本,目的是提供高可用性,当主分片失败时,副本分片会自动升级为新的主分片。

ES的优势:

  • 分布式搜索引擎:Elasticsearch可以在任何数据集中实现近实时的搜索。
  • 高可用性:Elasticsearch是分布式的,它可以在节点失败时自动管理故障转移,重新平衡数据。
  • 自动发现:Elasticsearch可以在数据节点增加或减少时自动重新平衡数据。
  • 富的搜索功能:Elasticsearch提供强大的搜索功能,包括全文搜索、模糊搜索、区间搜索等。
  • 速度快:Elasticsearch是用Java编写的,专注于搜索性能。

搜索和写入的基本原理:

  • 写入(Indexing):文档被索引时,Elasticsearch首先确定文档应该存储在哪个分片上。然后,节点会处理文档并将其存储到分片中。
  • 搜索(Searching):用户发送搜索请求,Elasticsearch确定包含所需数据的分片,并并行地在这些分片上执行搜索。最后,它将结果组合在一起,并返回最终的搜索结果。

搜索和写入的具体流程通常涉及以下步骤:

  1. 索引文档:用户将数据发送到Elasticsearch进行索引。
  2. 文档路由:Elasticsearch使用文档ID来确定文档应该存储在哪个分片上。
  3. 分片请求:节点将文档发送到对应的分片进行处理。
  4. 写入分片:分片将文档存储在磁盘上,并更新相关的索引段。
  5. 搜索请求:用户发送搜索请求,Elasticsearch确定必要的分片并查询它们。
  6. 合并结果:收集来自所有相关分片的结果,并将它们合并成最终的搜索结果集。

以上是Elasticsearch的基本概念和搜索写入的基本原理,具体实现细节会更加复杂,包括分布式协调、索引机制、文件系统缓存等。

评论已关闭

推荐阅读

DDPG 模型解析,附Pytorch完整代码
2024年11月24日
DQN 模型解析,附Pytorch完整代码
2024年11月24日
AIGC实战——Transformer模型
2024年12月01日
Socket TCP 和 UDP 编程基础(Python)
2024年11月30日
python , tcp , udp
如何使用 ChatGPT 进行学术润色?你需要这些指令
2024年12月01日
AI
最新 Python 调用 OpenAi 详细教程实现问答、图像合成、图像理解、语音合成、语音识别(详细教程)
2024年11月24日
ChatGPT 和 DALL·E 2 配合生成故事绘本
2024年12月01日
omegaconf,一个超强的 Python 库!
2024年11月24日
【视觉AIGC识别】误差特征、人脸伪造检测、其他类型假图检测
2024年12月01日
[超级详细]如何在深度学习训练模型过程中使用 GPU 加速
2024年11月29日
Python 物理引擎pymunk最完整教程
2024年11月27日
MediaPipe 人体姿态与手指关键点检测教程
2024年11月27日
深入了解 Taipy:Python 打造 Web 应用的全面教程
2024年11月26日
基于Transformer的时间序列预测模型
2024年11月25日
Python在金融大数据分析中的AI应用(股价分析、量化交易)实战
2024年11月25日
AIGC Gradio系列学习教程之Components
2024年12月01日
Python3 `asyncio` — 异步 I/O,事件循环和并发工具
2024年11月30日
llama-factory SFT系列教程:大模型在自定义数据集 LoRA 训练与部署
2024年12月01日
Python 多线程和多进程用法
2024年11月24日
Python socket详解,全网最全教程
2024年11月27日