当前位置: 首页 > news >正文

两句话理解 ElasticSearch 搜索引擎数据库的作用

一个有两千万商品的商品表,如何提高根据商品名关键字检索商品的效率,搜索引擎数据库 ElasticSearch

一、个人理解

  • 在 MySQL 数据库中有一个商品表,表中有 2 千万个商品数据,现在要根据商品名称关键字,去查找相关的商品,如何提高效率。
  • 此时如果想提高效率,需要用到 elasticsearch 建立商品索引,提高根据商品名称关键字查找商品的效率。
  • 你可能会想到,MySQL 使用 like 模糊查询不行吗?加索引不就可以提高效率吗?模糊查询的字段索引是失效的。

二、AI 验证理解

你的理解非常正确,这正是 Elasticsearch (ES) 最擅长的场景之一。

面对 2000 万条数据的商品表,使用 MySQL 进行商品名称的关键字查询(尤其是模糊查询)会出现严重的性能瓶颈。而引入 Elasticsearch 建立索引,是业界公认的提升查询效率的最佳实践。

为了让你更清楚地了解其中的原因和具体做法,我为你详细拆解一下:

❓ 1. 为什么要用 Elasticsearch?(原理对比)

在处理“商品名称关键字搜索”这种需求时,MySQL 和 ES 的底层机制有本质区别:

特性MySQL (B+树索引)Elasticsearch (倒排索引)
存储结构按行存储,B+树主要用于加速主键或唯一键查找。倒排索引。将商品名称拆解成一个个词语,建立“词语 -> 商品”的映射。
模糊查询使用LIKE '%关键字%'会导致全表扫描,2000万数据响应极慢(可能需要数秒甚至更久)。天生为搜索设计。输入“苹果”,直接找出包含“苹果”的所有商品 ID。
分词能力原生分词能力弱,对中文支持不友好。支持强大的中文分词器(如 IK 分词器),能智能切分“华为手机”为“华为”和“手机”。
适用场景事务处理、精确匹配(如通过 ID 查商品)。全文检索、模糊搜索、多维度筛选。

结论:对于“根据名称关键字找商品”,ES 的速度通常是毫秒级的,而 MySQL 在大数据量下可能是秒级甚至超时。

🚀 2. 具体如何做?(架构方案)

你不需要抛弃 MySQL,而是采用“MySQL + ES” 的混合架构

  • MySQL:作为主库,负责存储商品的完整数据(库存、价格、销量等),保证数据的准确性和事务一致性。
  • Elasticsearch:作为查询库,只负责根据商品名称、描述等进行快速检索。

数据同步流程:

  1. 同步机制:利用 Canal 或 Logstash 监听 MySQL 的 Binlog 日志。
  2. 写入:当商品信息在 MySQL 中被修改(增删改)时,通过程序将变更同步到 ES 中。
  3. 查询:前端搜索请求直接发往 ES,ES 返回商品 ID 列表,应用层再根据 ID 去 MySQL 或缓存中获取详细信息。

💡 3. 针对你的场景,还需要注意什么?

虽然 ES 能解决搜索慢的问题,但在实施时,我有几点建议供你参考:

  • 数据一致性:ES 是通过异步方式从 MySQL 同步数据的,所以会有1-2 秒钟的延迟。如果用户刚上架商品立刻搜索,可能搜不到。这在搜索场景中通常是可接受的(最终一致性)。
  • 分页问题:如果你不仅要搜,还要翻到第 1000 页,MySQL 的 LIMIT 10000, 20 会很慢。ES 的深度分页(Deep Pagination)虽然也有优化空间,但配合 search_after 特性,处理 2000 万数据的翻页会比 MySQL 更高效。
  • 冷热数据分离:如果这 2000 万数据中,有大量是下架或很久没浏览的“冷数据”,可以考虑只把热数据同步到 ES,进一步节省资源。

总结来说:你的思路完全正确。对于 2000 万级别的商品表,引入 Elasticsearch 来处理商品名称的模糊搜索,是提升效率的最优解。

http://www.jsqmd.com/news/217241/

相关文章:

  • 西门子PLC模拟量滤波程序:1200与1500通用的实用功能块
  • 容器-Docker逃逸的各种手法总结!
  • VisionPro之缺陷检测解决策略之七:直接区域灰度判断-CogHistogramTool
  • C++计算两个向量之间的三角函数值(sin,cos,tan)
  • 【互联网产品助理的成长之路(7)】需求中止的判断方法
  • 【毕业设计】基于python_CNN卷积神经网络对甜点识别
  • elf 格式 relocation 概念
  • 计算机深度学习毕设实战-基于python-CNN卷积神经网络对盆栽识别
  • 5V供电 2A单节开关型锂电池充电芯片 XR4420
  • 给wordpress网站的图片加alt标签
  • 计算机三级-嵌入式组-考点汇总-嵌入式系统软件
  • 【实战案例】火语言RPA获取下拉联想推荐词
  • 2026 年用什么 CMS 做网站更合适?一些实际对比思考
  • 【行业深度】2025中国酒店业法务数字化转型洞察报告:大型集团如何破解“规模负重”难题?
  • 华为OD技术面真题 - 计算机网络 - 2
  • 深度学习毕设选题推荐:基于python-CNN卷积神经网络对盆栽识别
  • 计算机中的符号是什么意思?
  • 通信协议仿真:通信协议基础_(7).协议仿真的工具与软件
  • 导师严选8个AI论文写作软件,专科生搞定毕业论文+格式规范!
  • 导师推荐9个一键生成论文工具,自考本科生轻松搞定毕业论文!
  • SnapShot硬盘备份软件:一款小巧强大的德国军工级数据备份方案
  • mysql的分区表
  • 【干货收藏】RAG调优完整指南:从基础到GraphRAG,提升大模型回答准确率
  • 保姆级教程:使用Dify搭建知识库+Ollama部署本地模型,零基础也能轻松上手!
  • 最新APP导航下载页系统源码 带后台
  • 你画我猜计时答题对战房间酒馆互动神器H5开源
  • AI产品经理进阶指南+大模型全栈学习路线:104G资源包助你从零到实战
  • 深度学习毕设选题推荐:基于python_CNN卷积神经网络对甜点识别
  • 公众号图片圆角与阴影样式配置实战(以135编辑器为例)
  • 千寻运动助手V3.1小程序源码 全开源版