标签： search

发布于

MySQL高阶讲座之：`MySQL`的`Fulltext Search`：其在`InnoDB`中的实现与`N-Gram`解析器。

各位观众老爷，大家好！欢迎来到“MySQL高阶讲座”！今天，咱们要聊聊MySQL里的文本搜索大杀器——Fulltext Search。不过，今天咱们要玩点高级的，深入到InnoDB存储引擎的底层，再扒一扒N-Gram解析器的皮。准备好了吗？Let’s go！ 一、 Fulltext Search：文本搜索，so easy? 话说，当咱们需要在一个文本字段里找东西的时候，LIKE ‘%keyword%’是不是大家的第一反应？ 这招在数据量小的时候勉强凑合，但一旦数据量上去了，那查询速度，简直就是蜗牛爬。 为啥？因为LIKE是全表扫描啊，一条条记录比对，效率低得令人发指。 Fulltext Search就是来拯救大家的。它通过建立倒排索引（Inverted Index），大大提高了文本搜索的速度。 简单来说，倒排索引就是把文档里出现的词语（term）和包含这些词语的文档ID对应起来。 这样，当咱们搜索某个词语时，直接从索引里找到包含这个词语的文档ID，然后取出对应的文档，速度自然就快多了。 举个例子，假设咱们有个articles表，包含id和content两个字段： CREAT …

继续阅读“MySQL高阶讲座之：`MySQL`的`Fulltext Search`：其在`InnoDB`中的实现与`N-Gram`解析器。”

发布于

MySQL高阶讲座之：`MySQL`的`Fulltext Search`：其索引实现与`TF-IDF`算法。

各位好，我是你们今天的MySQL Fulltext Search专题讲座主持人。今天咱们不讲“Hello, World!”，直接来点硬核的——聊聊MySQL的全文本搜索，特别是它的索引实现和TF-IDF算法。保证让你听完之后，感觉自己也能手撸一个搜索引擎似的！ 一、Fulltext Search：告别Like的慢生活 你肯定用过LIKE ‘%keyword%’来做模糊查询吧？ 慢吧？特别慢吧？ 数据量一大，简直是灾难现场。 LIKE是全表扫描，效率低到尘埃里。 Fulltext Search就是来拯救世界的。 它可以建立全文索引，然后通过索引来快速定位包含关键词的文档。 二、Fulltext Index：索引的秘密花园 Fulltext Index就像一个倒排索引（Inverted Index）。 倒排索引是啥？别怕，其实很简单。 假设我们有三句话： Document 1: "The quick brown fox" Document 2: "The quick gray fox" Document 3: "Fox jumped ove …

继续阅读“MySQL高阶讲座之：`MySQL`的`Fulltext Search`：其索引实现与`TF-IDF`算法。”

发布于

MySQL高级讲座篇之：探讨MySQL的`Vector Search`功能：如何处理向量数据以支持相似性搜索？

各位观众老爷，大家好！我是今天的主讲人，一个在代码堆里摸爬滚打多年的老码农。今天咱们不聊虚的，直接上硬货：MySQL的Vector Search功能，聊聊如何用它来处理向量数据，支持那些让人心动的相似性搜索。 开场白：告别“大海捞针”的传统搜索 话说，在信息爆炸的时代，传统的关键词搜索就像大海捞针，捞上来的可能全是水草。比如，你想找一张“夕阳下的海滩”的照片，用关键词搜出来的可能全是卖泳装的广告。 但有了向量搜索，情况就不一样了。它能理解图片、文本、甚至视频的“语义”，然后根据语义的相似度来找东西。这就像找一个“感觉像夕阳下的海滩”的东西，而不是非得包含那几个关键词。 第一部分：什么是向量搜索？别怕，没那么玄乎 别被“向量”这两个字吓跑，其实它就是一个包含数字的列表。这些数字代表了数据的一些特征。比如，一张图片可以用一个包含几百甚至几千个数字的向量来表示，这些数字编码了图片的颜色、形状、纹理等等信息。 1.1 向量嵌入（Embedding）：把数据变成数字 要把图片、文本变成向量，我们需要用到一个叫做“嵌入模型（Embedding Model）”的东西。你可以把它想象成一个黑盒子，你扔 …

继续阅读“MySQL高级讲座篇之：探讨MySQL的`Vector Search`功能：如何处理向量数据以支持相似性搜索？”

发布于

Redis `Vector Search` 在 AI 大模型中的应用潜力

好的，没问题，直接进入正题！ 各位老铁，大家好！我是今天的主讲人，一位略懂编程的专家（不敢自称大师，怕被打）。今天咱们聊点硬核的，但保证通俗易懂，那就是Redis Vector Search在AI大模型中的应用潜力。 啥是AI大模型？简单说，就是那些参数贼多，能干很多事儿的神经网络，比如生成文本、翻译、写代码等等。 这些模型需要海量的数据才能训练出来，训练好了之后，怎么用它来快速找到我们想要的信息，这就是个大问题。 传统数据库，像MySQL，找精确匹配还行，但要找“相似”的东西，就有点力不从心了。 这时候，Vector Search就派上用场了。 一、 什么是向量搜索？别怕，不难！ 向量搜索，顾名思义，就是把东西都变成向量，然后在向量空间里找距离最近的。 向量是什么？ 向量就是一个数字列表。比如，[1.2, 3.4, -0.5, 0.8]就是一个4维向量。 怎么把东西变成向量？ 这就得靠AI模型了。 比如，你可以用一个文本嵌入模型（比如Sentence Transformers）把一段文本变成一个向量，这个向量就代表了这段文本的含义。 类似的，图像、音频、视频也都可以通过相应的模型变成 …

继续阅读“Redis `Vector Search` 在 AI 大模型中的应用潜力”

发布于

Redis Search (RediSearch) 高级索引与查询语法

大家好，欢迎来到今天的 Redis Search (RediSearch) 高级索引与查询语法“脱口秀”！我是你们今天的“段子手”兼技术指导。今天咱们不搞虚的，直接上干货，保证让大家听完之后，感觉 Redis Search 不再是“别人家的孩子”，而是你手中一把锋利的“屠龙刀”。 第一幕：索引的艺术 – 超越基础，玩转高级索引 首先，咱们来聊聊索引。别以为索引就是简单的 FT.CREATE 一下，然后就万事大吉了。RediSearch 的索引可是个“百变怪”，可以根据你的需求，变出各种花样。 SCHEMA 的进阶之路 SCHEMA 定义了你的索引结构，决定了哪些字段可以被搜索。 除了基本的 TEXT、NUMERIC、TAG 之外，还有很多高级选项等着你： WEIGHT 加权: 想象一下，你的商品描述里，商品名称的重要性肯定比“颜色”要高吧？ WEIGHT 就是用来控制这个的。 FT.CREATE my_index SCHEMA product_name TEXT WEIGHT 5.0 description TEXT WEIGHT 1.0 color TAG 这样，搜索 红 …

继续阅读“Redis Search (RediSearch) 高级索引与查询语法”

发布于

Redis `Vector Search`：向量相似度搜索与 AI 应用

好，让我们开始这场关于 Redis Vector Search 的技术讲座，主题是：向量相似度搜索与 AI 应用。 各位观众，各位朋友，各位未来的人工智能大师们，大家好！今天咱们不整虚的，直接上干货，聊聊 Redis Vector Search 这玩意儿，看看它到底能帮咱们在 AI 的道路上走多远。 第一部分：啥是向量，啥是相似度？ 在深入 Redis Vector Search 之前，咱们得先搞明白两个概念：向量和相似度。 向量 (Vector)： 别一听这词儿就觉得高大上，其实它就是一堆数字。比如，你可以用一个向量 [0.2, 0.5, 0.1, 0.8] 来表示一篇文章，每个数字代表某个关键词在这篇文章里的重要程度。图像、音频、甚至用户行为，都可以转换成向量。关键在于，向量能把复杂的东西变成计算机能理解的数字。 相似度 (Similarity)： 有了向量，我们就能算相似度了。相似度就是衡量两个向量有多像的指标。常用的相似度算法有： 余弦相似度 (Cosine Similarity)： 这是最常用的。它计算的是两个向量夹角的余弦值。余弦值越接近 1，向量越相似；越接近 -1，向量 …

继续阅读“Redis `Vector Search`：向量相似度搜索与 AI 应用”

发布于

全文搜索（Full-Text Search）的索引创建与查询优化

好的，各位听众，朋友们，今天咱们来聊聊一个听起来高大上，实际上接地气儿的技术——全文搜索（Full-Text Search）。各位每天都在用的搜索引擎，背后就少不了它的身影。别害怕，咱们不搞学术报告，就当茶余饭后唠嗑，保证你听完能跟人吹牛皮，哦不，是侃侃而谈！😎 一、开场白：大海捞针的苦恼 想象一下，你是个图书馆管理员，馆里藏书百万册，突然有人跑来跟你说：“我要找一本内容里提到‘宇宙飞船’的书！” 你咋办？ 笨办法： 一本一本翻，效率低到令人发指，估计找到黄花菜都凉了。 聪明办法： 建立一个目录，记录每本书里都讲了啥，这样就能快速定位。 这“聪明办法”背后的思路，就是全文搜索的核心思想：预先处理数据，建立索引，然后通过索引快速查找。 二、索引的“前世今生”：从倒排索引说起 全文搜索的灵魂人物，当属倒排索引（Inverted Index）。 别被这名字吓住，其实它很简单，就是个“反过来”的索引。 正向索引： 传统索引，通过文档ID找到文档内容。 就像咱们图书馆的图书编号，通过编号找到对应的书。 倒排索引： 通过关键词找到包含该关键词的文档ID列表。 就像咱们图书馆的关键词目录，通过关键词 …

继续阅读“全文搜索（Full-Text Search）的索引创建与查询优化”

发布于

全文搜索（Full-Text Search）的索引创建与查询优化

好的，各位观众老爷们，欢迎来到大型技术脱口秀现场！我是你们的老朋友，人称“代码界的段子手”——程序猿小李！今天，咱们不聊风花雪月，只谈码上乾坤，聊聊这让人又爱又恨的全文搜索！ 主题：全文搜索（Full-Text Search）的索引创建与查询优化：让你的搜索像火箭一样快！🚀 什么？你还不知道全文搜索是啥？🤔 简单来说，就是你像百度、谷歌那样，输入几个关键词，嗖的一下，就能从浩如烟海的数据中找到你想要的东西。这背后，可不是简单的“Ctrl+F”能搞定的，而是有一套精妙的武林秘籍，叫做“全文搜索”。 一、 为什么要全文搜索？（别跟我说你只会 Ctrl+F！） 想象一下，你是一个大型电商平台的CTO，每天新增商品数百万，商品描述密密麻麻。用户想搜个“轻薄透气速干的跑步T恤”，如果用传统的数据库模糊查询（LIKE ‘%轻薄%’ AND LIKE ‘%透气%’ AND LIKE ‘%速干%’），那效率简直惨不忍睹，服务器分分钟被榨干，用户体验直接跌入谷底。💀 所以，我们需要更高级的武器——全文搜索！它能： 快！ 索引技术让搜 …

继续阅读“全文搜索（Full-Text Search）的索引创建与查询优化”

发布于

全文搜索（Full-Text Search）的索引创建与查询优化

好的，各位码友们，欢迎来到今天的“全文搜索：从入门到入土（误）”讲座！我是你们的老朋友，人称“bug终结者”的码农老王。今天咱们要聊聊全文搜索这玩意儿，保证让各位听完之后，从“啥是全文搜索？”到“我能用它搞事情！”，甚至还能优化到“让老板直呼内行！”的程度。 开场白：啥？你还在用LIKE？OUT啦！ 先别急着拿出你的SQL编辑器，咱们先来聊点轻松的。想象一下，你的用户想在你的网站上搜点东西，结果你还在用LIKE ‘%关键词%’？ 醒醒吧！ 这种效率，简直比蜗牛爬还慢！ 而且，对用户来说，等待就是慢性死亡啊！💀 全文搜索，就是来拯救你的救星！它能让你像猎豹一样快速找到你想要的信息，而且还能处理各种复杂的情况，比如同义词、近义词、拼写错误等等。 第一章：全文搜索的“前世今生” 咱们先来了解一下全文搜索的身世。这玩意儿可不是凭空冒出来的，它经历了漫长的进化过程。 远古时代：顺序扫描 就像前面说的LIKE，这是最原始的方式，就是把整个数据库都扫一遍。效率嘛，呵呵，谁用谁知道。 中古时代：倒排索引（Inverted Index）闪亮登场！ 倒排索引是全文搜索的核心。它就像一本字典，记录了每个词出 …

继续阅读“全文搜索（Full-Text Search）的索引创建与查询优化”

发布于

全文搜索（Full-Text Search）的索引创建与查询优化

好的，各位观众老爷，各位技术大咖，还有屏幕前正在啃着代码的程序员兄弟姐妹们，大家好！我是你们的老朋友，人称“码界小诸葛”的程序猿一枚。今天咱们不聊高深的算法，也不说复杂的架构，咱就聊聊这“全文搜索”里的那些事儿，保证让大家听得进去，学得会，还能乐出声儿来。 咱们今天的主题是：全文搜索（Full-Text Search）的索引创建与查询优化。 一、 啥是全文搜索？为啥它这么重要？ 想象一下，你打开一个电商网站，想找一件“舒适透气的棉麻衬衫”，如果网站只能让你精确输入“棉麻衬衫”四个字才能找到结果，那是不是很崩溃？ 😠 这就是全文搜索的用武之地了！它允许你输入模糊的、自然的语言，然后搜索引擎会聪明地理解你的意图，从海量文本数据中找到最相关的结果。 简单来说，全文搜索就像一个超级聪明的图书管理员，你告诉他你想看一本关于“太空旅行”的书，他就能从浩如烟海的书籍中找到所有跟太空、旅行相关的，甚至还能帮你找到主角是宇航员的科幻小说！ 那么，为什么全文搜索这么重要呢？ 提升用户体验： 用户再也不用费劲巴拉地记住关键词，想怎么搜就怎么搜，体验感蹭蹭往上涨！ 提高搜索效率： 就像给图书馆建了个索引，搜索 …

继续阅读“全文搜索（Full-Text Search）的索引创建与查询优化”