Tag
你有没有想过大模型世界里只有数字。它是怎么知道“狼”和“狗”差异明显，“狗”和“犬”意思相近的呢？ 今天我们不谈复杂的句子理解，只聚焦语言最基础的单元：单个词。 我是印刻君。一位探索AI的前端程序员，关注我，让AI知识有温度，技术落地有深度。 为什么Token ID不够用？其实， 计算机不认识文字，只认识数字。第一步先是把文字变成数字。最直接的方法就是给每个词分配一个唯一编号，这就是Token
查看更多 2026-08-06
一个真实的困境 假设你让 AI 帮你新增一个使用者管理页面用表格展示数据，写完后 review 一下代码再 commit。 使用者痛点： AI 必须在几十个可能的 skill 中快速定位并组合出「新增页面 → 表格开发 → 代码审查 → 提交」的完整链路。却常常因为缺乏全局视野而漏掉关键步骤，导致工作流中断。 这背后有一个关键问题：AI 怎么知道该调用哪些 skill？它面前可能有 dozens
查看更多 2026-08-05
最近在研究公司级 RAG 网站时我发现大多数项目一上来就要部署 Milvus、Neo4j、MinIO 等多个中间件 导致想学习“文档怎么变成向量”这条主要链路时被一堆基础设施绕得晕头转向。 这篇文章把完整链路拆解到最简 解析 → 分块 → 向量化 → 入库 全程在本地进程内跑。不依赖服务器、不需要 Docker，只需要一个 Python 脚本就可以完成。 技术选型 四个环节全部使用“进程内”库
查看更多 2026-08-03
上一章我们学习了文本向量化与召回的基础知识。现在让我们聚焦到实际使用 ——如何把向量存进数据库、如何高效检索。 向量数据库对比 下面列出常用的向量数据库，供你快速挑选。 名称 类型 部署方式 规模上限 主要优势 主要劣势 适用场景 FAISS 算法库 本地 / 嵌入式 千万级 最快、最灵活、算法最全，性能极限可达天花板。 不是数据库，无持久化；所有持久化和封装工作需自行完成。 研究原型
查看更多 2026-08-03
说起来， 做 Agent 项目。向量检索几乎是绕不开的一环。 RAG 知识库、对话记忆、工具调用前的上下文召回——流程都差不多：文本转成 Embedding，存起来查询时按相似度找最相关的内容。 常见痛点 双写复杂度高： 业务库和向量库需要保持同步，出现写入失败或 ID 映射错误时数据容易不一致。 跨库查询性能差： 先在向量库召回 ID。再去关系库补全详情，多一次网络往返导致响应慢。 运维成本大
查看更多 2026-08-03
目录 一、整体数据管道总览 RAG 的第一步先不是检索，是把原始文档变成可检索的向量 。数据管道需要四个组件接力： Loader 从文件加载文档 → Splitter 切成小块 → Embedding 转为向量 → Milvus 存储并建索引。 痛点1：原生EPUB格式无法直接处理！其实，如何高效解析并保留章节结构？说起来， 二、EPubLoader：按章节加载电子书 痛点2
查看更多 2026-08-03
前言 在建立私有 RAG 知识库时最常碰到的痛点是：关键词搜索无法命中语义相近却用词不同的文档 。 假设知识库中保存了下面三句话： 登录状态保存在 Redis 中。订单支付成功后会发送通知。程序使用 Docker 容器部署。 从使用者搜索来看， 使用者会话存在哪里？话说回来， 原文没有出现“使用者会话”。但“使用者会话”和“登录状态”在语义上非常接近。传统关键词搜索往往返回空结果
查看更多 2026-08-03
前言这方面，向量写入数据库之后怎样真正用起来？ 上一篇完成的是 RAG 的索引链路： ↓加载与分块 ↓文档向量化 ↓写入 LanceDB 完成索引并不代表程序已经能够回答问题。 当使用者提问时程序还要执行另一条查询链路： 使用者问题 ↓选择知识库查询工具 ↓把问题转换成查询向量 ↓在 LanceDB 中执行相似度搜索 ↓返回 Top-K 个相关片段 ↓大语言模型结合片段组织答案
查看更多 2026-08-03
当你问 AI “什么是人工智能？”时它真的“读懂”了这几个字吗？其实AI 并不理解文字的含义 ——在它眼里没有“苹果”“爱情”或“代码”，只有冰冷的数字。要让机器能够处理语言，必须把文本转换成它能“看懂”的形式：向量 。这个过程叫做Embedding 是 AI 具备语义理解能力的主要。 使用者痛点： 不知道什么是向量，怎么把文字变成向量。怎么说呢， 不了解向量之间如何衡量相似度。难以做检索或推荐
查看更多 2026-08-01
你正在寻找适合本地应用的向量数据库吗？ 当你需要实现语义搜索时第一个要做的技术决策就是：用什么来存向量？ 候选方案一览 vectra 语言： TypeScript / JavaScript 存储方式： 文件程序 索引算法： 暴力线性扫描 + 余弦相似度 依赖： 零原生依赖，纯 JS/WASM GitHub： vectra痛点一览表> 部署复杂度痛点一览表> 查询性能痛点一览表>
查看更多 2026-08-01
Demand feedback
