Daily

2026-05-20

10篇笔记
2-Learning 8247 字
关于rag发展的思考

关于rag发展的思考 nexus中提到编译知识 这是什么概念 我在rag中做过类似尝试 比如将pdf html word markdown等各种格式的文档使用tika解析为纯文本 再加上一系列处理 格式化 分析标题 段落 列表 将文档树状化

2-Learning 4980 字
整理

整理 这是一份围绕"知识层级(L1–L4)"与"系统分层架构(L0–L4)"双视角的知识库工程笔记,梳理了你当前所处位置(L2 结构化文档)、Nexus 所指的目标(L4 编译后知识),以及对应的存储、检索、编译、技能、调度五层调用关系。

2-Learning 25041 字
初步父子切块

初步父子切块 我们接着上一篇“索引构建入口与 Kafka 消息投递”继续往下看。 上一篇的终点是: text Service 层做完四道校验 创建了 BUILD_INDEX 任务NEW 状态 strategySnapshot 已固化到任务上

2-Learning 21681 字
四种切块策略详解

四种切块策略详解 上一篇我们看到,不管是父块还是子块,最终都会走到 executePipeline 这个流水线执行引擎。这篇我们就深入这个引擎内部,逐个拆解结构切块、递归切块、语义切块、LLM 切块四种策略的完整实现。 先上一张四种策略的全

2-Learning 19447 字
四级切块策略

四级切块策略 我们接着上一篇 “异步索引构建:初始化与切块执行” 往下看。 上一篇的终点是: text buildParentBlocks 把工作分成两层 父块种子 → buildParentSeedList 子块种子 → buildChi

2-Learning 11461 字
异步索引构建:初始化与切块执行

异步索引构建:初始化与切块执行 上一篇我们看到,同步链路最后把消息丢进了 Kafka。这篇我们来看消费端拿到消息之后,到底做了什么——这才是索引构建的真正核心。 handleIndexBuild 方法是整个异步链路的主控方法,它会串行推进多

2-Learning 24248 字
异步索引构建:落库、向量化与收尾

异步索引构建:落库、向量化与收尾 上一篇我们跟着执行顺序,看完了初始化和切块执行阶段,buildParentBlocks 返回了一批父块/子块候选结果。这篇接着往下走——后处理、落库、向量化,一直到整个任务结束。 阶段三:切块后处理 回到

2-Learning 19688 字
构建索引

构建索引 我们接着上一篇“策略推荐与方案持久化”往下走。 上一篇的终点是: text plan 主记录已落库,状态 WAIT_CONFIRM 父子步骤已批量入库,executeStatus 都是 WAIT_EXECUTE 文档主表 pars

2-Learning 11840 字
索引构建链路白话讲解

索引构建链路白话讲解 一、开场:把这一段链路的位置先讲清楚 前面那块讲的是"文档怎么从原始文件变成结构化资产"——上传、解析、清洗、提取结构树、推荐切块策略。那一段的终点是:策略推荐方案已经落库,状态是 WAIT_CONFIRM,等用户在前

2-Learning 32993 字
落库向量化收尾

落库向量化收尾 我们接着上一篇“四种切块策略详解”继续往下走。 上一篇的终点是: text executePipeline 执行完毕 四种策略各自产出候选 chunk 所有候选都还在内存里ParentBlockCandidate 列表 还没