大文件切分别只按字节切
bclavie · x · 2026-07-16
这条转述强调了一个常见工程误区:把大文件塞进 worker 时,很多人习惯按固定字节范围硬切。
但字节边界不理解语义,容易把一句话、表格甚至视频场景切断,导致检索质量变差。
核心意思是:切分策略应该按内容结构和语义边界设计,而不是只追求能装进 worker。
「编程与Agent」频道最新
- Firecrawl 推 a16z Speedrun 创始人专属福利,并披露 7500 万美元 B 轮 — devdigest · 2026-10-27
- 开源项目 Chums:用 Apple Watch 随身遥控 Mac 上的 Claude Code — brandon_galang · 2026-10-27
- 开发者开源 Clairic Studio:粘贴文本自动生成五语言类型化代码 — dfinke · 2026-10-27
- Matt Pocock 分享 expand/contract 拆分法:把单向门 PR 拆成两层降风险 — mattpocockuk · 2026-10-27
- Qdrant 自研 Universal I/O:向量库 mmap 无缝迁移到对象存储 — qdrant_engine · 2026-10-27
- theo 公开个人 Claude skills 栈,Garry Tan 喊话「公布你的技术栈」 — ycombinator · 2026-10-26