流水线
采集 → 解析 → 理解 → 校验 → 索引,每 6 小时自动运行,也可手动触发
当前状态:空闲
五个 Agent 阶段
1采集GitHub / arXiv / RSS / 联网搜索,多源聚合 + 分层抓取
2解析格式路由、正文抽取、Markdown 归一化
3理解LLM 结构化抽取(失败自动降级规则引擎),增量去重
4校验字段完整性 / 摘要质量 / 去重,不合格进 badcase 库
5索引结构感知分块 → BGE-M3 编码 → PG + Milvus 双写
采集 → 解析 → 理解 → 校验 → 索引,每 6 小时自动运行,也可手动触发