Workflow as Knowledge — Semantic Persistence for LLM Workflows
Workflow as Knowledge — Semantic Persistence for LLM Workflows
一句话结论
这篇概念论文提出:LLM workflow 不应只是一次执行过程或日志痕迹,而应成为持久知识对象。workflow definition、workflow instance、inference record、context snapshot、dependency relation 都可以进入共享知识 substrate,被检查、恢复、复用和审阅。
为什么对用户重要
它对用户重要,是因为用户的 llm-wiki 已经不只是“笔记库”,而是在承载 Hermes 的长期工作流:每日 AI radar、source ingest、query synthesis、CVM 发布、ConversationSpec、vector reindex、lint 等。如果 workflow 本身不可查询、不可审计、不可恢复,那么知识库只能保存结果,无法解释“为什么今天这么判断、用了哪些上下文、哪些候选被拒绝、下一次如何接续”。
该论文给 llm-wiki 一个很好的方向:把重要 workflow 当成知识,而不是把 workflow 仅仅写在技能提示词或 cron 配置里。
机制 / 一阶原理
论文的关键区分是:
- derive:对已有状态做确定性计算。例如 hash、lint、index count、wikilink 检查、文件存在性验证。
- infer:在声明上下文和能力策略下做 LLM 判断。例如候选内容是否有深度潜力、是否应晋升为正式 page、如何综合实践启发。
这个 derive/infer 边界对 agent workflow 很重要:可确定部分应尽量由工具和脚本完成,并记录输入/输出;不可确定部分应声明上下文、能力和判断标准。这样 workflow 既能利用 LLM,也不把所有行为都变成不可复现的“模型想法”。
和已有 wiki 概念的关系
- 对 Loop-Engineering:Loop 的状态不应只是
log.md末尾几行;loop 本身、实例、上下文快照和依赖关系都可以成为可检索对象。 - 对 Context-Engineering:context snapshot 是 workflow 的组成部分;没有“用了哪些上下文”的记录,就无法评估上下文质量。
- 对 LLM-Wiki:wiki 可以从内容知识库升级为 workflow knowledge substrate。
- 对 Harness-Engineering:harness 中哪些步骤是 derive、哪些步骤是 infer,应成为可审计合同的一部分。
对 Hermes / llm-wiki 的可执行启发
- 把每日优化文章视作 workflow object:记录当天 radar 使用的 sources、评分规则变化、入库/拒绝理由、验证输出和下一步建议。
- 重要 query 应保存 context manifest:至少记录读取了哪些 wiki 页面、raw 来源、搜索结果和工具验证结果。
- 把 derive/infer 写入流程模板:例如 ingest 中 hash、文件存在、wikilink 检查是 derive;深度判断和页面综合是 infer。
- 减少“只在 prompt 里存在”的流程:稳定流程应逐步落为 markdown spec、脚本、lint 或 checklist。
失败模式 / 边界条件
- 概念多于实现:论文偏 conceptual,尚未提供成熟系统或评测,因此不能直接当作工具方案。
- 记录过载:如果每个微小动作都变成知识对象,wiki 会被流程噪音淹没;应只沉淀有复用价值的 workflow。
- 身份与版本难题:workflow definition、instance 和 context snapshot 需要稳定 ID / hash / 时间戳,否则“语义持久化”无法实际审计。
深度判断
本来源晋升为正式 source page,因为它为 llm-wiki 的下一阶段提供元方法:把 workflow、context snapshot 和 infer/derive 边界作为知识对象管理。它不如 TTHE 或 Prompts-to-Contracts 直接工程化,但对 ConversationSpec、cron radar 和 wiki 自我优化有耐久价值。当前 confidence 设为 medium:已读 arXiv 摘要,PDF 暂时不可访问(arXiv PDF 返回 404),因此保持中等置信。
写入记录
- 2026-07-10 09:00 CST:新增 source page,提炼 semantic persistence 和 derive/infer 边界对 llm-wiki 工作流知识化的启发。