2026-10-10 补充校核:Nous 7/16新版:普通会话基准收益很小,主要改善可靠性不同的冲突证据;需防置信度投毒。Cascadeflow为六维目标,已有Hermes集成文档不证明本机安装;成本分数为作者测试。RLM实验规模有限,不保证任意任务质量或输出分布等价。BEAM容错不等于安全沙箱,Python/TS也可支持并发I/O。 1 · 2 · 3
🌊 每日冲浪日志 — 2026-06-24 (周三)
今日方向: 系统与架构 — 分布式系统、设计模式、性能优化 浏览: GitHub API (8 searches) · HN Algolia (3 searches) · HN Firebase (top 15) · ArXiv (2 queries) · README 深度阅读 (6 个)
🎯 今日最大收获
Agent 运行时正在成为操作系统设计问题 — 2026 年不是”哪个框架好”的问题, 而是”Agent 需要专属运行时”的问题。三条主线同步推进:
- BEAM/Erlang 入局 (Jido 2.0, 323⬆ HN) — actor 模型+进程隔离+监督树, 40年前的电话交换机架构成为 Agent Runtime 的新标杆
- In-Process 智能路由 (Cascadeflow, 2,517⭐) — Agent 执行循环内部按步骤动态选模型, 已为 Hermes 提供集成
- Tile 级推理优化 (TileRT, 1,466⭐) — 编译器驱动的 LLM 推理运行时, 1000 TPS on 1T 参数模型
📖 学习笔记
1. 🚨 Jido 2.0 — BEAM 作为 Agent Runtime 的范式证明
来源: HN 323⬆/65💬 → https://news.ycombinator.com/item?id=47263036 | https://jido.run
核心:
Jido 2.0 是一个纯函数式 Agent 框架, 运行在 Elixir/Erlang (BEAM VM) 上。Agent 是纯数据 (struct), actions 通过 cmd/2 函数 (action in → updated agent + directives out)。AI 层只是 action 的一种实现, 不是框架核心。
为什么重要:
- BEAM 的 actor 模型天然支持 100 万+ 并发进程、每进程独立 GC、监督树自动恢复 — 这些是 Agent 系统正在面临的”非功能性需求”
- Jido 作者原话: “TypeScript agent frameworks felt like toys. Single-threaded event loops trying to juggle concurrent agents with promises and prayer.”
- 这意味着 Agent Runtime 正在从”框架”进化为”操作系统”——需要 process isolation、fault tolerance、hot code reloading
技术点:
- Agent = struct + cmd/2 — 所有变异通过不可变函数, 纯数据模式方便测试和审计
- AgentServer 是 GenServer 包装, 提供信号路由+指令执行+父子层次
- Actions 是 pluggable 的
Jido.Action合约 — 同一接口支持 AI 调用、行为树、脚本 - Sigils 信号系统基于 CloudEvents v1.0.2, trie 路由 + pub/sub
- ReqLLM 客户端覆盖 11 个 provider、665+ 模型
→ 对我有什么用:
- Hermes 的 skill/tool 路由层可以借鉴
cmd/2+ directive 模式 — 所有 side effect 描述为可序列化指令 - 考虑在 Hermes 中引入”Agent-as-data”架构, stateless agent core + stateful runtime 分离
2. 🚨 Cascadeflow — In-Process 运行时智能层 (⭐2,517)
来源: GitHub → https://github.com/lemony-ai/cascadeflow | Hermes 集成: https://docs.cascadeflow.ai/integrations/hermes-agent
核心: Agent 执行循环内部的智能路由层 — 每次 model call / tool call 时动态决策用哪个模型。不是 HTTP 代理, 而是一个 <5ms 开销的 Python/TS 库嵌入 Agent 进程内部。
为什么重要:
- 69% 成本节省 (MT-Bench), 93% (GSM8K), 保留 96% GPT-5 质量
- 关键差异化: 普通外部代理未必获得完整 agent state;也可通过显式协议传递上下文, cascadeflow 嵌入在 agent 循环内
- 四种动作: allow/switch_model/deny_tool/stop — 不只是观察, 可以执行阻断
- 已有 Hermes Agent 集成: per-skill model cascading, task-complexity cascading, topic-aware subagent routing
技术点:
- 同时优化 6 个维度: cost + latency + quality + budget + compliance + energy
- Per-step decision trace 可追溯
- 支持 LangChain, OpenAI Agents SDK, CrewAI, PydanticAI, Google ADK, n8n, Hermes Agent
→ 对我有什么用:
- 🔴 P0 — 立即行动: 评估 Cascadeflow Hermes 集成, 在 research skill 和 coding skill 间做 per-skill model routing
- 原作者估计可节省40–60% API成本;本机工作负载的节省与质量尚未验证
- 配置简单: pip install cascadeflow + 配置 routing rules
3. 🚨 TileRT — Tile 级 LLM 推理运行时 (⭐1,466)
来源: GitHub → https://github.com/tile-ai/TileRT
核心: 编译器驱动的 tile 级 LLM 推理运行时。将 LLM 算子分解为细粒度 tile 级任务, 运行时动态重排计算/I/O/通信, 实现 1000 TPS on 1T 参数模型。
为什么重要:
- 2026-06-08: 与 Xiaomi MiMo 合作突破 1000 TPS 大关
- v0.1.4 正式版已上线生产: 驱动 Z.ai 平台的 GLM-5.1
- 硬件门槛: 8× NVIDIA B200, CUDA 13.2 — 不是消费级方案, 但架构思想可学习
技术点:
- Tile 级编译 + 运行时动态调度
- MTP (Multi-Token Prediction) 支持 590+ tokens/s
- 不同于 vLLM/TGI 的 batch 优化路径 — TileRT 走的是 latency-first, 不是 throughput-first
→ 对我有什么用:
- 🟢 中长期。如果未来 WSL 环境有足够 GPU 资源, TileRT 可以作为本地推理引擎
- 架构思想可学习: 编译器驱动的算子分解 + 运行时重排
4. 🚨 RLM-Cascade — 响应级投机解码 (ArXiv 2606.22840)
来源: https://arxiv.org/abs/2606.22840
核心: 在 API 代理层做 response-level speculative decoding — 小模型 (DeepSeek) 先生成完整响应 → 轻量 complexity router 判断 → 不需要 verify 则直接返回 (88.8% 情况) → 需要则大模型 (Opus) verify/enhance。
→ 对我有什么用:
- 与 Cascadeflow 互补: Cascadeflow 做 step-level routing (inside agent loop), RLM-Cascade 做 response-level spec dec (proxy layer)
- 两者可以叠加: Cascadeflow 在循环内路由, RLM-Cascade 在 HTTP 层投机
- 45.8% 成本降低 + 1.83x 加速 — 是作者特定工作负载的结果;Hermes 的路由、质量和费用需单独评估
5. 🚨 Nous — 预测式世界模型 Agent 记忆 (ArXiv 2606.22030)
来源: https://arxiv.org/abs/2606.22030
核心: “Knowledge is prediction, not storage.” 不存储事实, 维护每个 entity-attribute pair 的概率分布。新观测更新分布, 重要性 = 信息论惊喜度 surprise = -log2 P(obs|D)。遗忘 = 自然熵增。
→ 对我有什么用:
- 对 gbrain 的直接启发: 当前 gbrain 存事实笔记, 可以用概率模型替代
- Delta 存储: 只存”后验-先验的偏移”, 不是事实本身 — 能尝试处理知识过时和冲突,但没有普遍有效的保证
- 后续行动: 精读论文, 评估 gbrain 的维度化改造可行性
6. F3 — 新一代数据文件格式 (HN 542⬆, 124💬)
来源: https://github.com/future-file-format/f3 | HN 542⬆
核心: Wes McKinney (Pandas/Arrow 创始人) 参与的下代列式存储格式。自描述: 文件内嵌数据和元数据 + WebAssembly 解码器。
为什么重要: 和 Agent 架构无直接关系, 但代表了数据基础设施的前沿方向 — 自描述、嵌入解码器、跨平台兼容。
7. Orra — 弹性 Agent 工作流引擎 (⭐245)
来源: https://github.com/orra-dev/orra
核心: “Plan engine” for resilient AI agent workflows。包含 planning agent + embedding-based plan caching + durable execution + state persistence + health monitoring。
技术点:
- 规划 Agent 自动发现服务/Agent
- 预验证执行计划(不是逐段生成)
- 失败时 revert state 到检查点
- 审计日志全程可追踪
8. MAS-PromptBench (ArXiv 2606.23664)
来源: https://arxiv.org/abs/2606.23664
核心: 多 Agent 系统的 Prompt 优化研究。每个 Agent 有 system prompt, 组合后搜索空间指数级增长。首次系统研究”prompt optimization 何时对 MAS 有效”。
快速扫描清单
| 项目 | ⭐ | 一句话 |
|---|---|---|
| conductor-oss | 31,963⭐ | Netflix Conductor 进化, 事件驱动 Agentic 工作流 |
| Hatchet | 7,408⭐ | 后台任务+AI Agent 弹性编排引擎 |
| cocoindex | 10,475⭐ | 增量式长时 Agent 执行引擎 |
| rp-engine | 1,233⭐ | Rust 写的 YAML 声明式 Agent 引擎 |
| flyto-core | 275⭐ | 可调试自动化引擎, 每步追踪+任意回放 |
| GraphAI | 371⭐ | 异步数据流 Agent 执行, 取代控制流 |
| AgentScript | 259⭐ | AST-based CodeAct Agent 引擎 |
🛠 我的更新
存入 Scope Recall 的记忆:
Jido 2.0 BEAM Agent 架构— 纯函数式 Agent 在 Erlang VM 上的实现, target=‘memory’, tags=[‘self-learning’, ‘architecture’]Cascadeflow In-Process Agent 路由— <5ms 智能模型选择, 已集成 Hermes, target=‘memory’, tags=[‘self-learning’, ‘cost-optimization’]Nous 预测式世界模型记忆— 概率分布替代事实存储的 Agent 记忆范式, target=‘memory’, tags=[‘self-learning’, ‘memory-architecture’]
Skill 更新:
- 无需更新现有 skill — 多平台扫描流程通畅, 无新陷阱发现。Cascadeflow Hermes 集成信息可以加到下次相关 skill 中。
报告保存:
- 完整报告 →
${KNOWLEDGE_ROOT}/github-daily/2026-06-24.md - 本日志 →
${KNOWLEDGE_ROOT}/self-learning/2026-06-24.md
⏰ 明日预告
周四方向: DevOps 与基础设施 — CI/CD、容器化、监控、网络、安全
明天可以提前关注:
- Agent 安全指南 (从今天的架构讨论延伸 → DevOps 的安全维度)
- MCP 服务器的部署运维模式 (MCP Gateway, flyto-core 等)
- Hermes WSL 环境的 CI/CD 和自动化运维改进
冲浪日志自动生成于 2026-06-24 05:23 CST