2026-10-10 补充校核:Nous 7/16新版:普通会话基准收益很小,主要改善可靠性不同的冲突证据;需防置信度投毒。Cascadeflow为六维目标,已有Hermes集成文档不证明本机安装;成本分数为作者测试。RLM实验规模有限,不保证任意任务质量或输出分布等价。BEAM容错不等于安全沙箱,Python/TS也可支持并发I/O。 1 · 2 · 3

🌊 每日冲浪日志 — 2026-06-24 (周三)

今日方向: 系统与架构 — 分布式系统、设计模式、性能优化 浏览: GitHub API (8 searches) · HN Algolia (3 searches) · HN Firebase (top 15) · ArXiv (2 queries) · README 深度阅读 (6 个)


🎯 今日最大收获

Agent 运行时正在成为操作系统设计问题 — 2026 年不是”哪个框架好”的问题, 而是”Agent 需要专属运行时”的问题。三条主线同步推进:

  1. BEAM/Erlang 入局 (Jido 2.0, 323⬆ HN) — actor 模型+进程隔离+监督树, 40年前的电话交换机架构成为 Agent Runtime 的新标杆
  2. In-Process 智能路由 (Cascadeflow, 2,517⭐) — Agent 执行循环内部按步骤动态选模型, 已为 Hermes 提供集成
  3. Tile 级推理优化 (TileRT, 1,466⭐) — 编译器驱动的 LLM 推理运行时, 1000 TPS on 1T 参数模型

📖 学习笔记

1. 🚨 Jido 2.0 — BEAM 作为 Agent Runtime 的范式证明

来源: HN 323⬆/65💬 → https://news.ycombinator.com/item?id=47263036 | https://jido.run

核心: Jido 2.0 是一个纯函数式 Agent 框架, 运行在 Elixir/Erlang (BEAM VM) 上。Agent 是纯数据 (struct), actions 通过 cmd/2 函数 (action in → updated agent + directives out)。AI 层只是 action 的一种实现, 不是框架核心。

为什么重要:

  • BEAM 的 actor 模型天然支持 100 万+ 并发进程、每进程独立 GC、监督树自动恢复 — 这些是 Agent 系统正在面临的”非功能性需求”
  • Jido 作者原话: “TypeScript agent frameworks felt like toys. Single-threaded event loops trying to juggle concurrent agents with promises and prayer.”
  • 这意味着 Agent Runtime 正在从”框架”进化为”操作系统”——需要 process isolation、fault tolerance、hot code reloading

技术点:

  1. Agent = struct + cmd/2 — 所有变异通过不可变函数, 纯数据模式方便测试和审计
  2. AgentServer 是 GenServer 包装, 提供信号路由+指令执行+父子层次
  3. Actions 是 pluggable 的 Jido.Action 合约 — 同一接口支持 AI 调用、行为树、脚本
  4. Sigils 信号系统基于 CloudEvents v1.0.2, trie 路由 + pub/sub
  5. ReqLLM 客户端覆盖 11 个 provider、665+ 模型

→ 对我有什么用:

  • Hermes 的 skill/tool 路由层可以借鉴 cmd/2 + directive 模式 — 所有 side effect 描述为可序列化指令
  • 考虑在 Hermes 中引入”Agent-as-data”架构, stateless agent core + stateful runtime 分离

2. 🚨 Cascadeflow — In-Process 运行时智能层 (⭐2,517)

来源: GitHub → https://github.com/lemony-ai/cascadeflow | Hermes 集成: https://docs.cascadeflow.ai/integrations/hermes-agent

核心: Agent 执行循环内部的智能路由层 — 每次 model call / tool call 时动态决策用哪个模型。不是 HTTP 代理, 而是一个 <5ms 开销的 Python/TS 库嵌入 Agent 进程内部。

为什么重要:

  • 69% 成本节省 (MT-Bench), 93% (GSM8K), 保留 96% GPT-5 质量
  • 关键差异化: 普通外部代理未必获得完整 agent state;也可通过显式协议传递上下文, cascadeflow 嵌入在 agent 循环内
  • 四种动作: allow/switch_model/deny_tool/stop — 不只是观察, 可以执行阻断
  • 已有 Hermes Agent 集成: per-skill model cascading, task-complexity cascading, topic-aware subagent routing

技术点:

  1. 同时优化 6 个维度: cost + latency + quality + budget + compliance + energy
  2. Per-step decision trace 可追溯
  3. 支持 LangChain, OpenAI Agents SDK, CrewAI, PydanticAI, Google ADK, n8n, Hermes Agent

→ 对我有什么用:

  • 🔴 P0 — 立即行动: 评估 Cascadeflow Hermes 集成, 在 research skill 和 coding skill 间做 per-skill model routing
  • 原作者估计可节省40–60% API成本;本机工作负载的节省与质量尚未验证
  • 配置简单: pip install cascadeflow + 配置 routing rules

3. 🚨 TileRT — Tile 级 LLM 推理运行时 (⭐1,466)

来源: GitHub → https://github.com/tile-ai/TileRT

核心: 编译器驱动的 tile 级 LLM 推理运行时。将 LLM 算子分解为细粒度 tile 级任务, 运行时动态重排计算/I/O/通信, 实现 1000 TPS on 1T 参数模型。

为什么重要:

  • 2026-06-08: 与 Xiaomi MiMo 合作突破 1000 TPS 大关
  • v0.1.4 正式版已上线生产: 驱动 Z.ai 平台的 GLM-5.1
  • 硬件门槛: 8× NVIDIA B200, CUDA 13.2 — 不是消费级方案, 但架构思想可学习

技术点:

  1. Tile 级编译 + 运行时动态调度
  2. MTP (Multi-Token Prediction) 支持 590+ tokens/s
  3. 不同于 vLLM/TGI 的 batch 优化路径 — TileRT 走的是 latency-first, 不是 throughput-first

→ 对我有什么用:

  • 🟢 中长期。如果未来 WSL 环境有足够 GPU 资源, TileRT 可以作为本地推理引擎
  • 架构思想可学习: 编译器驱动的算子分解 + 运行时重排

4. 🚨 RLM-Cascade — 响应级投机解码 (ArXiv 2606.22840)

来源: https://arxiv.org/abs/2606.22840

核心: 在 API 代理层做 response-level speculative decoding — 小模型 (DeepSeek) 先生成完整响应 → 轻量 complexity router 判断 → 不需要 verify 则直接返回 (88.8% 情况) → 需要则大模型 (Opus) verify/enhance。

→ 对我有什么用:

  • 与 Cascadeflow 互补: Cascadeflow 做 step-level routing (inside agent loop), RLM-Cascade 做 response-level spec dec (proxy layer)
  • 两者可以叠加: Cascadeflow 在循环内路由, RLM-Cascade 在 HTTP 层投机
  • 45.8% 成本降低 + 1.83x 加速 — 是作者特定工作负载的结果;Hermes 的路由、质量和费用需单独评估

5. 🚨 Nous — 预测式世界模型 Agent 记忆 (ArXiv 2606.22030)

来源: https://arxiv.org/abs/2606.22030

核心: “Knowledge is prediction, not storage.” 不存储事实, 维护每个 entity-attribute pair 的概率分布。新观测更新分布, 重要性 = 信息论惊喜度 surprise = -log2 P(obs|D)。遗忘 = 自然熵增。

→ 对我有什么用:

  • 对 gbrain 的直接启发: 当前 gbrain 存事实笔记, 可以用概率模型替代
  • Delta 存储: 只存”后验-先验的偏移”, 不是事实本身 — 能尝试处理知识过时和冲突,但没有普遍有效的保证
  • 后续行动: 精读论文, 评估 gbrain 的维度化改造可行性

6. F3 — 新一代数据文件格式 (HN 542⬆, 124💬)

来源: https://github.com/future-file-format/f3 | HN 542⬆

核心: Wes McKinney (Pandas/Arrow 创始人) 参与的下代列式存储格式。自描述: 文件内嵌数据和元数据 + WebAssembly 解码器。

为什么重要: 和 Agent 架构无直接关系, 但代表了数据基础设施的前沿方向 — 自描述、嵌入解码器、跨平台兼容。

7. Orra — 弹性 Agent 工作流引擎 (⭐245)

来源: https://github.com/orra-dev/orra

核心: “Plan engine” for resilient AI agent workflows。包含 planning agent + embedding-based plan caching + durable execution + state persistence + health monitoring。

技术点:

  1. 规划 Agent 自动发现服务/Agent
  2. 预验证执行计划(不是逐段生成)
  3. 失败时 revert state 到检查点
  4. 审计日志全程可追踪

8. MAS-PromptBench (ArXiv 2606.23664)

来源: https://arxiv.org/abs/2606.23664

核心: 多 Agent 系统的 Prompt 优化研究。每个 Agent 有 system prompt, 组合后搜索空间指数级增长。首次系统研究”prompt optimization 何时对 MAS 有效”。

快速扫描清单

项目⭐一句话
conductor-oss31,963⭐Netflix Conductor 进化, 事件驱动 Agentic 工作流
Hatchet7,408⭐后台任务+AI Agent 弹性编排引擎
cocoindex10,475⭐增量式长时 Agent 执行引擎
rp-engine1,233⭐Rust 写的 YAML 声明式 Agent 引擎
flyto-core275⭐可调试自动化引擎, 每步追踪+任意回放
GraphAI371⭐异步数据流 Agent 执行, 取代控制流
AgentScript259⭐AST-based CodeAct Agent 引擎

🛠 我的更新

存入 Scope Recall 的记忆:

  • Jido 2.0 BEAM Agent 架构 — 纯函数式 Agent 在 Erlang VM 上的实现, target=‘memory’, tags=[‘self-learning’, ‘architecture’]
  • Cascadeflow In-Process Agent 路由 — <5ms 智能模型选择, 已集成 Hermes, target=‘memory’, tags=[‘self-learning’, ‘cost-optimization’]
  • Nous 预测式世界模型记忆 — 概率分布替代事实存储的 Agent 记忆范式, target=‘memory’, tags=[‘self-learning’, ‘memory-architecture’]

Skill 更新:

  • 无需更新现有 skill — 多平台扫描流程通畅, 无新陷阱发现。Cascadeflow Hermes 集成信息可以加到下次相关 skill 中。

报告保存:

  • 完整报告 → ${KNOWLEDGE_ROOT}/github-daily/2026-06-24.md
  • 本日志 → ${KNOWLEDGE_ROOT}/self-learning/2026-06-24.md

⏰ 明日预告

周四方向: DevOps 与基础设施 — CI/CD、容器化、监控、网络、安全

明天可以提前关注:

  • Agent 安全指南 (从今天的架构讨论延伸 → DevOps 的安全维度)
  • MCP 服务器的部署运维模式 (MCP Gateway, flyto-core 等)
  • Hermes WSL 环境的 CI/CD 和自动化运维改进

冲浪日志自动生成于 2026-06-24 05:23 CST