Ploy 分享了将生产环境 AI Agent 从 Claude Opus 迁移到 GPT-5.6 Sol 的完整经验。关键洞察:
- 迁移涉及的不只是换模型——eval harness、tool schemas、caching、reasoning replay 全都要跟着调
- 工具调用模式差异巨大:Opus 顺序调用,GPT-5.6 并行 fan-out 调用,需要重新设计 tool-call budgets
- 迁移后:builds 快 2.2x,成本降 27%,质量持平或略高
- 教训:你的 eval harness 默默地适应了 incumbent model 的行为模式,换模型才发现这些隐式依赖
- 使用 Vercel AI SDK 但 provider-specific 行为差异仍存在
427 points on HN, 238 comments.