前 Cursor Harness 工程师:Harness 不会消亡,角色转向开拓新任务
- 核心判断:Jediah Katz 认为,模型越来越会写代码,那些用来补模型编程短板的功能确实可能被模型学会并删除;但 harness 还要负责把 agent 带进模型尚未掌握的新任务。
- 数据飞轮与功能回摆:在 Cursor 期间,harness 曾教模型摸清代码库、持续工作、运行测试;随着更难任务带来更多编程数据,模型学会后旧功能可被删减。但在 Grokbot 中处理邮件、沟通和记住用户工作方式,又需要把许多 prompt 和防护措施重新加回。
- 云端运行预测:Katz 称 agent 任务已从几分钟延长到几小时、几天甚至更久,笔记本可能休眠,真正自主的 agent 必须在云端运行;他预测 6 个月内 90% 的 agent 工作会在笔记本电脑以外运行。
- 成本差异:研究发现不同 harness 的编程评测分数没有显著差异,但每个任务的成本差别明显;优化缓存、token 使用效率和模型搭配后,Grokbot 成本下降、速度加快,质量未受影响。
- 工程含义:这条来自一线 harness 工程与 agent 产品构建者的判断,把 harness 的价值从“弥补模型缺陷”重新定位到“开拓模型未掌握的任务”,同时给出云端运行与成本效率两个可验证的工程方向。
🔗 播客原链接