【第588期】Meta-Harness：自动化端到端模型装具优化系统

Seventy3 · May 10, 2026 · 23m

Seventy3：借助NotebookLM的能力进行论文解读，专注人工智能、大模型、机器人算法、crypto方向，让大家跟着AI一起进步。

如果你想要解读自己的论文，获得更多曝光度。请联系小助手微信：seventy3_podcast 加群。

合作邮箱：zhiwudazhanjiangshi#gmail.com

今天的主题是：

Meta-Harness: End-to-End Optimization of Model Harnesses

Summary

大语言模型（LLM）系统的性能不仅取决于模型权重，还取决于它们的 Harness（配套框架代码）：即负责决定如何存储、检索信息以及如何向模型呈现信息的代码。

然而，目前的 Harness 设计在很大程度上仍依赖人工。现有的文本优化器由于对反馈的压缩过于激进，难以适配这种复杂的代码搜索设定。

为此，我们引入了 Meta-Harness，这是一个为 LLM 应用自动搜索最优 Harness 代码的“外环”系统。

核心机制

智能体化提案器（Agentic Proposer）：该系统使用一个智能体通过文件系统访问此前所有候选方案的源代码、评分以及执行轨迹。

经验驱动：通过对过往尝试的深度复盘，系统能够自主迭代出更高效的配套代码。

实验结果

文本分类：在在线文本分类任务中，Meta-Harness 相比最先进的上下文管理系统提升了 7.7…