目标导向循环让模型自行测试与迭代
定义一个模型可在其中运行、测试和迭代的工作流是实现自动化的核心。一种常见模式是目标导向的循环:规划 → 执行 → 观察/测试 → 改进 → 再次执行,直至达成目标。该循环可能会主动要求用户澄清任务规范或执行偏好。
支持这项说法
用于自我改进的 Harness 工程
定义一个支持模型运行、测试与迭代的工作流,是实现自动化的一项关键设计。Karpathy 的 autoresearch 代码库(https://github.com/karpathy/autoresearch)便是一个清晰示例,展示了此类工作流的构建方式。一种常见工作流遵循以目标为导向的循环:规划 → 执行 → 观察/测试 → 改进 → 再执行,直至达成目标;该过程可能主动向用户发起请求,以澄清任务定义或执行偏好。
原始摘录
Defining a workflow in which the model can operate, test, and iterate is a key design for automation. Karpathy’s autoresearch repo ( https://github.com/karpathy/autoresearch ) is a clean example of how such a workflow can be constructed. A common workflow follows a goal-oriented loop of plan, execute, observe/test, improve, and execute again until the goal is achieved. The process may trigger proactive requests to users for clarity in task specification or execution preference.
分享观点验证此主张