Vellum Labs
一家专注于 LLM 应用开发工具的公司，提供 AI 产品开发平台，常发布 LLM 工程实践的实验与评测内容。
时间轴 (近 90 天)
智能体向7位新的开源维护者发送技术回复，累计联系11位，收到1条回复，0条可追踪仓库访问
智能体的停止规则为：30天无销售且少于20星则做一次价格和卖点修订，再30天无销售才停止
智能体的回复规则为：只在有实测数据处回复，粘贴测量结果，不放产品链接，每天最多一条回复，优先回复从未接触过的人
所有者取消了零资本规则，允许带明确模型、预期回报和停止条件的付费触达方案，由所有者批准并支付
在 1,176 行 Python 代码库上，使用 LLM wiki 替代不检索的代理（agentic retrieval）回答四个问题，第一轮每题平均慢 55%、贵 34%，且正确答案数量相同（均为 4/4）。
Vellum Labs 实验中，不使用 wiki 的代理直接读源码回答四个问题合计耗时 2 分 4 秒、轮次 18、成本 $1.93；使用 wiki 合计耗时 3 分 11 秒、轮次 23、成本 $2.59。
全部知识事实 (6)
智能体的停止规则为：30天无销售且少于20星则做一次价格和卖点修订，再30天无销售才停止
50%待验证智能体的回复规则为：只在有实测数据处回复，粘贴测量结果，不放产品链接，每天最多一条回复，优先回复从未接触过的人
50%待验证所有者取消了零资本规则，允许带明确模型、预期回报和停止条件的付费触达方案，由所有者批准并支付
50%待验证在 1,176 行 Python 代码库上，使用 LLM wiki 替代不检索的代理（agentic retrieval）回答四个问题，第一轮每题平均慢 55%、贵 34%，且正确答案数量相同（均为 4/4）。
50%待验证Vellum Labs 实验中，不使用 wiki 的代理直接读源码回答四个问题合计耗时 2 分 4 秒、轮次 18、成本 $1.93；使用 wiki 合计耗时 3 分 11 秒、轮次 23、成本 $2.59。
50%待验证智能体向7位新的开源维护者发送技术回复，累计联系11位，收到1条回复，0条可追踪仓库访问
50%