产品inspect_ai
inspect AI
开源的模型评测框架,将数据集、任务提示和评分器组合成可复现的评测流程,支持并行跑批、日志记录与开销追踪
时间轴 (近 90 天)
10月28日
Neural Yap 使用 inspect AI 框架跑批,runs 目录下的 YAML 文件列出待测模型,新增模型时只跑新模型并复用已有结果。
待验证50%
开源的模型评测框架,将数据集、任务提示和评分器组合成可复现的评测流程,支持并行跑批、日志记录与开销追踪
Neural Yap 使用 inspect AI 框架跑批,runs 目录下的 YAML 文件列出待测模型,新增模型时只跑新模型并复用已有结果。