已验证65% 置信事实时间未知

MBPP（Mostly Basic Python Problems）由Google发布，包含约1,000个入门级编程问题

3

来源数

65%

置信度

长期有效

时效性

2026/6/1

首次发现

来源

Crafta-Bench：Cursor后台Agent基准测试工具深度解析

githubnwinter

涉及实体

MBPPproduct Googlecompany

相关事实

待验证MBPP 全称为 Mostly Basic Python Problems，是一种考察模型独立封闭问题表现的代码基准79% 相似待验证MBPP代码生成基准测试包含约500道面向初级程序员的Python编程题74% 相似待验证MBPP包含974个基础Python任务，评估指标通常为pass@k61% 相似待验证微软Phi-1模型（1.3B参数）在Python代码生成任务上超越了参数量大数十倍的竞品59% 相似待验证100万token上下文大约相当于2-3个Flask规模的完整项目，或十几个常见Python包的全部代码55% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/31099

API

curl https://kongchang.com/api/v1/knowledge/claims/31099

MCP

get_claim(id=31099)