[控场AI]
基准llm-evalution-v01

Kaggle Benchmarking Challenge

Kaggle平台上的大语言模型评测挑战赛,旨在构建跨领域综合评测基准,比较前沿LLM在推理、知识和可靠性上的综合表现

时间轴 (近 90 天)

10月12日

一位开发者在 Kaggle Benchmarking Challenge 中构建了一个基准任务,用 IEEE-CIS 欺诈检测数据集测试 Gemma 4 31B(google/gemma-4-31b),评估其仅凭文本化图结构信息判断交易是否可疑的能力。

待验证50%
10月12日

一项提交给 Kaggle Benchmarking Challenge 的测评覆盖了来自 Anthropic、OpenAI、Google、Qwen、xAI、Z.ai 和 DeepSeek 的 19 个有效模型,评估其担任机器学习论文审稿人的能力

待验证50%
10月11日

一位开发者在Kaggle Benchmarking Challenge中提交了一个新基准测试,衡量每个正确答案的成本而非单纯的模型价格

待验证50%
10月11日

一位开发者在为 Kaggle Benchmarking Challenge 设计「数字接地」(Numeric Grounding)基准时发现,他发布的第一个排行榜衡量的其实是评分脚本的缺陷而非模型能力

待验证50%
10月11日

llm-evalution-v01是Kaggle Benchmarking Challenge的参赛作品,构建了一个聚合15项社区任务的通用型大语言模型评测套件

待验证50%
10月11日

一位开发者在Kaggle Benchmarking Challenge中构建了名为Unlearning Security Audit的基准测试,用于检验大语言模型能否识破伪装的遗忘代码

待验证50%
10月11日

一项针对四款主流视觉模型的基准测试研究提交给了 Kaggle Benchmarking Challenge,核心问题是当被问的数字被物理遮挡时,视觉模型会承认无法判断还是编造一个

待验证50%

全部知识事实 (7)

来源文章