[控场AI]
模型

Gemma 4 31B

Google推出的Gemma 4系列310亿参数开源大语言模型,量化后约需16-20GB内存,可在消费级Apple Silicon设备上运行

时间轴 (近 90 天)

10月14日

在49张图片测试中,Gemma 4 12B正确识别45张,Gemma 4 31B正确47张,两者都出现将纯线材误判为充电器的问题,而MiniCPM-V没有犯这个错误。

待验证50%
10月12日

在ring_push任务上,四个模型(Claude Haiku 4.5、Gemma 4 31B、GPT-5.4 mini、Gemini 3.7 Flash)在两个任务中都完成了要求的改动,却丢失了prompt未重申的旧行为,fail-to-pass通过但pass-to-pass失败,该失误在八次运行中稳定复现

待验证50%
10月12日

在分类任务的 100 个标签中,欺诈和正常各占 50 个,多数类基线为 50%,Gemma 4 31B 的 55% 在统计上不足以证明其超越基线。

待验证50%
10月12日

一位开发者在 Kaggle Benchmarking Challenge 中构建了一个基准任务,用 IEEE-CIS 欺诈检测数据集测试 Gemma 4 31B(google/gemma-4-31b),评估其仅凭文本化图结构信息判断交易是否可疑的能力。

待验证50%
10月12日

在同样的 100 个样本中,GraphSAGE 图神经网络基线正确分类 67 个样本,优于 Gemma 4 31B 的 55 个。

待验证50%
10月12日

在 100 个样本上,Gemma 4 31B 的交易分类准确率为 55%,邻域可疑交易识别(代理指标)准确率为 53%。

待验证50%
10月11日

参测的八个模型包括 GPT-6 Luna、Claude Haiku 5.5、Gemini 3.5 Flash-Lite、Qwen 3 Next 80B、Gemma 4 31B、GPT-6 Sol、Claude Sonnet 5 和 Gemini 3.7 Flash,每个模型在每条赛道跑 107 次调查

待验证50%
10月11日

Claude Haiku 4.5、Gemma 4 31B 和 Qwen3-235B 三个模型逐字照抄了用户提供的坐标,另有两个模型在 GPS 检查点请求上额外加了禁用的 points 字段

待验证50%
10月11日

更大更新的模型未必表现更好:gpt-oss-120b(0.740)得分低于 gpt-oss-20b(0.761);DeepSeek-R1 花费1.94美元得分却低于花13美分的 Gemma 4 31B

待验证50%
10月11日

Google可能想在手机上运行类似Gemma 4 31B这种中等规模模型,在约32GB内存上较为高效地运行

待验证50%

还有 5 条时间轴事件

全部知识事实 (15)

待验证

在49张图片测试中,Gemma 4 12B正确识别45张,Gemma 4 31B正确47张,两者都出现将纯线材误判为充电器的问题,而MiniCPM-V没有犯这个错误。

50%
待验证

在ring_push任务上,四个模型(Claude Haiku 4.5、Gemma 4 31B、GPT-5.4 mini、Gemini 3.7 Flash)在两个任务中都完成了要求的改动,却丢失了prompt未重申的旧行为,fail-to-pass通过但pass-to-pass失败,该失误在八次运行中稳定复现

50%
待验证

在分类任务的 100 个标签中,欺诈和正常各占 50 个,多数类基线为 50%,Gemma 4 31B 的 55% 在统计上不足以证明其超越基线。

50%
待验证

在同样的 100 个样本中,GraphSAGE 图神经网络基线正确分类 67 个样本,优于 Gemma 4 31B 的 55 个。

50%
待验证

在 100 个样本上,Gemma 4 31B 的交易分类准确率为 55%,邻域可疑交易识别(代理指标)准确率为 53%。

50%
待验证

参测的八个模型包括 GPT-6 Luna、Claude Haiku 5.5、Gemini 3.5 Flash-Lite、Qwen 3 Next 80B、Gemma 4 31B、GPT-6 Sol、Claude Sonnet 5 和 Gemini 3.7 Flash,每个模型在每条赛道跑 107 次调查

50%
待验证

Claude Haiku 4.5、Gemma 4 31B 和 Qwen3-235B 三个模型逐字照抄了用户提供的坐标,另有两个模型在 GPS 检查点请求上额外加了禁用的 points 字段

50%
待验证

更大更新的模型未必表现更好:gpt-oss-120b(0.740)得分低于 gpt-oss-20b(0.761);DeepSeek-R1 花费1.94美元得分却低于花13美分的 Gemma 4 31B

50%
待验证

在记忆召回测试中,12B模型100题答对82题,31B模型100题答对98题,且两个模型都没有编造答案

50%
待验证

实验环境为单张NVIDIA H100,通过vLLM服务,测试模型为Gemma 4 12B和Gemma 4 31B,输入数据为5000万token的真实公开文本

50%
待验证

Opus 5.5在Max档取得与GPT-6.1 Sol相同分数需要14.65美元,意味着6.1 Sol便宜约73倍

50%
待验证

claude-code-local 宣称支持 Qwen 3.5 122B(约 65 tokens/秒)、Llama 3.3 70B 和 Gemma 4 31B 等模型

50%
待验证

Gemma 4 31B版本在保持较小参数量的同时,试图在对话质量和知识广度上找到平衡点

50%
待验证

一位开发者在 Kaggle Benchmarking Challenge 中构建了一个基准任务,用 IEEE-CIS 欺诈检测数据集测试 Gemma 4 31B(google/gemma-4-31b),评估其仅凭文本化图结构信息判断交易是否可疑的能力。

50%
待验证

Google可能想在手机上运行类似Gemma 4 31B这种中等规模模型,在约32GB内存上较为高效地运行

50%

来源文章