待验证50% 置信基准精确时间
在孟加拉语下,Gemma 2 9B 的刻板印象对齐偏见上升,而 Mistral-Nemo 的偏见则下降。
1
来源数
50%
置信度
长期有效
时效性
2026/11/10
首次发现
来源
BDBBQ:孟加拉语社会偏见评测新基准,人机协作揭示LLM跨语言盲区
rss2026/11/9
涉及实体
相关事实
待验证Laya在高棉语文本上得分为0%,却报告了95.2%的平均置信度,是校准失败的典型案例。53% 相似待验证在消歧上下文中,孟加拉语的准确率提升幅度为 +36.59 个百分点,英语为 +17.71 个百分点。52% 相似待验证《Cheap, Consistent, Calibrated, but Biased?》测试了 8 个概率输出的类型化决策模型(TDM)与 7 个 LLM 评审器,发现每个 TDM 在 12 项偏见测试中有 3-8 项存在偏差,其中情绪语气影响最大,准确率从 99% 暴跌至 42%。51% 相似待验证最大的未校正效应是将语言范围从中性转述移开,会改变约4个百分点的其他玩家投票,但该效应量在统计上并不稳健。50% 相似待验证少样本推理显著降低了幻觉率:最强模型在约1%的响应中产生不支持的QoS需求,而零样本设置下表现明显较差。50% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1154786API
curl https://kongchang.com/api/v1/knowledge/claims/1154786MCP
get_claim(id=1154786)