Unverified50% confidenceFactExact time
本地模型推理速度约1-10 tokens/秒,而云端API可达50-150 tokens/秒
1
Sources
50%
Confidence
Medium-term (~90 days)
Relevance
9/9/2026
First Seen
Valid until: 12/8/2026
Sources
Related Entities
Related Claims
Unverified在输出（Decode）速度测试中，2 万 token 以内可达约 45 tokens/秒，3 万 token 以上骤降至约 20 tokens/秒77% similarUnverified启用MTP后推理速度波动显著，有时超过40 tokens/秒，有时降至25 tokens/秒73% similarUnverified通常认为单并发 100 tokens/秒以上即可实现流畅的打字机效果，约 200 tokens/秒生成 2000 字长文本仅需约 10 秒71% similarUnverified在Flappy Bird HTML游戏生成测试中，未启用MTP时速度为31.15 tokens/秒，启用MTP后达到37.3 tokens/秒，提升约20%66% similarUnverifiedChatGPT标准模式的输出速度通常在50-100 Token/秒左右66% similar
Cite This Claim
Stable URI
https://kongchang.com/claim/881644API
curl https://kongchang.com/api/v1/knowledge/claims/881644MCP
get_claim(id=881644)