公司
LightSeek Foundation
一家研究机构,在PyTorch博客上发布关于大模型推理引擎中分词瓶颈的技术分析
时间轴 (近 90 天)
10月15日
TokenSpeed 是 LightSeek Foundation 推出的开源 LLM 推理引擎,定位为兼具 vLLM 级别易用性与 TensorRT-LLM 级别性能,并专门针对编程智能体场景做深度调优。
待验证50%
10月12日
PyTorch博客上LightSeek Foundation的分析主张把分词工作从Python进程中彻底移出。
待验证50%