VLM-Seek
开源视觉语言模型,支持自然语言描述的开放词汇目标检测,具备None机制(目标不存在时明确返回找不到),适用于工业视觉、巡检等场景
时间轴 (近 90 天)
VLM-Seek 支持用自然语言描述目标进行视觉定位,无需提前将目标固化为固定类别
VLM-Seek 设计了 None 机制,当候选区域中没有符合描述的目标时直接返回找不到,而非强行框出错误结果
部署 VLM-Seek 需要推理代码、模型权重和区域检测器权重三样东西
VLM-Seek 的推理代码可从官方 GitHub 仓库拉取,模型权重和区域检测器权重可从魔搭(ModelScope)社区下载
VLM-Seek 属于开放词汇目标检测,与 YOLO、Faster R-CNN 等固定类别检测器有本质区别
VLM-Seek 采用区域检测器先生成候选区域、再由视觉语言模型判断哪个区域与文本描述最匹配的两阶段架构
VLM-Seek 部署方式可选本地私有化部署或调用公有云 API,前者适合数据安全要求高的业务,后者适合快速接入
全部知识事实 (7)
VLM-Seek 支持用自然语言描述目标进行视觉定位,无需提前将目标固化为固定类别
50%待验证VLM-Seek 设计了 None 机制,当候选区域中没有符合描述的目标时直接返回找不到,而非强行框出错误结果
50%待验证部署 VLM-Seek 需要推理代码、模型权重和区域检测器权重三样东西
50%待验证VLM-Seek 的推理代码可从官方 GitHub 仓库拉取,模型权重和区域检测器权重可从魔搭(ModelScope)社区下载
50%待验证VLM-Seek 属于开放词汇目标检测,与 YOLO、Faster R-CNN 等固定类别检测器有本质区别
50%待验证VLM-Seek 采用区域检测器先生成候选区域、再由视觉语言模型判断哪个区域与文本描述最匹配的两阶段架构
50%待验证VLM-Seek 部署方式可选本地私有化部署或调用公有云 API,前者适合数据安全要求高的业务,后者适合快速接入
50%