多模态模型受输入分辨率和上下文限制，高分辨率图像会被压缩导致细节丢失；辅助视觉模型是在主模型之外单独挂一个便宜的小视觉模型，仅在遇到图片时唤醒做局部识别。