近期的模型常常在处理复杂的视觉-语言任务上遇到困难，这主要是由于它们在理解混合的图像-文本上下文时存在限制。为了评估这些任务，研究人员引入了I4基准。结果显示，视觉提示生成器的注意力存在缺陷。为了解决这个...

这个代码库介绍了一种改善视觉-语言模型，特别是在详细属性检测和图像内部位置定位任务中的表现的多任务策略。这种策略以视觉-语言模型CLIP为例，展示了如何通过多任务学习提升模型的表现。通过这种方式，模型可以更...