MoAI：整合视觉任务信息的增强型语言模型
talkingdev • 2024-03-14
546066 views
MoAI是一种新型的大型语言和视觉模型，它通过整合专门的计算机视觉任务的辅助视觉信息来增强当前模型。该模型在 GitHub 上发布，旨在改善自然语言处理和计算机视觉任务之间的互动。MoAI使用了一种新的训练方法，可以在使用的视觉任务的数据集上进行预训练，从而增强其在自然语言处理任务中的表现。在各种下游任务中，MoAI都比许多现有的语言模型具有更好的性能。