漫话开发者 - UWL.ME 精选全球AI前沿科技和开源产品

Ex-MCR:无配对数据的多模态学习方法

talkingdev • 2023-10-17

975477 views

这项研究介绍了一种名为Ex-MCR的新方法,该方法可以有效地学习多个模态的统一对比表示,而无需配对数据。通过对齐现有的多模态对比表示,Ex-MCR在音频-视频检索和3D物体分类等任务中实现了最佳性能。该方法在GitHub上的仓库已经公开,供科研人员使用。

核心要点

  • Ex-MCR是一种无需配对数据的多模态学习方法
  • 该方法通过对齐现有的对比表示,在各种任务中实现了最佳性能
  • Ex-MCR的GitHub仓库已经公开,供科研人员使用

Read more >