Ex-MCR:无配对数据的多模态学习方法
talkingdev • 2023-10-17
1335785 views
这项研究介绍了一种名为Ex-MCR的新方法,该方法可以有效地学习多个模态的统一对比表示,而无需配对数据。通过对齐现有的多模态对比表示,Ex-MCR在音频-视频检索和3D物体分类等任务中实现了最佳性能。该方法在GitHub上的仓库已经公开,供科研人员使用。
talkingdev • 2023-10-17
1335785 views
这项研究介绍了一种名为Ex-MCR的新方法,该方法可以有效地学习多个模态的统一对比表示,而无需配对数据。通过对齐现有的多模态对比表示,Ex-MCR在音频-视频检索和3D物体分类等任务中实现了最佳性能。该方法在GitHub上的仓库已经公开,供科研人员使用。