由GitHub开源项目REVERSE提出的创新性解决方案,为视觉语言模型(VLM)的幻觉问题提供了突破性进展。该项目构建了一个完整的训练与推理管道,使VLM能够自主检测并修正其输出中的幻觉内容。该技术通过建立内部一致性验...
Read MoreVistaDPO项目通过创新的分层优化方法,在视频与文本对齐领域取得重要突破。该项目构建了一个包含7200个样本的全新数据集,专门用于优化空间和时间维度的偏好学习。其核心技术在于采用分层次的优化策略,能够同时处理...
Read MoreMeta公司近日重磅推出四项人工智能领域的重要技术成果:1)高性能图像编码器,可优化视觉数据的特征提取效率;2)视觉语言模型(VLM),实现跨模态理解与生成;3)基于联合嵌入预测架构(JEPA)的3D物体定位模型,突...
Read More谷歌研究院与加州大学团队在arXiv最新发表的论文提出3D CoCa框架,这一突破性技术通过整合视觉语言对比学习(Contrastive Learning)与场景描述(Captioning)两大前沿方向,实现了对三维场景的多模态联合理解。该框...
Read More近日,OpenAI的ChatGPT在知名地理定位游戏GeoGuesser中展现出卓越的表现,标志着其在空间理解和图像解析能力上的显著提升。GeoGuesser要求玩家根据随机提供的街景图像精确定位地理位置,而ChatGPT通过结合多模态学习...
Read More近期,SilentView团队在GitHub开源了名为GigaTok的超大规模图像分词器项目,其参数量高达30亿(3B),在图像重建任务中展现出卓越性能。传统图像分词器在规模化过程中常面临性能崩溃问题,而GigaTok通过创新的解码器...
Read More腾讯ARC实验室最新发布的SEED-Bench-R1基准测试,为多模态大语言模型(MLLM)在复杂视频任务中的表现提供了系统评估框架。该研究重点关注强化学习(RL)和监督微调(SFT)等后训练方法,揭示了RL在视觉感知任务和数...
Read More近日,GitHub上出现了一个名为'awesome-multimodal-adaptation'的开源项目,该项目系统性地整理了多模态自适应领域的最新研究进展。该项目不仅涵盖了传统的领域自适应方法,还包括测试时自适应等新兴技术方向。多模...
Read More