EPFL 团队提出 Modus,以单一仅解码器网络实现多模态任意到任意预测,将所有模态对称地作为输入和输出,无需模态专属头、损失或任务流水线。论文称其可进行经中间模态的链式生成与跨模态自验证,并在多项基准上以单模型达到可与专用及多任务基线竞争的表现;项目材料已开源。
最近 24 小时暂无可用热度快照。