#多模态

本篇是论文精读系列第九篇。为了实现通用人工智能，现在的 AI 必须能够同时“理解”和“生成”多种模态的数据。目前闭源模型很强，但开源模型还相对落后，且学术界对于“该用什么架构、什么训练方法”缺乏共识。该综述总结了700多篇论文，将统一基础模型分为三类：外部服务集成、模块化联合、端到端统一建模。详细分析了如何进行编码/解