首页 > 3D标签港中深联合微软研究院提出 ConvexLLM:让声音跳过转写,直接调用大模型推理能力 相关文章
港中深联合微软研究院提出 ConvexLLM:让声音跳过转写,直接调用大模型推理能力

港中深联合微软研究院提出 ConvexLLM:让声音跳过转写,直接调用大模型推理能力

语音与多模态AI发展中,让大模型直接“听懂”声音并复杂推理是核心方向。香港中文大学(深圳)与微软研究院联合提出ConvexLLM多模态统一建模新架构,为语音与语言融合提供新思路。其核心创新为C-Gate架构与“凸包映射”原理,意在突破传统先将语音转写为文本、再交由大语言模型处理的链路。