【大屏时代】首页 > 3D快报内容详情

蚂蚁百灵开源 Ming-3.0 语音系列:五款模型覆盖语音合成、识别与理解

51分钟前 8 大屏时代

蚂蚁百灵宣布开源 Ming-3.0语音系列,共计五款模型,覆盖语音合成、音频理解与对话、语音识别三类能力。开发者既可以按任务单独挑选,也能把不同能力拼进自己的工作流里。

在语音合成一侧,Ming-3.0-tts 系列的 Voice Design 允许用文字直接描述想要的音色,也支持用参考音频来设定声音特质。它更有意思的一处是"导演模式":创作者可以写明台词的表演方式,交代情绪如何起伏、哪些词需要重读、节奏该怎么处理,相当于把配音的二度创作也交给了模型。在蚂蚁内部,这套能力已经落进多条业务线——从阿福 App 的主对话与语音通话,到医生音色克隆、小虎智能办公,Ming-3.0-tts 都在其中。它既能独立承担配音,也能和 Ming-3.0-asr-tiny 组合,把语音输入和回答播报两个环节接起来。

音频理解一侧的 Ming-3.0-audio-flash 与 tiny,直接面向长音频做转写、总结和观点分析这类复杂任务,并给出结构化输出。和传统"先语音识别出逐字稿、再拿去分析"的两段式流程相比,它能把对话里的情绪、说话人身份、环境信息一并保留下来,这背后要求模型对长上下文序列具备快速推理的本事。

语音识别一侧的 Ming-3.0-asr-tiny,靠构建普通话、英文、方言、领域热词等高质量语料并合理控制分布,再结合语言模型基座的上下文理解能力,利用候选热词列表和对话上下文信息,把真实业务场景里的识别效果整体抬了上去。在蚂蚁体系内,它已经用在阿福医生助手、支付宝搜索、蚁小保实时语音对话以及安全核身等场景中。

通用大模型接管 Blender:45分钟造出一条医院走廊,专业3D 工具迎来新对手

今年9月 OpenAI 推出 GPT-6Astra 之后,一股新的焦虑吹进了游戏和3D 创作圈。一批用户把模型接上3D 建模软件 Blender 和游戏引擎,开始用自然语言直接建模、搭场景、做动画,甚至拼出可以游玩的游戏——有人用45分钟就做完了一条医院走廊的3D 场景,还有人忙着分享如何制作并出售3D 模型的教程。

OpenAI 亮出的数据也相当抢眼:在要求根据工业零件多视图编写代码、重建三维形体的 BenchCAD 测试中,Astra 拿下95.9% 的几何重叠得分,而 GPT-5.6Sol 和 Claude Fable5.1分别是83.3% 和84.3%。大模型的空间理解与软件操作能力,正变成可以直接拿来干活的本事。

这波演示里,Reddit 用户 Time-Ad-7720公布的医院走廊是个容易看懂的样本。走廊建筑、病房门、病床、轮椅、输液架和护士站,全部由 GPT-6Astra 通过 Blender MCP 从零搭建,没有调用任何外部美术资产;从第一次输入要求,到最后渲染出一段镜头穿行的短片,总共约45分钟。流程分阶段推进:先拉出约35米的建筑框架、排布门洞与护士站,确认布局后再往里塞道具、补病房内景;病房门被做成开、关、半开三种状态,场景里还撒了散落纸张、错位天花板等细节;接着为相机做一段8秒向前移动的镜头、检查路径有没有被挡,最后再调灯光和材质。做过场景美术的人对这些步骤并不陌生,区别只在于,具体在 Blender 里执行的人换成了 AI,作者只在关键阶段查看结果、提修改意见。

支撑这套流程的 MCP 没那么玄乎,它本质是一套让 AI 调用外部工具的接口。常见的 Blender MCP 开源项目,就把创建3D 模型、修改材质、读取场景、运行 Python 代码等能力开放给大模型;用户描述想做什么,模型把要求翻译成操作,Blender 负责执行并回传场景信息。对能看图的大模型,截图和渲染图还能当检查依据——物体放歪了就调位置,灯光太亮了就改参数再试;许多重复结构也能靠代码批量生成,一排门窗、一组货架不必像人一样逐个点。即便不走 MCP,模型也能直接编写并运行 Blender 脚本来完成建模。虚幻引擎前段时间也更新了官方 MCP。

而 Astra 这一轮进步,重点在它能把这样的过程持续做下去:建模、摆放、赋材质、设镜头,每一步都要继承前面的结果,中途收到新要求时还得知道哪些该改、哪些必须留。OpenSe 强调的视觉判断、工具操作和长任务上下文能力,最终都落在一件具体的事上——AI 能不能少走弯路,把一个项目从头推到尾。

医院走廊之外,有人把能力用到了更完整的创作上。Reddit 用户 aniketjatav 展示了一款吉卜力风格的列车项目:玩家驾驶列车穿行于浮空小镇之间接送乘客,采用三维世界搭配部分二维角色和元素的2.5D 形式,资产由 Astra 程序化制作,还放出可直接体验的 Demo。围绕游戏开发的教程也随之涌现,从概念图到 Blender 建模、动画、引擎整合、补音频,风格延伸到废土、外星环境等。

一个二次元角色的案例,恰好把几种工具的分工摆清楚了。创作者先用 Tripo P2分别生成头部、头发和带服装的身体,再让 Astra 进入 Blender 把这些部件组装、调整,并配合辅助工具处理绑定和次级运动;不同表情也先由 Tripo 生成,再交给 Astra 搭切换逻辑,最终是一个能跳舞的低多边形角色。另一个更大规模的尝试是一座 GTA 风格城市:GPT 与 Codex 驱动 UE5、处理玩法逻辑与迭代,Tripo 生成3D 资产,其他工具参与画面与音频;项目包含8栋从概念推进到可玩资产的建筑、247条人物语音,以及5个电台里的10首曲目,整场消耗了25亿 Token,大量用量花在修复机制、测试交互和反复调整上。通用模型与专业工具在这里形成了具体合作:GPT 负责安排和执行制作流程,Tripo 负责提供基础资产——尤其是头发、服装、身体这些最直接影响观感的部分,仍交给专用3D 模型。

专业3D AI 公司的处境,也因此和单纯做文案改写的应用不同。它们手里握有专门的三维生成能力,要处理几何、纹理和模型结构。GPT 学会操作 Blender,首先威胁到的是那些方便用代码和规则实现的需求:走廊、门窗、货架、模块化建筑都适合程序化生成,一段脚本写好后还能不断改尺寸、换排列、做变体。但换成复杂角色、服装褶皱、毛发轮廓,或需要贴近参考图的具体造型,让语言模型一步步编写几何操作,就可能变成一条漫长的路;专用模型直接交出基础资产,通用模型再负责组装、整理和接入引擎,各自省掉对方不擅长的工序。值得注意的是,Tripo、Meshy 本身也在往生产环节深扎:Tripo P2.0强调原生四边形拓扑、部件分离、面数控制和局部网格修改,Meshy 则提供网格处理、UV 展开、自动绑定和动画等接口,解决的都是模型好不好改、动起来容不容易处理、局部出问题能否只修那一块的后续问题。

更关键的变化在于,通用模型正在成为新的中心平台。未来创作者可能只需向助手提出需求,由助手决定调用哪一家服务——谁更便宜、更快、更容易拿到合格结果就多用,效果更好的随时切换。专业公司可能获得更多订单,却也更难靠使用习惯留住客户。价格会让这种竞争格外直接:以 Tripo 公布的 P2API 定价计,生成一个带标准纹理的模型为110积分、折合约1.1美元,官方给出的 P2.0单次资产生成时间约10至40秒;Meshy 的 Meshy-7系列基础图生3D 含纹理为30积分。相比之下,GPT-6Astra 按 Token 收费,截至9月23日其标准 API 每百万输入 Token 为10美元、输出为50美元(缓存另计);假设一个任务消耗100万未缓存输入加10万输出 Token,调用费就是15美元,外部生成与渲染还得另算。对某个具体资产,如果专用模型十几秒就能给出合适底稿,让 GPT 反复写脚本、看截图、修细节,就可能既慢又贵;反过来,一排货架靠脚本批量生成,逐件调用生成服务也没必要。

这也让中国模型手里多了一张分量很重的牌。DeepSeek V4.1-Flash 已支持工具调用和图像理解,其每百万未缓存输入 Token 为1至2元、输出为4至8元(按空闲和高峰区分);沿用上面的算力,100万输入加10万输出只需1.4至2.8元,对照的是 Astra 的15美元。便宜到这个程度,就给流程设计留出了很大空间:复杂任务交给更强模型,批量命名、格式处理、规则明确的修改交给低价模型,重复操作再固化为脚本。模型之间的能力差距,最终要连同成功率和返工次数一起算;但国产模型只要能稳定接手大量日常工作,就足以把整条生产流程的成本往下拉。

当然,AI 能把世界堆出来,游戏人还得让它真正跑起来。前面那个二次元角色案例里,创作者还分享了一个没展开的细节:表情切换,是 AI 主动决定把不同表情对应的网格放在一起、不用的部分缩进头部,需要时再切出来——演示能跑通,但放进实时游戏后,就要继续检查额外几何、蒙皮负担和动作衔接。游戏行业早吃过这类亏:《城市:天际线2》曾通过 Popul8一次创建一组100名市民让城市更鲜活,上市后却让团队吃了大亏,不得不持续优化资产与 LOD 问题,乃至人物细节、景深、全局光照、雾效带来的性能负担。如今引擎已能通过脚本批量生成和设置 LOD,AI 也能参与这些操作,可究竟该删到什么程度、角色轮廓有没有损伤、镜头切换会不会突兀,仍要放进具体游戏里看。

这正是程序员、美术和技术美术接下来要面对的工作变化:代码可以由 AI 写,但出了 Bug 得有人定位;模型可以由 AI 生成,但关节变形、贴图浪费、碰撞错误和性能超标,也得有人解决。制作速度越快,问题积累的速度同样可能越快——如果前期没有明确规格,等 AI 把整座城市堆出来再去逐个清理,省下的时间很容易重新搭进去。人的作用会更早进入流程:什么样的角色值得细化、哪些场景只需大致氛围、预算留给近景人物还是战斗特效,这些判断会直接影响 AI 接下来做什么。会描述想象中的画面固然有用,知道一款游戏真正需要什么,才可能把生成能力转化为制作效率。

许多个人作者和小团队,过去连验证一个想法的成本都难以承担,现在有机会更快拿到可以修改和游玩的第一版;专业工具会在竞争中重新寻找位置,创作者也能尝试以前做不起的内容。至于最后能留下什么,依然要回到作品本身——玩家不会因为一座城市消耗了25亿 Token 就觉得它更好玩,也不会因为角色是手工制作还是 AI 生成,就自动获得更好的操作体验。当内容越来越容易被生产出来,游戏人需要花更多力气决定的,是这个世界为何值得进入,以及玩家为什么愿意继续待下去。


相关文章

相关标签: 蚂蚁百灵开源 Ming-3.0 语音系列:五款模型覆盖语音合成、识别与理解