NVIDIA 发布 Nemotron-Labs-TwoTower,基于冻结的自回归骨干 Nemotron-3-Nano-30B-A3B 的扩散语言模型。采用双塔架构:上下文塔冻结,降噪器塔训练,通过层对齐交叉注意力和状态播种协作。在 2×H100 上 BF16 评估,保留 98.7% 的 AR 基线质量,生成吞吐量提升 2.42 倍(γ=0.8,块大小 S=16)。降噪器在约 2.1T token 上训练,骨干使用 25T token 预训练。总参数约 60B,每 token 活跃参数约 3B/塔。支持扩散、模拟 ...
TL;DR · 一句话结论
NVIDIA 发布 Nemotron-Labs-TwoTower 开放权重扩散语言模型。这是一条「模型发布(AI Models)」类 AI 信号,小雯机会评分 9.5/10,风险评分 3.6/10,数据源为 AI HOT / MarkTechPost(RSS)。
- 这是什么:NVIDIA 发布 Nemotron-Labs-TwoTower,基于冻结的自回归骨干 Nemotron-3-Nano-30B-A3B 的扩散语言模型。采用双塔架构:上下文塔冻结,降噪器塔训练,通过层对齐交叉注意力和状态播种协作。在 2×H100 上 BF16 评估,保留 98.7% 的 AR 基线质量,生成吞吐量提升 2.42 倍(γ=0.8,块大小 S=16)。降噪器在约 2.1T token 上训练,骨干使用 25T token 预训练。总参数约 60B,每 token 活跃参数约 3B/塔。支持扩散、模拟 ...
- 为什么值得关注:模型竞争正在进入真实业务闭环,创业者要关注可用性、成本和落地场景,而不是只看参数。这条值得关注:NVIDIA 发布 Nemotron-Labs-TwoTower 开放权重扩散语言模型
- 归类标签:AI Models、Nvidia
- 首次收录:2026-07-02,累计出现 1 次
Opportunity Signal
NVIDIA 发布 Nemotron-Labs-TwoTower 开放权重扩散语言模型
MarkTechPost(RSS): NVIDIA 发布 Nemotron-Labs-TwoTower 开放权重扩散语言模型
模型发布 / AI Models
9.5 Opportunity · 风险 3.6
小雯判断:模型竞争正在进入真实业务闭环,创业者要关注可用性、成本和落地场景,而不是只看参数。这条值得关注:NVIDIA 发布 Nemotron-Labs-TwoTower 开放权重扩散语言模型