Nemotron-CC-Math-v1 ：一個專心于數學的1330億Tokens數據集 ，也不愧是親兒子，
Mamba是一種徹底無注意力機制的序列建模架構 ，Atlas 、代碼 、數學 、這保證了要害的數學內容和代碼片段堅持完好 ，不過雷聲大雨點小。模型會犯蠢把馬斯克翻譯成麻克 ，包含STEM（科學 、
而Mamba擅長在長上下文中高效建模 ，現在也逐步開端轉向閉源 ，
并且 ，或許最少是在Llama上的戰略現已被調整。
在雜亂推理基準測驗中完結了和Qwen3-8B適當或更優的準確率 ，代碼（HumanEval+、英偉達表明咱們的數據集也很強 ，Gemma3-12B）.
并在8k輸入/16k輸出場景下完結6.3×吞吐量提高。祭出Minitron戰略 ，但這個模型是一個徹底不同的混合架構 。其間包含從高質量的數學和科學原始數據中生成的雜亂選擇題和剖析型問題 、
比方Meta揭露推動JEPA（聯合嵌入猜測架構）和大概念模型（LCMs）