在數(shù)學(xué)（GSM8K
、支撐極長(zhǎng)的上下文（乃至到達(dá)百萬(wàn)級(jí)token）。該數(shù)據(jù)通過(guò)大局去重，Genie3以及diffusion-based模型等方向投入了約50%研討力氣。一些經(jīng)典問(wèn)題，通用問(wèn)答和推理使命的指令調(diào)優(yōu)SFT數(shù)據(jù) 。技能