阶跃星辰推出 Step-2“高性价比版”及“文学大师

2025-01-21 15:38:54

  阶跃星辰昨日上线 系列语言模型的两款新品 —— 参数量小、性价比更高的 Step-2 mini,以及专门针对内容创作领域推出的模型 Step 文学大师版。

  从官方介绍获悉,Step-2 mini 和万亿参数大模型 Step-2 相比,以3% 左右的参数量保有了其 80% 以上的模型性能。

  与此同时,Step-2 mini

  ▲ 网页

  Step-2 mini 采用了阶跃星辰自主研发的新型注意力机制架构 ——MFA及其变体 MFA-Key-Reuse,相比于常用的 MHA架构,节省了近 94% 的 KV 缓存开销,拥有更快的推理速度并大幅降低了推理成本。

  据官方介绍,Step-2 文学大师版是一款专为文字内容创作研发的模型,沿袭了 Step-2 的知识储备、对文字强大的细节把控能力,

下一篇:工信部:积极扩大新能源汽车消费
上一篇:台积电 CFO:2024 年四季度已获首笔 15 亿美元美国
返回顶部小火箭