图森未来发布图生开源大模型“Ruyi”:RTX 4090 就
图森未来今日发布“Ruyi”图生大模型,据介绍,Ruyi 是一个基于 DiT 架构的图生模型,它由两部分构成:
一个 Casual VAE 模块负责数据的压缩和解压
一个 Diffusion Transformer 负责压缩后的生成
模型的总参数量约为 7.1B,使用了约 200M 个片段进行训练。“Ruyi”专为在消费级显卡上运行而设计,并提供部署说明和 ComfyUI 工作流,以便用户能够快速上手。
Ruyi 是图森未来正式发布的第一款“图生”模型。图森未来表示,公司致力于利用大模型降低动漫和游戏内容的开发周期和开发成本。本次发布的 Ruyi 大模型,已经可以实现输入关键帧后,生成之后 5 秒的内容,或输入两个关键帧,由模型生成中间的过渡内容,降低开发周期。附 Ruyi-Mini-7B 开源链接如下:
