RWKV
为AI开发者和科研人员提供高效低成本的新型大模型架构
超越 Transformer 的新一代大模型架构。
项目介绍
RWKV是完全自主研发的新一代大模型架构,结合了RNN和 Transformer 的优点:出色的性能、快速推理、高效并行训练、节省内存、无限上下文等。RWKV 把云端模型的成本降低 10-100 倍,同时 RWKV 端侧模型已快速落地具身智能、新能源等领域。
创始团队
彭博
创始人/CEO16 岁全奖进入香港大学,RWKV 大模型的唯一作者,项目曾获得 Stability AI 的算力捐助。2023 年曾收到 OpenAI 的入职邀请,前 AIoT 公司联合创始人,前 FX 对冲基金量化模型负责人和交易员,30 年软件开发经验。
香港大学
罗璇
联合创始人/COO西安交通大学软件工程系。前 C 轮 AMR 机器人公司的联合创始人和总经理,前阿里巴巴(机器人和 AI Lab)产品总监 P9,前腾讯、猎豹移动产品负责人。
西安交通大学阿里巴巴、腾讯、猎豹移动