OpenBMB
让大模型飞入千家万户
GitHub
启智 GitHub 启智
最新推理超越 Llama3！面壁Ultra对齐助推开源大模型「理科状元」
两周前，OpenBMB开源社区联合面壁智能发布领先的开源大模型「Eurux-8x22B 」。相比口碑之作 Llama3-70B，Eurux-8x22B 发布时间更早，综合性能相当，尤其是拥有更强的推理性能——刷新开源大模型推理性能 SOTA，堪称开源大模型中「理科状元」。激活参数仅 39B，支持 6
2024年05月22 16:05
查看详情
技术Blog | 超强端侧多模态大模型MiniCPM-V 2.0: 具备领先OCR和理解能力
我们推出 MiniCPM 系列的最新多模态版本 MiniCPM-V 2.0，具备领先OCR和理解能力
2024年05月22 15:55
查看详情
强壮全球200个大模型，OpenBMB推动开源社区对齐研究
强壮全球200个大模型，OpenBMB推动开源社区对齐研究
2024年03月19 09:33
查看详情
BM 体系架构图
BM Data BM Data BM Train Open Prompt Delta Center Open Delta BM Train Open Prompt BM Inf BM Inf BM Inf BM Cook BM Cook
BMTrain大模型训练“发动机”。BMTrain进行高效的大模型预训练与微调。与DeepSpeed等框架相比，BMTrain训练模型成本可节省90%。
详情
对比流行框架，BMTrain表现惊人
BMCook大模型“瘦身”工具库。BMCook进行大模型高效压缩，提高运行效率。通过量化、剪枝、蒸馏、专家化等算法组合，可保持原模型90%+效果，模型推理加速10倍。
详情
任意组合压缩方法尽可能地加速模型
BMInf千元级显卡玩转大模型推理。BMInf实现大模型低成本高效推理计算，使用单块千元级显卡（GTX 1060）即可进行百亿参数大模型推理。
详情
10B模型解码速度 (Tokens/s)
BMInf PyTorch
OpenPrompt大模型提示学习利器。OpenPrompt提供统一接口的提示学习模板语言， 它的组合性和模块化可以让你轻松部署提示学习方法以驱动大模型。
详情
工具结构
OpenDelta“小”参数撬动“大”模型。OpenDelta进行参数高效的大模型微调，仅更新极少参数（小于5%）即可达到全参数微调的效果。
详情
OpenDelta可以和OpenPrompt协作运行
ModelCenter大模型仓库。ModelCenter基于BMTrain工具实现了一系列预训练语言模型，支持高效、低成本、可扩展性强的模型微调及分布式训练。
详情
支持模型
代表用户
京公网安备 11010802039419号