第四范式推出大模型推理一体机解决方案SageOne IA,进一步减低大模型推理成本

2025-02-26 14:17:25 格隆汇 
新闻摘要
第四范式今日推出大模型推理一体机解决方案SageOneIA,进一步减低了大模型推理成本。如满血版的DeepSeekV3/R1仅需要两台一体机即可使用。此外,一体机解决方案还集成了智能算力池化技术,在支持DeepSeekV3/R1、QWen2.5、LLama3.3等主流大模型的基础上,企业可灵活在满血版和多个蒸馏模型之间切换,GPU利用率提升30%以上,推理性能平均提升5-10倍;同时内置大模型应用开发平台,并搭载了丰富的开箱即用AI应用套件,帮助开发者高效开发企业级的生成式AI应用,让企业享受高效的大模型应用服务,加速AI智能化落地进程

第四范式今日推出大模型推理一体机解决方案SageOne IA,进一步减低了大模型推理成本。如满血版的DeepSeek V3/R1仅需要两台一体机即可使用。此外,一体机解决方案还集成了智能算力池化技术,在支持DeepSeek V3/R1、QWen2.5、LLama3.3等主流大模型的基础上,企业可灵活在满血版和多个蒸馏模型之间切换,GPU利用率提升30%以上,推理性能平均提升5-10倍;同时内置大模型应用开发平台,并搭载了丰富的开箱即用AI应用套件,帮助开发者高效开发企业级的生成式AI应用,让企业享受高效的大模型应用服务,加速AI智能化落地进程。

SageOne IA大模型推理一体机解决方案,具备三大核心优势:

1) 智能算力池化,资源动态调度,突破物理机架构

2) 集成大模型工具链,便捷应用开发

3) 内置Sagesuite AI应用套件,众多应用开箱即用

(责任编辑:郭健东 )

【免责声明】本文仅代表作者本人观点,与和讯网无关。和讯网站对文中陈述、观点判断保持中立,不对所包含内容的准确性、可靠性或完整性提供任何明示或暗示的保证。请读者仅作参考,并请自行承担全部责任。邮箱:news_center@staff.hexun.com

看全文
写评论已有条评论跟帖用户自律公约
提 交还可输入500

最新评论

查看剩下100条评论

有问必答- 持牌正规投资顾问为您答疑解惑

    热门阅读

    推荐阅读