• 0
兼容异构大模型、国产算力,蚂蚁数科SOFAStack发布全栈AI服务
统计 阅读时间大约3分钟(823字)

2024-06-28 兼容异构大模型、国产算力,蚂蚁数科SOFAStack发布全栈AI服务

来源:SOFAStack
助力企业跑完企业AI应用业务落地的最后一公里。

6月28日,伴随大模型落地从通用技术进步逐步迈向行业可用,蚂蚁数科旗下多云PaaS平台SOFAStack正式发布大模型服务平台AI Max。该平台兼容适配主流开源大模型、国产算力,向企业提供进行模型训练、部署、评估、优化等一站式模型工作台,并实现可视化研发、管理多种具备行业知识库的Agent(智能体)应用,助力企业跑完企业AI应用业务落地的最后一公里。

“大模型的高速发展使得AI不得不面临算力管理复杂、训练推理成本高、任务调度难等多方面发展瓶颈,云原生凭借其高可用、弹性、可扩展等优势成为突破AI困境的关键。”中国信息通信研究院云大所副所长栗蔚指出,“云原生PaaS平台的大模型产品工具链不断完善,将加速大模型技术在行业应用中落地。”

“对企业来说,大模型训练耗时耗力耗资源,AI Max不仅支持主流开源大模型的一键微调训练,还提供三步即完成的零代码模型开发环境,把原先耗费至少3天的训练缩短至1小时。蚂蚁自研的预训练模型与先进的多模态算法,仅需小量数据即可进行训练,进一步提升数据的利用率和模型训练的效率。”蚂蚁数科云原生产品资深总监马振雄介绍。

据了解,基于SOFAStack多云兼容属性,AI Max具备两层核心特性:

在资源层,支持多种国产GPU算力平台纳管部署,企业按需灵活使用资源,使得有限的GPU资源可以高效的被利用起来,同时大大降低服务器使用成本;

在应用层,企业可以根据业务需求快速输出定制化的AI模型,构建服务业务需求的智能体,极大地简化了技术实施过程。

当企业开始构建大模型应用,还需要结合具备行业特性的业务经验。针对金融行业场景,SOFAStack融合金融助理支小助的最佳实践,包含其模型训练、推理能力、智能体研发等方面,可以帮助机构一键生成自身业务特色的智能体应用。过去9年,SOFAStack助力130家金融机构完成云原生架构转型。

“在大模型时代,SOFAStack可以承担PaaS在多云时代扮演的角色——通过构建AI原生软件服务,成为连接算力与应用的中坚力量。”蚂蚁数科云原生事业部总经理王磊表示。

当天,SOFAStack与行云创新、AutoMQ、联创集团、谐云科技等生态伙伴签约,将共建多云、多模型生态,加速大模型在各行业落地。

自今年3月份独立化运营以来,蚂蚁数科悄然推进AI toB战略,SOFAStack、蚁盾等多个代表性产品均发布了大模型相关服务,积极借助AI技术助力产业智能化升级。

1、猎云网原创文章未经授权转载必究,如需转载请联系官方微信号进行授权。
2、转载时须在文章头部明确注明出处、保留官方微信、作者和原文超链接。如转自猎云网(微信号:lieyunjingxuan
)字样。
3、猎云网报道中所涉及的融资金额均由创业公司提供,仅供参考,猎云网不对真实性背书。
4、联系猎云,请加微信号:jinjilei
相关阅读
推荐阅读
{{item.author_display_name}}
{{item.author_display_name}}
{{item.author_user_occu}}
{{item.author_user_sign}}
×