新浪科技

火山引擎发布“火山方舟” 加速大模型应用落地

新华财经官方微博

关注

转自:新华财经

6月28日,在火山引擎主办、英伟达合作举办的“V-Tech体验创新科技峰会”上,火山引擎发布大模型服务平台“火山方舟”,面向企业提供模型精调、评测、推理等全方位的平台服务(MaaS,即Model-as-a-Service)。目前,“火山方舟”集成了百川智能、出门问问、复旦大学MOSS、IDEA研究院、澜舟科技、MiniMax、智谱AI(以拼音首字母排序)等多家AI科技公司及科研院所的大模型,并已启动邀测。

“企业使用大模型,首先要解决安全与信任问题”,火山引擎总裁谭待表示,“火山方舟”实现了大模型安全互信计算,为企业客户确保数据资产安全。基于“火山方舟”独特的多模型架构,企业可同步试用多个大模型,选用更适合自身业务需要的模型组合。

聚焦安全互信计算

谭待认为,企业使用大模型,最担心的是数据泄露;如果将大模型私有化部署,企业将承担更高的成本,模型生产方也会担心知识资产安全。“火山方舟”的首要任务,就是做好大模型使用者、提供者和云平台可以互相信任的安全保障。

据火山引擎智能算法负责人吴迪介绍,“火山方舟”已上线了基于安全沙箱的大模型安全互信计算方案,利用计算隔离、存储隔离、网络隔离、流量审计等方式,实现了模型的机密性、完整性和可用性保证,适用于对训练和推理延时要求较低的客户。

会上,NVIDIA 开发与技术部亚太区总经理李曦鹏表示,NVIDIA 与火山引擎过往合作成果丰硕,包括共同合作的 GPU 推理库 ByteTransformer 在 IEEE 国际并行和分布式处理大会(IPDPS 2023)上获得最佳论文奖,双方还联合开源了高性能图像处理加速库 CV-CUDA,并在大规模稳定训练、多模型混合部署等方面的技术合作上取得成效。

未来NVIDIA 和火山引擎团队将继续深化合作,包含在 NVIDIA Hopper 架构进行适配与优化、机密计算、重点模型合作优化、共同为重点客户提供支持,以及 NeMo Framework 适配等,携手助力大模型产业繁荣。

降低大模型使用成本

中国科学技术信息研究所等机构发布的《中国人工智能大模型地图研究报告》显示,截至今年5月,国内已公开披露的大模型数量达到79个。

大模型密集涌现,企业面临“选择困难”。“火山方舟”提供了丰富的模型精调和评测支持。吴迪介绍,企业可以用统一的工作流对接多家大模型,对于复杂需求可设置高级参数、验证集、测试集等功能,再通过自动化和人工评估直观对比模型精调效果,在不同业务场景里还可灵活切换不同的模型,实现最具性价比的模型组合。这些自定义指标和评估数据的积累,将成为企业在大模型时代宝贵的数据资产。

“火山方舟”的首批邀测企业,还包括金融、汽车、消费等众多行业的客户。北京银行CIO龚伟华表示,大模型与客户营销、办公协同、数据智能的结合,在金融应用场景有巨大潜力。北京银行将与“火山方舟”合作,在算力优化、模型精调等方面展开研究,共同推动金融风控、营销等模型应用落地。

助力大模型“跑完最后一公里”

集成多个大模型,供客户直接对比,“火山方舟”的多模型架构不仅为企业提供了丰富选择,也得到众多大模型生产方的积极响应。

据智谱AI CEO张鹏介绍,智谱AI在火山引擎平台上解决了千亿模型训练的稳定性、性能优化等挑战。百川智能联合创始人焦可表示,作为一款授权后可免费商用的开源大模型,开发者们可以通过baichuan-7B低成本部署模型,并根据自身需求灵活拓展模型能力。

科研机构同样是推动大模型技术发展的重要力量,复旦大学自然语言处理实验室开发的MOSS大模型、IDEA研究院开发的姜子牙系列大模型,均是该领域的代表作。IDEA研究院认知计算与自然语言研究中心讲席科学家张家兴表示,大模型生产方会不断提升基础模型能力,为大模型应用完成90%-99%的工作,“火山方舟”为代表的云平台要帮助客户为不同场景精调模型,“跑完最后一公里”。张家兴认为,“在技术驱动和需求拉动的作用下,大模型的世界必然百花齐放”。

谭待判断,企业使用大模型,未来可能会呈现“1+N”的模式:“1”是通过自研或深度合作,形成1个主力模型;由于成本和场景复杂多元等原因,在这个主力模型之外,还会有N个模型同时应用。

“每一次技术的大变革,都会带来体验创新的新机会”,谭待坦言,“火山方舟”还在起步阶段,工具链和下游应用插件需要持续完善。平台还将接入更多大模型,并逐步扩大邀测范围,与企业客户共建开放合作的多模型生态,加速大模型在各行各业的应用落地。

编辑:刘铭

【柬埔寨首相将率团前往马来西亚与泰方举行会晤】柬埔寨首相洪玛奈当地时间7月27日夜间在社交媒体发文,宣布他将率领代表团,于28日前往马来西亚吉隆坡,与泰方举行会晤。泰国总理府发言人集拉育27日表示,应东盟轮值主席国马来西亚总理安瓦尔邀请,泰国代理总理普坦28日上午将率团前往马来西亚讨论地区和平方案。柬埔寨和泰国24日以来在两国边境地区发生冲突,双方互相指责对方违反国际法。根据双方公布的数据,冲突已造成上百人伤亡,逾10万民众被迫疏散至安全区域。

【泽连斯基与冯德莱恩通电话 讨论乌克兰入欧谈判准备工作等问题】据央视新闻,乌克兰总统泽连斯基当地时间27日在社交媒体上表示,他与欧盟委员会主席冯德莱恩举行视频会谈,双方就乌克兰融入欧洲一体化进程、强化对俄制裁及国内反腐改革等议题进行深入讨论。在会谈中,泽连斯基重点介绍了乌克兰为启动欧盟成员资格谈判所做的准备工作。他表示,乌方正在全力推进相关改革,以期尽快开启首个谈判集群。他强调,乌克兰正以最高效率推进这项工作,期待在近期取得实质性进展。泽连斯基指出,乌克兰已在国内法律体系中完整纳入全部18轮欧盟制裁措施,并将持续强化制裁执行力度。

比特币达到12万美元,目前涨幅1.3%。

【柬埔寨首相将率团前往马来西亚与泰方举行会晤】柬埔寨首相洪玛奈当地时间7月27日夜间在社交媒体发文,宣布他将率领代表团,于28日前往马来西亚吉隆坡,与泰方举行会晤。泰国总理府发言人集拉育27日表示,应东盟轮值主席国马来西亚总理安瓦尔邀请,泰国代理总理普坦28日上午将率团前往马来西亚讨论地区和平方案。柬埔寨和泰国24日以来在两国边境地区发生冲突,双方互相指责对方违反国际法。根据双方公布的数据,冲突已造成上百人伤亡,逾10万民众被迫疏散至安全区域。

【泽连斯基与冯德莱恩通电话 讨论乌克兰入欧谈判准备工作等问题】据央视新闻,乌克兰总统泽连斯基当地时间27日在社交媒体上表示,他与欧盟委员会主席冯德莱恩举行视频会谈,双方就乌克兰融入欧洲一体化进程、强化对俄制裁及国内反腐改革等议题进行深入讨论。在会谈中,泽连斯基重点介绍了乌克兰为启动欧盟成员资格谈判所做的准备工作。他表示,乌方正在全力推进相关改革,以期尽快开启首个谈判集群。他强调,乌克兰正以最高效率推进这项工作,期待在近期取得实质性进展。泽连斯基指出,乌克兰已在国内法律体系中完整纳入全部18轮欧盟制裁措施,并将持续强化制裁执行力度。

请输入评论内容

举报成功

举报

请您选择举报的原因

说说你的看法

意见/建议 反馈入口
  • TOKEN
  • 标题/昵称
  • 反馈内容

已反馈成功~