首页 > 经济·科技

火山引擎发布“火山方舟” 加速大模型应用落地

2023-06-28 17:47:51

来源:中国新闻网

  6月28日,在火山引擎主办、英伟达合作举办的“V-Tech体验创新科技峰会”上,火山引擎发布大模型服务平台“火山方舟”,面向企业提供模型精调、评测、推理等全方位的平台服务(MaaS,即Model-as-a-Service)。目前,“火山方舟”集成了百川智能、出门问问、复旦大学MOSS、IDEA研究院、澜舟科技、MiniMax、智谱AI(以拼音首字母排序)等多家AI科技公司及科研院所的大模型,并已启动邀测。

火山引擎总裁谭待公布“火山方舟”首批大模型合作伙伴

  “企业使用大模型,首先要解决安全与信任问题”,火山引擎总裁谭待表示,“火山方舟”实现了大模型安全互信计算,为企业客户确保数据资产安全。基于“火山方舟”独特的多模型架构,企业可同步试用多个大模型,选用更适合自身业务需要的模型组合。

  首创安全互信计算

  与小模型“自产自用”不同的是,大模型的生产门槛很高,数据安全成为大模型时代的新命题。谭待认为,企业使用大模型,最担心的是数据泄露;如果将大模型私有化部署,企业将承担更高的成本,模型生产方也会担心知识资产安全。“火山方舟”的首要任务,就是做好大模型使用者、提供者和云平台可以互相信任的安全保障

火山引擎智能算法负责人吴迪介绍“安全互信计算”

  据火山引擎智能算法负责人吴迪介绍,“火山方舟”已上线了基于安全沙箱的大模型安全互信计算方案,利用计算隔离、存储隔离、网络隔离、流量审计等方式,实现了模型的机密性、完整性和可用性保证,适用于对训练和推理延时要求较低的客户。

  吴迪表示,“火山方舟”还在探索基于NVIDIA新一代硬件支持的可信计算环境、基于联邦学习的数据资产分离等多种方式的安全互信计算方案,更全面地满足大模型在不同业务场景的数据安全要求。

  会上,NVIDIA开发与技术部亚太区总经理李曦鹏表示,NVIDIA与火山引擎过往合作成果丰硕,包括共同合作的 GPU推理库 ByteTransformer在 IEEE国际并行和分布式处理大会(IPDPS2023)上获得最佳论文奖,双方还联合开源了高性能图像处理加速库 CV-CUDA,并在大规模稳定训练、多模型混合部署等方面的技术合作上取得成效。

  未来 NVIDIA和火山引擎团队将继续深化合作,包含在 NVIDIA Hopper架构进行适配与优化、机密计算、重点模型合作优化、共同为重点客户提供支持,以及 NeMo Framework适配等,携手助力大模型产业繁荣。

  降低大模型使用成本

  中国科学技术信息研究所等机构发布的《中国人工智能大模型地图研究报告》显示,截至今年5月,国内已公开披露的大模型数量达到79个。

  大模型密集涌现,企业面临“选择困难”。在吴迪看来,技术发展日新月异,国内大模型正在快速迭代,不同大模型在特定任务上各有千秋,企业不必急于绑定一家大模型,而是应该结合自身业务场景,综合评估使用效果和成本,在不同场景选用更具性价比的模型。

  吴迪称,训练大模型很昂贵,但是从长期来看,模型的推理开销会超过训练开销。效果和成本的矛盾永远存在,降低推理成本会是大模型应用落地的重要因素,“一个经过良好精调的中小规格模型,在特定工作上的表现可能不亚于通用的、巨大的基座模型,而推理成本可以降低到原来的十分之一。”

  资料显示,微软以医学文章数据精调了生物领域的BioGPT-Large模型,仅有15亿参数,其在 PubMedQA基准测试中的准确率却优于有着上千亿乃至数千亿参数的大型通用语言模型。

  “火山方舟”提供了丰富的模型精调和评测支持。吴迪介绍,企业可以用统一的工作流对接多家大模型,对于复杂需求可设置高级参数、验证集、测试集等功能,再通过自动化和人工评估直观对比模型精调效果,在不同业务场景里还可灵活切换不同的模型,实现最具性价比的模型组合。这些自定义指标和评估数据的积累,将成为企业在大模型时代宝贵的数据资产。

  据吴迪透露,抖音集团内部已有十多个业务团队试用“火山方舟”,在代码纠错等研发提效场景,文本分类、总结摘要等知识管理场景,以及数据标注、归因分析等方面探索,利用大模型能力促进降本增效。这些内部实践在快速打磨“火山方舟”,推动平台能力的进一步完善。

  “火山方舟”的首批邀测企业,还包括金融、汽车、消费等众多行业的客户。北京银行CIO龚伟华表示,大模型与客户营销、办公协同、数据智能的结合,在金融应用场景有巨大潜力。北京银行将与“火山方舟”合作,在算力优化、模型精调等方面展开研究,共同推动金融风控、营销等模型应用落地。

  助力大模型“跑完最后一公里”

  集成多个大模型,供客户直接对比,“火山方舟”的多模型架构不仅为企业提供了丰富选择,也得到众多大模型生产方的积极响应。

  ChatGLM是智谱AI推出的千亿基座认知模型,其开源版本在大模型开源领域极具影响力,近期智谱AI还对ChatGLM做了新升级,大幅提升了模型能力。在“火山方舟”上,智谱AI提供具有竞争力的大模型,火山引擎提供高性价比资源、针对不同行业的精调能力及综合解决方案,共建安全可靠的第三方MaaS服务,合力推动各行业的智能化发展。据智谱AI CEO张鹏介绍,智谱AI在火山引擎平台上解决了千亿模型训练的稳定性、性能优化等挑战。

  baichuan-7B发布后在MMLU、C-Eval等中英文权威榜单中均表现优异。百川智能联合创始人焦可表示,作为一款授权后可免费商用的开源大模型,开发者们可以通过baichuan-7B低成本部署模型,并根据自身需求灵活拓展模型能力,而本次与“火山方舟”的合作也将有效降低企业用户的大模型接入门槛和使用成本,帮助更多企业轻松获取专业服务。

  MiniMax等大模型企业代表也亮相参加“火山方舟”的发布仪式。此前,MiniMax联合创始人杨斌公开分享了与火山引擎的合作成果:MiniMax在火山引擎上实现了从月至周级别的大模型迭代速度,和指数级的用户交互增长,“或许是国内第一家在公有云上实现数千卡并行训练的公司”。MiniMax还自研了超大规模的推理平台,稳定支撑着每天上亿次的大模型推理调用。MiniMax的文本、语音、视觉三个模态大模型登陆“火山方舟”,是双方合作的进一步深化。

  科研机构同样是推动大模型技术发展的重要力量,复旦大学自然语言处理实验室开发的MOSS大模型、IDEA研究院开发的姜子牙系列大模型,均是该领域的代表作。IDEA研究院认知计算与自然语言研究中心讲席科学家张家兴表示,大模型生产方会不断提升基础模型能力,为大模型应用完成90%-99%的工作,“火山方舟”为代表的云平台要帮助客户为不同场景精调模型,“跑完最后一公里”。张家兴认为,“在技术驱动和需求拉动的作用下,大模型的世界必然百花齐放”。

  谭待判断,企业使用大模型,未来可能会呈现“1+N”的模式:“1”是通过自研或深度合作,形成1个主力模型;由于成本和场景复杂多元等原因,在这个主力模型之外,还会有N个模型同时应用。

  “每一次技术的大变革,都会带来体验创新的新机会”,谭待坦言,“火山方舟”还在起步阶段,工具链和下游应用插件需要持续完善。平台还将接入更多大模型,并逐步扩大邀测范围,与企业客户共建开放合作的多模型生态,加速大模型在各行各业的应用落地。

【责任编辑:长风】
  • 相关阅读
  • 北京发布首批10个行业大模型典型应用案例 涉城市治理等领域

      中新网北京6月27日电 (记者 陈杭)记者23日从北京市科委、中关村管委会获悉,北京市首批10个行业大模型典型应用案例正式发布,涉及城市治理、医疗健康等领域,均由技术供给方与场景需求方联合研发。北京市持续征集行业大模型典型应用案例和场景需求,编制大模型技术产业创新图谱,并将适时发布。  发布...

    时间:06-27
  • 李彦宏:AI原生应用比大模型数量更重要

      6月26日,百度创始人、董事长兼首席执行官李彦宏出席“世界互联网大会数字文明尼山对话”,发表了题为《大模型重塑数字世界》的演讲。  大模型是当下全球科技创新的焦点,也是全球人工智能竞赛的主战场。李彦宏认为,“新的国际竞争战略关键点,不是一个国家有多少个大模型,而是你的大模型上有多少原生的AI应用,这些应用在多大程...

    时间:06-26
  • 北大光华与腾讯云共建AI通识课:加速大模型落地产业场景创新

      中新网6月21日电 题:北大光华与腾讯云共建AI通识课:加速大模型落地产业场景创新  中新财经记者 夏宾  21日,北京大学光华管理学院联合腾讯举办“科技创新与管理升维”论坛,集合科技界与产业界的学者、企业家,共同探讨科技创新的动力、面向未来的管理、技术升维管理的方案。  同时,双方也在论坛现场共同发布了“企业管理...

    时间:06-21
  • 美图吴欣鸿:如何打造一个懂美学的AI视觉大模型?

      6月19日,第二届美图影像节现场,美图公司创始人、董事长兼首席执行官吴欣鸿分享了美图视觉大模型MiracleVision(奇想智能)的背后故事,并围绕“AI时代的影像生产力工具”主题,回顾了近一年带领美图探索AI的心路历程。  吴欣鸿表示,工具价值将在AI时代迎来大爆发。在AI与影像生产力工具的紧密结合下,优质内容创作门槛不断降低,影...

    时间:06-21
  • 拥抱AIGC新技术浪潮,大模型成内容生产创新引擎

      输入几个关键词,一幅精美的画作几秒钟就能诞生。设置好相应的指令,一个原本需要耗时数月的视频已不需要人工剪辑。随着科技的发展,AI写作、AI绘画、AI视频生成等内容生产领域正迎来AIGC带来的大变革。  AIGC会给创作者带来什么,新描绘的商业地图是什么样的?6月19日,百度举行100°C TALK AIGC创作和商业化能力沙龙,专业媒体机...

    时间:06-20
  • AI大模型火爆 行业大咖共话AI新发展产业新机遇

      中新网长沙6月20日电 (刘曼)随着ChatGPT的爆火,如今的AI大模型俨然成为不少企业新的发力方向,这背后也蕴含了一个巨大的市场。6月19日,2023互联网岳麓峰会“AI致远,产业图新”主题论坛在长沙举行,专家学者、业界大咖聚焦人工智能发展新格局、新动能,探讨产业发展新实践、新机遇。  “目前人工智能很大部分为机器智能,但自然界...

    时间:06-20
  • “紫东太初”全模态大模型正式发布 持续探索可自主进化通用人工智能

      中新网北京6月16日电 (记者 孙自法)记者从中国科学院自动化研究所(中科院自动化所)获悉,在6月16日举行的“人工智能框架生态峰会2023”上,中科院自动化所所长徐波研究员正式发布“紫东太初”全模态大模型,持续探索可自主进化的通用人工智能(AI)。  首次展示“紫东太初”全新功能  “紫东太初”...

    时间:06-16
  • 中科院:自主研制新一代人工智能大模型问世

        中国科学院自动化研究所今天(16日)上午在上海发布了该所研制的新一代人工智能大模型——紫东太初2.0。全新大模型相比第一代着力提升了决策与判断能力,实现了从感知、认知到决策的跨越,未来将在医疗、交通、工业生产等领域发挥更大作用。  人工智能大模型是一个庞大复杂的网络系统,类似于人的大脑,其中的节点和数据量...

    时间:06-16
  • 通用认知智能大模型有了能力评测体系 包含7大能力维度、481个细分任务类型

      ◎本报记者 吴长锋  通用认知智能大模型评测体系根据底层认知智能能力的智能涌现对通用认知智能大模型的能力进行分析,从而制定通用认知智能大模型的评测标准与评测方法,更科学地衡量通用认知智能大模型各个方面的能力和水平。  王士进 认知智能全国重点实验室副主任  6月3日,以“AI大模型时代的长三角数字化之路”为...

    时间:06-12
  • 国产大模型“诸神之战”出路何方

    1956年,达特茅斯学院的一场会议上,参会者热烈地讨论:如何开发出像人类一样能从经验中自主学习的计算机系统。这场会议被后人视为打响了人工智能研发的第一枪。  60余年后,美国OpenAI公司八年磨一剑的人工智能大模型ChatGPT3横空出世,人们争相在社交媒体展示它那令人吃惊的能力,ChatGPT4更是“所向披靡”:作诗、写文案已不在话下,它...

    时间:06-12
版权声明:内容资源均来自于网友投稿、互联网整理编辑,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容,请发送邮件举报,一经查实,本站将立刻删除。