0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

数聚AI ? 智慧未来 | 浪潮信息存储助力企业基于大模型实现数字化创新

浪潮存储 ? 来源:未知 ? 2023-11-30 16:25 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

2023年生成式AI和大模型的爆发,让我们面对一个变化更加快速也更加激动人心的时代,随着新质生产力和算力基础设施高质量发展的提出,算力和存储基础设施也面临着创新与破局,如何在生成式AI和大模型时代,更好地帮助企业实现数字化创新?

11月29日,由DOIT传媒举办的“数智创新 · AI未来”—2023中国数据与存储峰会在北京成功举办,浪潮信息存储产品线副总经理刘希猛和分布式存储总经理姜乐果受邀参会,分享了存储在生成式AI和大模型上的创新理念与实践,与合作伙伴和客户共同探讨通过创新发展应对快速变化的新时代。

新场景数聚AI加速企业向智能化场景变革

生成式AI和大模型与千行百业进行了全面的融合,带来了自动驾驶、智能制造、智慧医疗等AI+创新应用场景,这些新的应用场景将加速传统产业向智能化的变革。

千行百业的AI+创新应用带来了数据爆发式的增长,数据要素在产业智能化的过程中发挥着重要作用。IDC最新发布的数据显示,中国数据量规模将从2022的23.88ZB增长至2027年的76.6ZB,增长幅度为全球第一,其中企业数据量占据70%,而仅有24%的数据被用于分析或AI决策,这意味着企业将有更大的空间来挖掘数据价值。

中国非常重视数据要素的作用,发布了如《算力基础设施高质量发展行动计划》、《数据要素白皮书》、《生成式人工智能服务暂行方法》等一系列政策,推动企业在激活数据要素潜能和加速人工智能领先等方面的发展。

在AI 时代,原始数据呈现出多源多态的趋势,包括文本、图像、音频视频有感数据以及激光、毫米波、红外线等无感数据,会产生TB级乃至PB级多态数据,这一趋势给数据的存储、管理和应用带来了新的需求和挑战。

这些新的需求和挑战体现在巨量多模态数据、超大读写带宽、超高读写IOPS和全生命周期管理四个方面。姜乐果表示,随着训练模型从LLM(语言)、ALM(音频)、CV(计算视觉)、VL(多模态)到FMLM(混合模态),对数据存储的要求从PB级到EB级容量需求,从100GB带宽到TB级带宽的性能访问要求,同时还要求在多源异构数据之间实现快速转换与传输,实现生命的全生命周期管理,以及数据的安全可靠。

新存储分布式融合存储助力企业实现破局创新

面对AI时代多源多态的数据挑战,企业需要支持多种架构、具有持久性、灵活性的数据基础设施,来部署和实施生成式AI的创新应用。

浪潮信息存储一直秉持“分层解耦”的理念,提供从数据中心、硬件平台、大模型智算软件栈OGAI和基础大模型完整的全栈解决方案,以应对生成式AI和大模型时代的全面需求和挑战。其中解决数据多模多态需求和挑战的就是分布式融合存储平台。

浪潮信息存储面向生成式AI的分布式融合存储解决方案结合生成式AI和大模型的数据采集、数据准备、数据训练、数据推理和数据归档的五个阶段,由同一套存储提供端到端的数据流支持流程,满足面向文本、音频、图像、视频、代码以及多模态和全模态的模型的需求,具有极致融合、极致容量、极致性能和极致管理四大特点。

极致融合是面向海量、多源、异构非结构化数据场景,融合多种存储介质、多协议实时互访互通、系统扁平扩展,可以用一套存储实现多模态场景应用;极致容量是从PB级到EB级甚至是ZB级,通过多种容量算法的加持,让存储空间利用达到最优,让客户的投资收益最大化;极致性能是通过对存储性能的极致提升,带来了超大带宽和超高IOPS,满足了生成式AI和大模型场景对存储的苛刻要求;极致管理提供了闪存、磁盘、磁带、光盘四种介质,以及提供了热温冷冰四种存储资源,实现了资源的互通,可以实现数据全生命周期的管理。

刘希猛认为,在非结构化数据爆发的生成式AI和大模型时代,无论基于高性能文件、流式对象还是原生大数据的智能化应用,浪潮信息的分布式存储平台都将成为企业简化IT部署和实施生成式AI创新的关键支撑。

新实践在源大模型和企业AIGC上的创新实践

作为全球领先的IT 基础设施产品、方案及服务提供商,浪潮信息已经建立了面向大模型应用场景的整体解决方案。

2023年10月,浪潮信息帮助中科大升级其校级“融合计算平台”,部署了25个GPU服务器节点和40个分布式融合存储节点,来满足不同学科、领域产生的海量多模态数据需求,助力AI驱动下的高水平科研创新。

在助力企业应用生成式AI和大模型实现数字化创新上,浪潮信息不仅提供了数据中心和硬件平台,还基于数据基础设施的领先性,为企业提供了大模型智算软件栈OGAI和基础大模型“源2.0”。

刘希猛介绍,大模型智算软件栈OGAI“元脑生智”是浪潮信息面向以大模型为核心技术的生成式AI开发与应用场景,提供从集群系统环境部署到算力调度保障和大模型开发管理的全栈全流程的软件,从而降低大模型算力系统的使用门槛、优化大模型的研发效率,保障大模型的生产与应用。

源大模型是浪潮信息存储支持生成式AI和大模型的最佳实践。11月27日基于浪潮信息大模型整体方案的“源2.0”大模型正式发布,并全面开源,这也将会更好地满足企业大模型开发和应用的需求,推动企业的应用创新。

在“源1.0”中文语言大模型的训练中,AS13000就采用最新硬件平台,搭载全闪SSD和高速IB网络,支撑“源1.0”的训练过程高效完成。在刚刚发布的“源2.0”大模型中,浪潮信息存储更是作为模型训练的基座,为数据的采集、预处理、训练和归档起到了不可忽视的助力,高灵活可扩展的容量为“源2.0”获取12个PB中文数学数据提供了坚实的后盾,使模型训练在容量方面不存在瓶颈。

wKgaomVoSAuARcliAADAmPyYtU4461.jpgwKgaomVoSAyAf-LaAAC_y0frv_s035.jpg

在2023中国数据与存储峰会上,浪潮信息存储还获得了“2023年度高端存储产品金奖”和“2023年年度存储技术创新奖”。

2022年,浪潮信息存储继续实现了高速增长,存储装机量位列全球前三,分布式文件存储装机量位列中国第一。浪潮信息的集中式存储被某大行用户应用,最大装机量达到近千套,用户将存储部署在云化“两地三中心”中,支撑了超过100个金融应用。分布式存储连续5年入围全球最大的电信运营商集采,有近1000套、超过1万个分布式存储节点应用在各种场景和业务上。在过去的一年,浪潮信息存储实现了金融行业的六大行、股份制、城商行等用户的全面突破。

浪潮信息未来将会继续秉持着创新的服务理念,基于浪潮信息的基础平台能力和源自JDM的存储场景共同体定制能力,持续将先进的产品、技术、解决方案带给企业,与客户和合作伙伴一起携手共行,帮助企业加快实现数字化转型和创新,加速实现高质量发展,服务未来数字化转型。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 存储
    +关注

    关注

    13

    文章

    4557

    浏览量

    87740
  • 浪潮
    +关注

    关注

    1

    文章

    475

    浏览量

    24857

原文标题:数聚AI ? 智慧未来 | 浪潮信息存储助力企业基于大模型实现数字化创新

文章出处:【微信号:inspurstorage,微信公众号:浪潮存储】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    雷曼智慧会议交互系统助力企业打造会议

    在Deepseek等AI模型掀起认知智能浪潮的当下,企业会议场景正迎来新的变革。雷曼智慧会议交互系统(简称“雷曼会议一体机”)将前沿
    的头像 发表于 03-19 15:50 ?431次阅读

    浪潮信息存储SATA SSD:技术创新引领数据存储新时代

    智慧时代,数据存储需求日益增长,对存储产品的性能和稳定性提出了更高要求。浪潮信息存储,作为行业内的佼佼者,积极响应市场需求,通过自主研发,
    的头像 发表于 02-07 13:41 ?728次阅读

    浪潮信息存储SATA SSD:以技术创新,开启数据存储新篇章

    计算平台以及个人用户的数字化需求,迫切需要高效、可靠的存储解决方案。 浪潮信息存储积极响应市场需求,通过自主研发不断积累技术优势,推出了SATA、NVMe、双端口、ZNS等全系列
    的头像 发表于 01-24 10:02 ?515次阅读

    博研智通携手浪潮信息打造香港智慧交通

    近日,为了将有限的物理空间发挥到极致,香港率先在多个繁华地段的十字路口升级为智慧路口。通过浪潮信息助力博研智通打造的「云边协同的全息智慧路口整体解决方案」,
    的头像 发表于 01-03 11:40 ?699次阅读

    浪潮信息与智源研究院携手共建大模型多元算力生态

    人工智能技术的快速发展。浪潮信息与智源研究院将充分整合各自在算力、算法和技术创新方面的优势资源,共同探索大模型多元算力的新应用和新模式。 目前,智源研究院的Triton算子库FlagGems已正式接入
    的头像 发表于 12-31 11:49 ?680次阅读

    浪潮信息剖析智能时代数据存储领域面临的挑战与机遇

    在当今数字化时代,算力与存力的协同增长已成为驱动各行各业发展的关键力量。特别是在人工智能(AI)这一前沿领域,随着数据量的爆炸式增长,对存储系统的需求日益复杂和多样。近期,在首届CCF中国存储
    的头像 发表于 12-30 09:43 ?848次阅读

    浪潮信息与智源研究院达成战略合作协议

    正式接入浪潮信息的元脑企智EPAI企业模型开发平台,助力企业实现更快速、更广泛、更高效的多元算
    的头像 发表于 12-26 10:25 ?670次阅读

    浪潮信息与17家元脑伙伴共签亿级分销协议

    。 此次签约标志着浪潮信息与这些元脑伙伴将在产品技术创新、市场拓展及解决方案等多个领域展开深入合作。双方将充分发挥各自优势,共同推动技术革新,加速智能转型的步伐,为千行百业的数字化
    的头像 发表于 12-25 15:46 ?821次阅读

    佰维存储荣获十大转型创新企业

    近日,2024 DT WORLD国际数字科技领袖峰会暨IDI Award 创奖·颁奖盛典在深圳成功举办,佰维存储荣获“十大转型
    的头像 发表于 12-13 11:25 ?917次阅读

    浪潮信息发布“源”Yuan-EB助力RAG检索精度新高

    近日,浪潮信息发布 “源”Yuan-EB(Yuan-embedding-1.0,嵌入模型),在C-MTEB榜单中斩获检索任务第一名,以78.41的平均精度刷新大模型RAG检索最高成绩,将基于元脑企
    的头像 发表于 11-26 13:54 ?790次阅读
    <b class='flag-5'>浪潮信息</b>发布“源”Yuan-EB<b class='flag-5'>助力</b>RAG检索精度新高

    浪潮信息发布KOS AI定制版,大幅提升大模型训练效率

    浪潮信息近期推出了“元脑服务器操作系统KOS AI定制版”,为人工智能领域带来了革命性的变化。这款定制版操作系统通过简单的两步操作,即可实现模型训练环境的快速部署。
    的头像 发表于 10-30 17:23 ?1032次阅读

    浪潮信息AI存储性能测试的领先之道

    MLCommons,一个致力于推动全球 AI系统发展的顶级工程联盟,汇聚了包括谷歌、斯坦福大学在内的众多顶尖企业和研究机构。作为该联盟的创始成员之一,浪潮信息自2020年起便积极参与其中,共同探索
    的头像 发表于 10-29 16:30 ?748次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>AI</b><b class='flag-5'>存储</b>性能测试的领先之道

    浪潮信息:元脑企智EPAI助力金融大模型快速落地

    近日,2024金融科技应用创新发展大会暨农村金融机构信息化发展创新座谈会在上海举办。浪潮信息推出元脑企智EPAI企业
    的头像 发表于 09-20 16:07 ?762次阅读
    <b class='flag-5'>浪潮信息</b>:元脑企智EPAI<b class='flag-5'>助力</b>金融大<b class='flag-5'>模型</b>快速落地

    物联网公司的数字化转型之旅

    无形的网,将万物互联,让数据流动,推动社会向更加智能、高效、可持续的方向发展。那么,在这场变革中,英电子如何把握机遇,助力企业实现自身的数字化
    的头像 发表于 08-23 16:09 ?609次阅读

    工业物联网如何从数字化步入新阶段

    ”转型,工业物联网(IIoT)正处于从数字化新阶段的转型中。北京英电子有限公司(简称:英电子)将和您探讨工业物联网如何从
    的头像 发表于 08-23 16:08 ?570次阅读