浪潮信息《有数•高端对话》:大模型时代存储变革,产学研用共探新局
北京2024年12月23日 /美通社/ -- 在当今数字化浪潮汹涌澎湃的浪潮时代背景下,大模型技术犹如一颗璀璨的信息型时学研明星,照亮了科技发展的有数用共广阔苍穹,而存储技术的高端革产变革,作为这一进程中的对话大模代存坚实基石,正日益成为产业界与学术界共同瞩目的储变核心焦点。
为此,探新浪潮信息联合DOIT推出《有数•高端对话》栏目,浪潮分布式存储产品线总经理姜乐果及DOIT传媒主编李祥敬,信息型时学研与特邀嘉宾上海交通大学吴晨涛和中科闻歌陈思含共同围绕大模型的有数用共存储需求变化,展开了一场深度对话。高端革产深入探讨大模型时代背景下数据存储的对话大模代存变革之道,共话数字经济的储变创新发展,进一步夯实数据基础设施,探新充分释放数据资源的浪潮巨大价值,为广大行业同仁及用户提供价值参考与启示。
大模型驱动存储变革
大模型技术的迅猛发展对存储系统提出了极为严苛的要求。以GPT-4为例,其参数量达到了2200亿,每张GPU配备的HBM显存带宽达1.6TB/s,整体训练所需的显存容量接近400TB。根据Meta等公司的调研数据显示,大模型在运行过程中会频繁遭遇内存故障,平均每2-3小时便可能导致一次训练中断,这无疑对存储系统的安全可靠性提出了极高的标准。吴晨涛教授以GPT-4等前沿模型作为实例,清晰阐明了大容量HBM显存、高带宽以及高可靠性是存储系统不可或缺的三大核心特性。
同时,从宏观角度出发,吴教授呼吁建立开放的数据生态。在这一生态中,通过强化监管与隐私保护,旨在打破数据孤岛,促进数据的流动与共享,为高质量数据的充分涌流开辟道路,从而为行业大模型的发展提供持续不断的动力。
作为存储厂商的代表,姜乐果从存储技术进化的视角出发,详细阐述了在大模型驱动下,传统计算与当前智算中心存储设施的全方位变革。在性能层面,智算中心对存储性能的要求已从百GB级跃迁至TB级,与算力协同攀升;在容量维度,存储系统已从PB级大步迈向EB级,轻松应对海量数据洪流的冲击。同时,数据格式与协议的多元化与复杂性日益显著,这对存储系统突破兼容壁垒提出了迫切需求。
姜乐果还展示了企业在数据要素市场的积极布局与创新探索。浪潮信息紧跟政策导向,与多方合作伙伴携手,深入挖掘行业需求,精心研发端到端的解决方案及高性能存储新品。例如,新一代分布式存储平台AS13000G7系列产品在MLPerf™ AI存储基准评测中表现出色,在3D-UNet(医学图像分割)和CosmoFlow(宇宙学参数预测)两个应用场景共计8项测试中,斩获5项全球第一,彰显强大的性能实力,为行业大模型数据存储难题提供有力支撑。
中科闻歌作为一家专注于复杂数据解析和AI辅助决策的人工智能公司,陈思含分享了中科闻歌在大模型实践中的宝贵经验。在大模型的发展历程中,存储需求经历了显著的动态演变:从早期对训练速度的追求导致存储性能需求激增,到参数量膨胀带来的数据量与参数规模指数级增长,再到多模态数据处理对存储复杂性的严格要求,以及混合读写模式和多样化应用场景引发的多元化需求。
数据质量作为行业大模型发展的核心驱动力,中科闻歌在此方面进行了创新实践。集成了全球多语言媒体数据的闻海大数据平台,运用跨模态AI技术融合信息,构建了垂直领域知识库,并提供模块化的智能大屏工具。这一平台不仅具备全球范围内高效、安全获取和处理高质量数据的能力,还成为训练大模型所需高质量数据的主要数据源和知识库。
在为客户提供大模型落地产品和系统时,中科闻歌采取了混合模式,即结合公司自身海量数据与用户的私有行业数据进行模型训练和应用构建,确保了客户的数据安全,避免了数据出域的风险。
协同创新下的趋势展望
展望未来存储发展,吴晨涛教授立足学术前沿,前瞻性地预判了关键技术走向。他认为,跨域资源调度共享技术,特别是基于CXL协议的内存池创新,将打破资源限制,实现全域资源的灵动调配。同时,优化元数据管理将提升数据检索与处理效率,而内存故障预测及Checkpointing技术则能确保系统稳定运行,最大限度地减少故障对数据处理连续性和完整性的影响。这些技术的迭代升级将为存储技术的发展指明方向。
作为存储厂商的代表,浪潮信息积极拥抱变革,从Storage for AI深度适配需求,到AI for Storage智能赋能提效,再到与大模型企业紧密合作,精准挖掘系统性能潜能,为用户提供更贴合业务的产品。
作为大模型企业的代表,中科闻歌致力于打造高效、安全和可靠的存储系统,以适应大模型时代的新要求。在架构上,采用存算分离架构部署AI-Ready数据基础设施,以加速智能应用。在效率提升方面,全闪存存储凭借其卓越性能成为破局关键,能够加速数据流转,激活数据价值。而在安全防护层面,中科闻歌构建主动防御体系,从内核强化存储安全,筑牢安全防线。
此次对话栏目的成功举办,不仅搭建了产学研用之间的沟通桥梁,还为各方的深度合作提供了宝贵的机会。各方代表能够相互交流思想、碰撞火花,共同探讨大模型时代下的存储技术变革。这一举措为产学研用四方携手共进创造了难得契机,共同迎接大模型时代带来的存储变革浪潮,推动我国存储产业的繁荣发展。
-
文章
88
-
浏览
566
-
获赞
6
热门推荐
-
央行对财付通、平安银行、邮储银行和人保财险等四家公司开出罚单
厨卫百分百受邀出席家电界“达沃斯”第八届中国家电营销年会!
11月5日至7日,亚太地区极具影响力的家电行业盛会“第八届中国家电营销年会”将在杭州开元名都大酒店举行。中国家电营销年会,被家电业内人士称为家电“达沃斯&rdquo天马主题游乐园将落户新疆昭苏:东旭集团斥资40亿打造
9月15日,记者从第二届中国西部国际博览会进出口商品展暨中国西部投资大会上获悉,新疆昭苏县与东旭集团有限公司签约昭苏天马小镇合作意向协议书。东旭集团将投资40亿元,在昭苏县打造天马主题游乐园,项目将配厨卫百分百受邀出席家电界“达沃斯”第八届中国家电营销年会!
11月5日至7日,亚太地区极具影响力的家电行业盛会“第八届中国家电营销年会”将在杭州开元名都大酒店举行。中国家电营销年会,被家电业内人士称为家电“达沃斯&rdquo别冲动!瓷砖空鼓不一定非得撬开重铺!还有其他补救方法!
【建材网】瓷砖铺贴不好,极易出现空鼓脱落问题,空鼓处瓷砖不受力,当受到外力过大时容易破裂,还会逐渐扩大空鼓范围,终导致瓷砖翘起或脱落,砸坏家具电器,甚至给人身安全造成一定威胁。地砖空鼓则会导致起拱起翘超低排放是中国发展战略抉择
超低排放自提出以来就受到广泛关注。我国为何要实施超低排放?超低排放技术、经济是否可行?具有怎样的环境效益?业界围绕这些问题展开了一系列讨论。笔者认为,中国实施煤电超低排放势在必行,对经济发展和环境保护一周狂揽8冠1亚:CHC美国和澳大利亚赛场大丰收【视频】
CHC杰士马主俱乐部自2013年放马出赛以来,已在全球11个国家征战,并取得不俗战绩。CHC赛马及标志性红黄五星彩衣已经在中国、澳大利亚、英国、法国、意大利、爱尔兰、新西兰、新加坡、南非、美国以及韩国“大谦雄鹰”问鼎10万奖金大谦战狼杯:众明星马主现场见证
9月17日下午,2017莱德马主争霸赛在云南昆明中信莱德嘉丽泽赛马场激情开赛,第二场10万元奖金的大谦战狼杯三岁马公开赛2300赛事因为有3匹“大谦家族”的马出赛而备受关注。闸门打开后,4号马“王者荣嘉宝莉桥梁防腐解决方案,助力建设宁波国际会议中心道路
【建材网】奋战703个日夜,位于东钱湖畔的宁波国际会议中心于5月31日顺利通过工程竣工验收!宁波国际会议中心项目总建筑面积40.62万平方米,项目总体定位为国际顶 级会议中心,旨在建立一个面向全 球的莱德马业被评定为内蒙古自治区“骨干文化企业”
9月21日下午,内蒙古自治区文化改革发展工作会议发布《内蒙古自治区党委宣传部、自治区统计局关于命名自治区骨干文化企业、重点小微文化企业的通报》。此次共有20家企业入选“自治区骨干文化企业名单”,内蒙古页岩制砂机生产厂家哪里的好?
页岩制砂机生产厂家、河南红星矿山机器、河南红星机器、制砂机设备、制砂机厂家、页岩制砂机、制砂机厂家直销,30年品质保证,用途、产量、价格详询:0371 - 67772727portant; font:迎岁末佳节,众多Wonderful Indonesia合作伙伴推出12.12促销宣传活动
印尼雅加达2024年12月13日 /美通社/ -- 为庆祝2024年圆满落幕,印尼旅游部特别策划了"Wonderful Indonesia 12.12"促销宣传活动。据印尼交通部调央行降息发力稳增长,房贷利率有望下调
央行6月13日公告称,为维护银行体系流动性合理充裕,6月13日以利率招标方式开展20亿7天期逆回购操作,中标利率1.9%,相比上一交易日下降10BP。7天期逆回购操作利率是短端政策利率,本次下调意味着环境保护部就《水污染防治法》修订草案征求意见
为深入推进我国水污染防治工作,切实改善水环境质量,根据全国人大立法工作计划,按照国务院的总体部署,在认真调查研究的基础上,环境保护部起草了《水污染防治法(修订草案)》(征求意见稿)。为充分了解各有关方福建环保考核校准绿色航向 多方面考核生态环保
福建省生态文明建设领导小组办公室日前出台《2016年度党政领导生态环境保护目标责任书考核指标》(以下简称《考核指标》)。这是继福建省建立党政领导生态环境保护目标责任制后配套出台的考核指标办法,明确了党