北京2024年12月23日 /美通社/ -- 在当今数字化浪潮汹涌澎湃的浪潮时代背景下,大模型技术犹如一颗璀璨的信息型时学研明星,照亮了科技发展的有数用共广阔苍穹,而存储技术的高端革产变革,作为这一进程中的对话大模代存坚实基石,正日益成为产业界与学术界共同瞩目的储变核心焦点。
为此,探新浪潮信息联合DOIT推出《有数•高端对话》栏目,浪潮分布式存储产品线总经理姜乐果及DOIT传媒主编李祥敬,信息型时学研与特邀嘉宾上海交通大学吴晨涛和中科闻歌陈思含共同围绕大模型的有数用共存储需求变化,展开了一场深度对话。高端革产深入探讨大模型时代背景下数据存储的对话大模代存变革之道,共话数字经济的储变创新发展,进一步夯实数据基础设施,探新充分释放数据资源的浪潮巨大价值,为广大行业同仁及用户提供价值参考与启示。
大模型驱动存储变革
大模型技术的迅猛发展对存储系统提出了极为严苛的要求。以GPT-4为例,其参数量达到了2200亿,每张GPU配备的HBM显存带宽达1.6TB/s,整体训练所需的显存容量接近400TB。根据Meta等公司的调研数据显示,大模型在运行过程中会频繁遭遇内存故障,平均每2-3小时便可能导致一次训练中断,这无疑对存储系统的安全可靠性提出了极高的标准。吴晨涛教授以GPT-4等前沿模型作为实例,清晰阐明了大容量HBM显存、高带宽以及高可靠性是存储系统不可或缺的三大核心特性。
同时,从宏观角度出发,吴教授呼吁建立开放的数据生态。在这一生态中,通过强化监管与隐私保护,旨在打破数据孤岛,促进数据的流动与共享,为高质量数据的充分涌流开辟道路,从而为行业大模型的发展提供持续不断的动力。
作为存储厂商的代表,姜乐果从存储技术进化的视角出发,详细阐述了在大模型驱动下,传统计算与当前智算中心存储设施的全方位变革。在性能层面,智算中心对存储性能的要求已从百GB级跃迁至TB级,与算力协同攀升;在容量维度,存储系统已从PB级大步迈向EB级,轻松应对海量数据洪流的冲击。同时,数据格式与协议的多元化与复杂性日益显著,这对存储系统突破兼容壁垒提出了迫切需求。
姜乐果还展示了企业在数据要素市场的积极布局与创新探索。浪潮信息紧跟政策导向,与多方合作伙伴携手,深入挖掘行业需求,精心研发端到端的解决方案及高性能存储新品。例如,新一代分布式存储平台AS13000G7系列产品在MLPerf™ AI存储基准评测中表现出色,在3D-UNet(医学图像分割)和CosmoFlow(宇宙学参数预测)两个应用场景共计8项测试中,斩获5项全球第一,彰显强大的性能实力,为行业大模型数据存储难题提供有力支撑。
中科闻歌作为一家专注于复杂数据解析和AI辅助决策的人工智能公司,陈思含分享了中科闻歌在大模型实践中的宝贵经验。在大模型的发展历程中,存储需求经历了显著的动态演变:从早期对训练速度的追求导致存储性能需求激增,到参数量膨胀带来的数据量与参数规模指数级增长,再到多模态数据处理对存储复杂性的严格要求,以及混合读写模式和多样化应用场景引发的多元化需求。
数据质量作为行业大模型发展的核心驱动力,中科闻歌在此方面进行了创新实践。集成了全球多语言媒体数据的闻海大数据平台,运用跨模态AI技术融合信息,构建了垂直领域知识库,并提供模块化的智能大屏工具。这一平台不仅具备全球范围内高效、安全获取和处理高质量数据的能力,还成为训练大模型所需高质量数据的主要数据源和知识库。
在为客户提供大模型落地产品和系统时,中科闻歌采取了混合模式,即结合公司自身海量数据与用户的私有行业数据进行模型训练和应用构建,确保了客户的数据安全,避免了数据出域的风险。
协同创新下的趋势展望
展望未来存储发展,吴晨涛教授立足学术前沿,前瞻性地预判了关键技术走向。他认为,跨域资源调度共享技术,特别是基于CXL协议的内存池创新,将打破资源限制,实现全域资源的灵动调配。同时,优化元数据管理将提升数据检索与处理效率,而内存故障预测及Checkpointing技术则能确保系统稳定运行,最大限度地减少故障对数据处理连续性和完整性的影响。这些技术的迭代升级将为存储技术的发展指明方向。
作为存储厂商的代表,浪潮信息积极拥抱变革,从Storage for AI深度适配需求,到AI for Storage智能赋能提效,再到与大模型企业紧密合作,精准挖掘系统性能潜能,为用户提供更贴合业务的产品。
作为大模型企业的代表,中科闻歌致力于打造高效、安全和可靠的存储系统,以适应大模型时代的新要求。在架构上,采用存算分离架构部署AI-Ready数据基础设施,以加速智能应用。在效率提升方面,全闪存存储凭借其卓越性能成为破局关键,能够加速数据流转,激活数据价值。而在安全防护层面,中科闻歌构建主动防御体系,从内核强化存储安全,筑牢安全防线。
此次对话栏目的成功举办,不仅搭建了产学研用之间的沟通桥梁,还为各方的深度合作提供了宝贵的机会。各方代表能够相互交流思想、碰撞火花,共同探讨大模型时代下的存储技术变革。这一举措为产学研用四方携手共进创造了难得契机,共同迎接大模型时代带来的存储变革浪潮,推动我国存储产业的繁荣发展。
文章
3
浏览
774
获赞
2
多点并进 有望在年底提前完工
雅安市人民医院大兴院区建设项目主体外立面进行幕墙施工走进施工现场,北侧十五层高的综合业务大厦拔地而起,参建人员正在加紧施工。一个个高空作业吊篮挂在项目主体外立面,戴着安全头盔的工人忙着幕墙施工;主体内卡内基梅隆材料科学
卡内基梅隆材料科学摘要卡内基梅隆材料科学是美国卡内基梅隆大学的一个重要学科方向,涵盖了材料科学的各个领域。在这个学科下,学生可以学习到材料的结构、性能、制备和应用等方面的知识,培养了他们在材料科学领域哥大社会工作申请难度
哥大社会工作申请难度在当今社会,社会工作职业备受关注,而哥伦比亚大学的社会工作项目被认为是世界顶级的。然而,想要获得哥大社会工作项目的录取并不容易,其申请难度可谓是相当大的。本文将从多个角度分析哥大社电影版《魔法坏女巫》曝剧照 A妹、杨紫琼等全员亮相
大热音乐剧《魔法坏女巫》的电影版发布新剧照,全员亮相。辛西娅·艾莉佛饰演艾菲芭、“A妹”爱莉安娜·格兰德饰演格琳达,乔纳森·贝利饰演费万亩园亩万元 饱肚子挣票子
一年之计在于春,一年好景在春耕。阳春三月,穿行于蜿蜒曲折的村道上,走进汉源县流沙河沿岸粮经复合稻+蒜)现代农业园区以下简称:粮经复合现代农业园区),只见蒜农们在田间埋头苦干,熟练地挖着蒜、抖着土;另一基利安·墨菲加盟电影版《浴血黑帮》 九月将开拍!
近日,《浴血黑帮》编剧斯蒂文·奈特透露,演员基利安·墨菲将加盟电影版《浴血黑帮》继续饰演Tommy Shelby,电影将于九月开机。《浴血黑帮》于2013年播出的英剧,最后万玛才旦《雪豹》曝人物关系图 人豹冲突引发的争端
电影《雪豹》发布了一组人物关系图,愤怒的牧民、慈悲的雪豹喇嘛、忠于记录的记者,多方角色因“一只雪豹咬死九只羯羊”事件相继亮相,引发了一场因不同价值选择而产生的矛盾冲突。影片由金哥伦比亚大学金融专业课程有哪些
摘要哥伦比亚大学作为美国顶尖的学府之一,其金融专业备受瞩目。本文将从五个角度探讨哥伦比亚大学金融专业的特点和优势,帮助读者更全面地了解这一领域。正文1. 专业设置哥伦比亚大学金融专业包括金融工程、金融绿色产业赋能 乡村振兴提速
本报讯为有效促进芦山县中药材产业高质量发展、绿色食品药品精深加工,助推农民增收和乡村振兴发展,近日,芦山县人大常委会对芦山县绿色低碳产业发展情况开展专题调研。调研组先后走访农业园区淮南堂食品、辉杰农业mit斯隆商学院研究生
摘要MIT斯隆商学院是全球顶尖的商学院之一,培养了无数商界精英和领袖。本文将从多个角度探讨MIT斯隆商学院研究生的特点和优势,帮助读者更全面地了解这所学院。正文1. 丰富的课程和资源MIT斯隆商学院拥美国签证2023还是十年?
摘要本文将围绕“美国签证还是十年吗2023”这一话题展开讨论,从不同角度分析美国签证政策的发展和可能的趋势,帮助读者更好地了解未来十年内美国签证的走向。一、签证政策背景1.1 美国签证政策的历史演变1《第二十条》进入中国影史票房榜前29位!豆瓣7.6分
日前据数据显示,电影《第二十条》票房已突破24.26亿元,进入中国影视票房TOP29。据了解,本部影片由张艺谋执导,雷佳音、马丽、赵丽颖、高叶等主演。目前本片豆瓣评分为7.6分,其中41.5%的观众给缅怀先烈 文明祭祀
又是一年春草绿,又是一年清明时。在这缅怀故人、寄托哀思的时节,我市中小学组织开展了丰富多彩的清明节主题教育活动,缅怀革命先烈、弘扬民族精神,让师生接受爱国主义教育、革命传统教育的洗礼。师生缅怀先烈石棉美国CS专业还能火多久?
摘要本文探讨了美国CS专业的发展状况,分析了在当前技术快速变化的背景下,CS专业还能热多久的问题。通过从市场需求、教育体系、技术创新、国际竞争和行业前景五个角度进行论证,得出结论:美国CS专业仍然具有《神秘博士》新一季正式预告发布,新任博士及其伴侣亮相
舒提·盖特瓦和米莉·吉布森主演的《神秘博士》新季正式发布了预告片,新任博士和他的伴侣登场了。预告中提到:“博士与Ruby将展开一段穿越时间和空间的新冒险,遇到许多精彩的新朋友,同时也将面对强大的敌人。