北京2024年12月23日 /美通社/ -- 在当今数字化浪潮汹涌澎湃的浪潮时代背景下,大模型技术犹如一颗璀璨的信息型时学研明星,照亮了科技发展的有数用共广阔苍穹,而存储技术的高端革产变革,作为这一进程中的对话大模代存坚实基石,正日益成为产业界与学术界共同瞩目的储变核心焦点。
为此,探新浪潮信息联合DOIT推出《有数•高端对话》栏目,浪潮分布式存储产品线总经理姜乐果及DOIT传媒主编李祥敬,信息型时学研与特邀嘉宾上海交通大学吴晨涛和中科闻歌陈思含共同围绕大模型的有数用共存储需求变化,展开了一场深度对话。高端革产深入探讨大模型时代背景下数据存储的对话大模代存变革之道,共话数字经济的储变创新发展,进一步夯实数据基础设施,探新充分释放数据资源的浪潮巨大价值,为广大行业同仁及用户提供价值参考与启示。
大模型驱动存储变革
大模型技术的迅猛发展对存储系统提出了极为严苛的要求。以GPT-4为例,其参数量达到了2200亿,每张GPU配备的HBM显存带宽达1.6TB/s,整体训练所需的显存容量接近400TB。根据Meta等公司的调研数据显示,大模型在运行过程中会频繁遭遇内存故障,平均每2-3小时便可能导致一次训练中断,这无疑对存储系统的安全可靠性提出了极高的标准。吴晨涛教授以GPT-4等前沿模型作为实例,清晰阐明了大容量HBM显存、高带宽以及高可靠性是存储系统不可或缺的三大核心特性。
同时,从宏观角度出发,吴教授呼吁建立开放的数据生态。在这一生态中,通过强化监管与隐私保护,旨在打破数据孤岛,促进数据的流动与共享,为高质量数据的充分涌流开辟道路,从而为行业大模型的发展提供持续不断的动力。
作为存储厂商的代表,姜乐果从存储技术进化的视角出发,详细阐述了在大模型驱动下,传统计算与当前智算中心存储设施的全方位变革。在性能层面,智算中心对存储性能的要求已从百GB级跃迁至TB级,与算力协同攀升;在容量维度,存储系统已从PB级大步迈向EB级,轻松应对海量数据洪流的冲击。同时,数据格式与协议的多元化与复杂性日益显著,这对存储系统突破兼容壁垒提出了迫切需求。
姜乐果还展示了企业在数据要素市场的积极布局与创新探索。浪潮信息紧跟政策导向,与多方合作伙伴携手,深入挖掘行业需求,精心研发端到端的解决方案及高性能存储新品。例如,新一代分布式存储平台AS13000G7系列产品在MLPerf™ AI存储基准评测中表现出色,在3D-UNet(医学图像分割)和CosmoFlow(宇宙学参数预测)两个应用场景共计8项测试中,斩获5项全球第一,彰显强大的性能实力,为行业大模型数据存储难题提供有力支撑。
中科闻歌作为一家专注于复杂数据解析和AI辅助决策的人工智能公司,陈思含分享了中科闻歌在大模型实践中的宝贵经验。在大模型的发展历程中,存储需求经历了显著的动态演变:从早期对训练速度的追求导致存储性能需求激增,到参数量膨胀带来的数据量与参数规模指数级增长,再到多模态数据处理对存储复杂性的严格要求,以及混合读写模式和多样化应用场景引发的多元化需求。
数据质量作为行业大模型发展的核心驱动力,中科闻歌在此方面进行了创新实践。集成了全球多语言媒体数据的闻海大数据平台,运用跨模态AI技术融合信息,构建了垂直领域知识库,并提供模块化的智能大屏工具。这一平台不仅具备全球范围内高效、安全获取和处理高质量数据的能力,还成为训练大模型所需高质量数据的主要数据源和知识库。
在为客户提供大模型落地产品和系统时,中科闻歌采取了混合模式,即结合公司自身海量数据与用户的私有行业数据进行模型训练和应用构建,确保了客户的数据安全,避免了数据出域的风险。
协同创新下的趋势展望
展望未来存储发展,吴晨涛教授立足学术前沿,前瞻性地预判了关键技术走向。他认为,跨域资源调度共享技术,特别是基于CXL协议的内存池创新,将打破资源限制,实现全域资源的灵动调配。同时,优化元数据管理将提升数据检索与处理效率,而内存故障预测及Checkpointing技术则能确保系统稳定运行,最大限度地减少故障对数据处理连续性和完整性的影响。这些技术的迭代升级将为存储技术的发展指明方向。
作为存储厂商的代表,浪潮信息积极拥抱变革,从Storage for AI深度适配需求,到AI for Storage智能赋能提效,再到与大模型企业紧密合作,精准挖掘系统性能潜能,为用户提供更贴合业务的产品。
作为大模型企业的代表,中科闻歌致力于打造高效、安全和可靠的存储系统,以适应大模型时代的新要求。在架构上,采用存算分离架构部署AI-Ready数据基础设施,以加速智能应用。在效率提升方面,全闪存存储凭借其卓越性能成为破局关键,能够加速数据流转,激活数据价值。而在安全防护层面,中科闻歌构建主动防御体系,从内核强化存储安全,筑牢安全防线。
此次对话栏目的成功举办,不仅搭建了产学研用之间的沟通桥梁,还为各方的深度合作提供了宝贵的机会。各方代表能够相互交流思想、碰撞火花,共同探讨大模型时代下的存储技术变革。这一举措为产学研用四方携手共进创造了难得契机,共同迎接大模型时代带来的存储变革浪潮,推动我国存储产业的繁荣发展。
文章
535
浏览
841
获赞
241
LED商业照明商家储备能力和市场需求量差距大
【建材网】近日,士兰微LED芯片进入照明市场的消息引起业内关注。LED商业照明投资领域也是一片火热,有人据此预测2012年LED照明市场将开启黄金十年。然而,据了解,一些企业在进军LED商业照明领域的《恸哭之星》PS5 中文数字下载版将于2025年1月10日上线
亚克系统ARC SYSTEM WORKS)亚洲分店宣布,由FURYU公司开发的动作RPG作品《CRYSTAR - 恸哭之星-》,将于2025年1月10日正式推出PlayStation 5的中文版数字下小岛工作室成立9周年:正是有大家 旅程才能如此精彩!
今天是小岛工作室成立9周年的纪念日,小岛工作室和小岛秀夫本人在社交平台上发文庆祝。官方表示:“小岛工作室9岁啦!想对所有的朋友说声谢谢,有了你们的关注与支持,我们才能经历如此精彩的旅程!&《饿狼传说:群狼都市》实体版开启预购:售价约439元!
今日,SNK已开启《饿狼传说:群狼都市Fatal Fury: City of the Wolves)》实体版的预购,包含特别版和豪华版。其中特别版售价59.99美元约439元RMB),适用于PS4、P“瓦棱纸”做家具 节省板材降低污染
【建材网】近日据悉,“用纸做家具,节能又环保。”谈到纸家具的优势,以设计与生产纸家具见长的“岂有纸理”品牌创意总监陈派如此说道。他表示,这类产品主要以纸Fami通电击游戏大奖2024投票开启!年度游戏由你来选
Fami通官方今天12月16日)宣布,Fami通电击游戏大奖2024的投票即将开启,这个奖项的获得者将完全由玩家来投票决定。本届Fami通电击游戏大奖共有16个奖项可供投票,玩家可在每个奖项中自推荐选Switch 2右Joy Con新增“C”按钮 或将支持鼠标功能?
任天堂现已明确,Switch 2新增了一个“C”按钮,同时似乎有迹象表明,Switch 2可能支持鼠标控制,只不过目前这两方面的具体细节还尚未明晰。在任天堂发布的官方 Swit陶瓷喷墨技术未来发展趋势
【建材网】诚然,喷墨技术的出现、应用和推广是把“双刃剑”,提高行业产品研发、生产整体水平的同时,随着企业间产品差距的减小,产品同质化现象更加严重。而在产品同质化现象越来越严重的同庆中国年!中央广播电视总台《2025年春节联欢晚会》奏响和美乐章
团圆迎佳节,吉祥满人间。1月28日晚8点,在“欢乐吉祥、喜气洋洋”的主基调中,中央广播电视总台《2025年春节联欢晚会》以“巳巳如意,生生不息”为主题,用满屏新意奉上一道充满欢声笑语的文化大餐,向海内《崩坏:星穹铁道》大黑塔角色PV“宇宙有天才”公开
《崩坏:星穹铁道》官方今天1月14日)公开了“大黑塔”的新角色PV“宇宙有天才”,3.0新版本将于明天正式上线,大黑塔也将加入卡池。《宇宙有天才》是由黑我竟然变曹操了!《潜行者2》“快速旅行”MOD发布
有一些玩家对《潜行者2:切尔诺贝利之心》没有快速旅行选项感到不满。如果你也有同样的感受,那么好消息来了,小编今天为大家带来了一个《潜行者2》的“快速旅行”MOD。这个MOD由M“孤勇者”拿下15万奖金,这个游戏编辑器真香!
你敢信,零开发经验也能制作游戏,还能拿下高额奖金?!不久前结束的2024腾讯游戏创作大赛轻游梦工坊赛区就用事实证明:只要有创意,人人都能成为游戏开发者。轻游梦工坊是腾讯游戏自研的游戏编辑器,无代码编程家装行业受房产所累 利润缩水面临行业洗牌
【建材网】“金九银十”,在以往都是家装建材行业费尽心思必争的“黄金时节”,因为在此期间,恰逢中秋、国庆双节,又赶上换季,按照惯例,消费者的消费需求应该会中世纪建设模拟游戏《奠基》将于明年1月推出正式版!
中世纪建设模拟游戏《奠基》确定将于2025年1月31日结束近五年的抢先体验推出正式版。开发人员为表庆祝发布了一个免费演示版,玩家可以在其中体验游戏独特的无网格玩法。让我们一起来看看正式版发售预告片吧!《漫威争锋》将推出蜘蛛侠新战衣!庆祝蜘蛛侠2登陆PC
《漫威争锋》近期发布了第一个赛季,增加了大量的新内容,但未来几天还有更加值得期待的新内容,尤其是对“蜘蛛侠”的粉丝们,更是一个令人惊喜的消息。将在1月31日,Insomniac