当前位置:首页 > 科技  > 芯片

1:1:1,浪潮信息的AIGC新答卷

来源: 责编: 时间:2023-09-11 22:34:48 189观看
导读此前我们说过,AS13000融合存储系统是浪潮信息应对AIGC存储的答卷,针对Token、也好,Checkpoint也好,AS13000通过数控分离架构,减少东西向数据量的转发;通过GDS、RMDA技术缩短I/O路径,通过SPDK、缓存零拷贝技术减少I/O路径上的

此前我们说过,AS13000融合存储系统是浪潮信息应对AIGC存储的答卷,针对Token、也好,Checkpoint也好,AS13000通过数控分离架构,减少东西向数据量的转发;通过GDS、RMDA技术缩短I/O路径,通过SPDK、缓存零拷贝技术减少I/O路径上的数据拷贝,以及基于自研NVMe SSD开发的盘控协同技术,减少I/O访问SSD盘的次数,使存储性能得到进一步释放。AS13000全闪单节点带宽超过50GB/s,IOPS超过50万;此外,创新性地引入双控全闪节点,带宽超100GB/s,IOPS超100万,真正使系统具备千万级IOPS、EB级带宽,充分满足AIGC场景对存储系统的苛刻要求。fFA28资讯网——每日最新资讯28at.com


在8月末,在杭州举行的2023全球闪存峰会期间,浪潮信息重磅发布了高性能分布式存储平台,AS15000G7将AIGC存储又带到了一个新的台阶,与此同时,浪潮信息发布了数据中心算力、全闪、混闪,1:1:1黄金比例建设的原则。fFA28资讯网——每日最新资讯28at.com



浪潮信息存储产品线副总经理刘希猛表示:“当前,各个厂商纷纷投资硬件,训练自己的大模型,国内已发布的生成式AI模型超过了100个,‘百模争秀’的格局初现,云厂商和运营商对IT硬件的投资往往是成千上万节点规模,而行业大厂投资在几百节点规模,在建设布局时考虑到AI大模型对高性能AI服务器、高吞吐并行存储系统、低延迟RDMA网络的严苛需求,将数据中心的算力、全闪、混闪按照1:1:1黄金比例建设,可实现用户整体投入最小化。”fFA28资讯网——每日最新资讯28at.com


“一台8卡最先进GPU服务器后端配置的存储节点写带宽要求20GB/s,读带宽要求40GB/s,通常一台全闪存储节点的写带宽是20GB/s,读带宽接近30GB/s,可得到计算节点与全闪节点的数量比例接近1:1。按着数据使用规律,通常热数据和温冷数据的容量配置约为1:10,即全闪单节点容量为50~100TB,混闪节点容量为500~1000TB,全闪节点与混闪节点的数量比例接近1:1。” 刘希猛说。fFA28资讯网——每日最新资讯28at.com


“我们建议用户整体规划布局,避免在存储扩容、数据迁移和数据管理方面随着业务的增加而力不从心,因此按照算力、全闪、混闪节点数量配比1:1:1来设计规划和部署是目前的最优方案。” 刘希猛继续补充说。fFA28资讯网——每日最新资讯28at.com


分布式存储产品线总经理姜乐果表示:AS15000G7是在AS13000基础上的升级迭代,如果说AS13000的特点是极致融合,那么AS15000G7的特点则是极致性能。fFA28资讯网——每日最新资讯28at.com


AS15000G7采用高吞吐并行存储系统,通过GDS、RDMA技术缩短I/O路径;通过智能元数据管理,提前缓存用户数据和文件系统元数据,显著提升数据访问和检索速度;独有的智能网络优化技术,可实现多个子网与指定目的地通信,每对守护进程之间建立多个TCP连接并通信,显著提升网络端口并发能力,实现传输端口带宽翻数倍,时延缩短50%以上,小文件级传输的时延可降至毫秒级。fFA28资讯网——每日最新资讯28at.com



以GDS(GPU Direct Storage)为例,能够将GPU和外部数据存储的带宽提升2~8倍,当GPU并发度增加的时候,GDS仍然能够保持稳定的低延迟输出,非常适用于AIGC等AI应用场景的应用。通过对于GDS的支持,GPU直接访问存储,从而避免了传统设计应用中,CPU调度带来的访问延迟。可以说,GDS也好,RDMA也好,对于新的访问协议的支持,已经成为了分布式文件系统的基本功,也是追求极致性能的必由之路。fFA28资讯网——每日最新资讯28at.com


AS15000G7提供了自动化的数据分层和迁移的功能,从而为满足AIGC场景应用提供了更好的支持,因为除了高速并行访问能力之外,AIGC训练、推理中的中间结果数据需要存储和保留,很多都是以冷数据形式呈现,也更加适合混闪阵列的定位,这也是浪潮信息提出全闪、混闪1;1的原因。AS15000G7在产品设计上充分考虑到了这一点,提供了通用型、容量型和性能型的产品类型。通过基于闪存、磁盘、磁带、光盘的灵活配置,可最大程度降低用户的整体投入。fFA28资讯网——每日最新资讯28at.com


AS15000G7新品同时搭载了AIStation调度平台和InView数据管理平台,通过对AI服务器、网络、存储的智能运维,提高多租户管理、资源分配、数据管理分析的能力和水平。与此同时,AS15000G7保留了多协议实时互访互通和系统扁平扩展的能力,从而能够实现对于多元异构非结构化数据,如文本、图片、音频、视频等,以及文件、对象、大数据以及视频文件的高效共享。fFA28资讯网——每日最新资讯28at.com


“1:1:1,也许这样配置比较奢侈,很少有用户能够达到这样的配置,那是因为没有考虑到混合模态、多模态训练的需要。” 刘希猛说。fFA28资讯网——每日最新资讯28at.com


icspec【芯片求购】https://www.icspec.com/inquiry/index/1/0

本文链接://www.dmpip.com//www.dmpip.com/showinfo-27-9194-0.html1:1:1,浪潮信息的AIGC新答卷

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 充电?换电?未来补能谁说得算

下一篇: 英特尔宣布与高塔半导体达成新代工协议

标签:
  • 热门焦点
  • 官方承诺:K60至尊版将会首批升级MIUI 15

    官方承诺:K60至尊版将会首批升级MIUI 15

    全新的MIUI 15今天也有了消息,在官宣了K60至尊版将会搭载天玑9200+处理器和独显芯片X7的同时,Redmi给出了官方承诺,K60至尊重大更新首批升级,会首批推送MIUI 15。也就是说虽然
  • 一文看懂为苹果Vision Pro开发应用程序

    一文看懂为苹果Vision Pro开发应用程序

    译者 | 布加迪审校 | 重楼苹果的Vision Pro是一款混合现实(MR)头戴设备。Vision Pro结合了虚拟现实(VR)和增强现实(AR)的沉浸感。其高分辨率显示屏、先进的传感器和强大的处理能力
  • 重估百度丨“晚熟”的百度云,能等到春天吗?

    重估百度丨“晚熟”的百度云,能等到春天吗?

    ©自象限原创作者|程心排版|王喻可2016年7月13日,百度云计算战略发布会在北京举行,宣告着百度智能云的正式启程。彼时的会场座无虚席,甚至排队排到了门外,在场的所有人几乎都
  • Temu起诉SHEIN,跨境电商战事升级

    Temu起诉SHEIN,跨境电商战事升级

    来源 | 伯虎财经(bohuFN)作者 | 陈平安日前据外媒报道,拼多多旗下跨境电商平台Temu正对竞争对手SHEIN提起新诉讼,诉状称Shein“利用市场支配力量强迫服装厂商与之签订独家
  • 自律,给不了Keep自由!

    自律,给不了Keep自由!

    来源 | 互联网品牌官作者 | 李大为编排 | 又耳 审核 | 谷晓辉自律能不能给用户自由暂时不好说,但大概率不能给Keep自由。近日,全球最大的在线健身平台Keep正式登陆港交所,努力
  • 疑似小米14外观设计图曝光:后置相机模组变化不大

    疑似小米14外观设计图曝光:后置相机模组变化不大

    下半年的大幕已经开启,而谁将成为下半年手机圈的主角就成为了大家关注的焦点,其中被传有望拿下新一代骁龙8 Gen3旗舰芯片的小米14系列更是备受大家瞩
  • 华为发布HarmonyOS 4:更好玩、更流畅、更安全

    华为发布HarmonyOS 4:更好玩、更流畅、更安全

    在8月4日的华为开发者大会2023(HDC.Together)大会上,HarmonyOS 4正式发布。自2019年发布以来,HarmonyOS一直以用户为中心,经历四年多的发展HarmonyOS已
  • OPPO K11样张首曝:千元机影像“卷”得真不错!

    OPPO K11样张首曝:千元机影像“卷”得真不错!

    一直以来,OPPO K系列机型都保持着较为均衡的产品体验,历来都是2K价位的明星机型,去年推出的OPPO K10和OPPO K10 Pro两款机型凭借各自的出色配置,堪称有
  • 由于成本持续增加,笔记本产品价格预计将明显上涨

    由于成本持续增加,笔记本产品价格预计将明显上涨

    根据知情人士透露,由于材料、物流等成本持续增加,笔记本产品价格预计将在2021年下半年有明显上涨。进入6月下旬以来,全球半导体芯片缺货情况加剧,显卡、处理器
Top
Baidu
map