点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:思想+技术沙龙:高效存储架构与服务器变革实践
首页> 科技频道> 互联网 > 正文

思想+技术沙龙:高效存储架构与服务器变革实践

来源:光明网2024-08-15 17:16

  近日,以“高效存储架构与服务器变革实践”为主题的思想+技术沙龙在北京举行,来自清华大学、快手、美团、金山、磐吉云数、浪潮信息等高校、知名企业、研究机构的产学研专家、互联网行业大咖再度聚首,基于服务器硬件和存储软件平台两个维度,探讨解决企业存储引擎关键痛点的硬件规划路径,从而找到适用于存储业务不同发展阶段,并匹配“安全”“性能”“降本”诉求的基础设施选型方向。

  浪潮信息互联网行业部产品总监王帅在《云存储驱动下的服务器创新实践》主题演讲中表示,过去10年间,高密存储机型规划主要围绕提升存储密度、降低存储功耗两个关键要素,将单盘容量和单机密度提升作为硬件规划的主要方向。从2020年开始,高密存储机型迭代速度放缓,单纯的容量或密度提升已不再是企业用户核心诉求,预计在未来3年,当前最具代表性的4U60盘高密存储服务器仍将是高密存储最主流的产品形态。而存储介质和网络带宽的持续优化将更加受到关注,同时考虑用户对业务高效匹配、成本极致优化、存储IO性能提升、集群稳定可靠、运维简便部署的五大基础诉求,浪潮信息未来也将持续为用户打造满足互联网行业业务需求的产品。

  清华大学副教授陆游游做了《SuperFS: 高速硬件时代的文件系统》主题演讲,分享了清华大学计算机系存储实验室围绕计算领域所做的新一代存储系统探索。他表示,随着超级计算步入千万核时代,存储成为影响计算性能发挥的重要瓶颈,存在存储架构繁冗、元数据管理低效、I/O干扰严重、软件开销大四个关键问题。清华大学通过打造SuperFS高性能文件系统,在数据部分通过数据直通等技术,用5台存储节点达到了179.6GB/s,带宽性能达到硬件理论性能的90%以上。在元数据部分,通过低开销索引等技术大幅度降低了软件依赖开销,元数据性能远超其他存储系统。

  某互联网公司大数据存储负责人贾宇晗在《高效分布式存储架构优化与基础设施选型实践》主题演讲中分享了内部搭建的云存储平台,借助超低延迟RDMA网络、用户态NVMe、SPDK全新存储架构,提供高性能、低成本、高可用、安全可靠的一体化存储方案,支持容器CSI、虚拟化、AI大模型、大数据存储,助力客户业务全面上云。 此外,通过资源整合、分布式缓存、数据治理优化存储架构,实现硬件成本、服务成本和业务成本的降低。同时,也指出了未来存储软件的发展趋势:一是从私有化部署转向云原生;二是由独立存储向统一存储发展,包括统一存储底座和接入层的统一;三是通过生命周期、数据血缘、数据分层、服务管控、行为审计等诸多产品形态的完善让管理者更了解服务和业务,让使用者更了解数据。

  随着AIGC驱动与数据中心级应用对存储IO性能要求的提升,全闪分布式存储与NVME存储介质迎来了高速增长。浪潮信息的《面向AIGC的分布式融合全闪存储》主题演讲中,分布式存储产品线总经理姜乐果指出:面向大模型训练需要有领先的算法和优质的算力,同时高质量的数据也是支撑大模型训练的关键要素之一。浪潮信息提供了基于AS13000G7的AIGC存储解决方案,更成熟、更简约、更高效,是助力大模型训练落地的坚实存储底座。目前已完成国内数十个大模型客户交付,数据处理时间节省30%,整体性能提升160%,运维效率提升50%。

  浪潮信息SSD产品线总经理王杰华分享了《浪潮信息企业级SSD技术发展与应用实践》,指出:存储整体呈现出高性能的技术要求,QLC NAND关键技术成熟,读性能接近TLC,延迟达到100μs,性价比优势凸显,伴随NAND成本的优化,未来有机会在读IO密集的场景实现对HDD的替换。此外,浪潮信息积极围绕应用感知开发定制化特性产品,已经完成ZNS的产品化和Multi-Stream的技术开发。在云存储场景,ZNS SSD表现出三倍于传统NVMe SSD的写入带宽性能;Multi-stream多流应用,在部分场景下收益达到37%-73%。

  除以上主题分享之外,OCP中国社区负责人、浪潮信息首席架构师叶毓睿主持并邀请了清华大学、磐吉云数、浪潮信息等多位嘉宾参与了以《生成式AI对存储系统的挑战与机遇》为主题的圆桌对话,讨论了大模型、AIGC与RAG应用等对存储系统的需求,以及技术和应用演进带给存储架构的冲击。

  数据是支撑计算的重要基石,是千亿级模型精度优化的保障。浪潮信息将继续携手互联网用户,发挥JDM优势,基于业务应用对存储底座的需求特点,从存储服务器硬件、存储软件和存储介质三个维度,持续打造高收益、高可用的软硬件产品。(科轩)

[ 责编:张佳兴 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 武汉汉口北低空港投入运营

  • 加强天然气管道巡检保障用气安全

独家策划

推荐阅读
世界气象组织在《联合国气候变化框架公约》(以下简称《公约》)第二十九次缔约方大会(COP29)期间发布报告说,2024年有可能成为有记录以来最热的一年。
2024-11-13 09:47
在刘汉龙指导下,肖杨凭借在微生物加固土体力学领域的丰富研究成果,获得国家杰出青年科学基金资助。
2024-11-13 09:46
到点自动发车、区间自动运行、到站自动对标停车、车门站台屏蔽门联动开启……京张高铁在全球第一次实现了运营时速350公里的有人值守自动驾驶。
2024-11-13 09:40
中欧科技合作“龙计划”2024年海洋遥感高级培训班日前在海南三亚开班。在11日上午举办的开幕式上,近30位国内外遥感领域知名专家和近60位来自海洋遥感领域优势科研院所与高校的青年科研人员共同参加活动。
2024-11-13 09:39
近年来,北京涌现出一批新能源、人工智能、智能制造、先进制造等领域的高科技民营企业,目前已逐渐形成技术和品牌优势。
2024-11-13 09:40
记者从国家国防科技工业局获悉,在12日开幕的第十五届中国航空航天博览会上,国家国防科技工业局、国家航天局“中国军工”“中国航天”展台亮相。
2024-11-13 09:39
由于轴子暗物质信号极其微弱,经典磁场干扰可能成为高灵敏识别轴子信号的巨大挑战。
2024-11-12 09:09
该项目位于福建东山县杏陈镇、前楼镇海域,该地区多年平均日照时间为2204小时,太阳能资源丰富,年平均风速5.2米/秒、最大风速可达48米/秒。
2024-11-12 09:09
在“夸父”设施园区,有数座单体建筑(科研厂房),它们都是聚变堆主机关键系统的子系统,每个科研厂房里都有多个系统正在建设和运行。
2024-11-12 09:08
未来,核聚变能将在人类的能源系统中占据非常大的比重,来自核聚变的清洁、持久且便宜的电能会走进千家万户。
2024-11-12 09:06
非编码RNA可能成为未来癌症诊疗的新指标和新靶点,其独特的细胞类型特异性表达也为实现个性化医疗提供了可能。
2024-11-12 09:05
11月11日,空军八一飞行表演队和空军航空大学“红鹰”飞行表演队展翅珠海,以独特的方式庆祝中国人民解放军空军成立75周年。
2024-11-12 09:06
在华南师范大学教育信息技术学院教授钟柏昌看来,用信息化手段为水火箭这类跨学科教学项目“赋能”,是开展科普教学创新的有效尝试。
2024-11-11 09:39
今年的滑雪季即将到来,全国冰雪资源何处多?日前,中国气象局公共气象服务中心综合多种气象指标发布了冰雪资源数据,为滑雪爱好者和滑雪场经营者打造了一把“冰雪资源量尺”。
2024-11-11 04:05
受今年第22号台风“银杏”影响,预计11月11日至12日,海南省中部及东南部将有中到大雨,万泉河、昌化江及沿海部分河流将出现小幅涨水过程。
2024-11-11 04:05
这一研究成果区分了BLA向同侧和对侧大脑半球投射在情绪和相关记忆形成中的不同作用,发现了BLA到对侧NAc神经投射在编码负性情绪和引发逃避行为中的关键作用,揭示了跨脑半球神经连接的一个重要功能。
2024-11-11 04:05
当前,新一轮科技革命和产业变革与大国间竞争形成叠加态势,我国发展进入战略机遇与风险挑战并存的时期。
2024-11-11 04:05
收获时节,走进浦城县仙阳镇的谢华安院士工作站,种粮大户钟安森没有下田,而是在大屏幕前查看农田的各项数据。
2024-11-11 04:05
11月4日,科学技术普及法修订草案首次提请全国人大常委会会议审议,这是科学技术普及法自2002年公布施行以来的首次修订。
2024-11-08 09:59
为了种出茁壮可口的生菜,这群来自中国农业大学、上海交通大学、上海农科院、北京市农业技术推广站等高校院所的年轻人使出浑身解数。最终,产量高、品质好、能耗低、花费少的队伍将会胜出。
2024-11-08 09:57
加载更多