面对指数级增长的计算与存储需求,传统的计算与存储架构是否仍然堪用?
在IPF 2021浪潮数据中心合作伙伴大会上,浪潮集团执行总裁、首席科学家王恩东院士指出:2020年以GPU为代表的AI加速芯片所交付的计算力总和已经超过了通用CPU,智算成为智慧时代的核心动力。面对指数级增长的计算需求,计算技术、产品与产业也面临着新的挑战,一是多元化的挑战,也就是计算场景的复杂、计算架构的多元;二是巨量化的挑战,也就是由巨量模型、巨量数据、巨量算力及巨量应用引发的对现有计算机体系结构的挑战。
技术与成本的博弈
技术与成本的博弈似乎是一个永恒的话题,对于IT业来说也不例外。在计算领域,从专用处理器到通用处理器再到如今的各类针对不同场景应用的AI处理器;在存储领域,从本地存储到外置存储再到分布式存储;在存储介质上,从磁带到HDD再到SSD。每一项新技术的发展都需要经历博弈的过程。
但这并不意味着上一代技术就失去了其存在的价值,发明于20世纪50年代的磁带时至今日仍然有着不少的用户;诞生于70年代的HDD而言,依旧活跃在各种规模的数据中心里;而SSD作为时代弄潮儿则正在将旗帜插满目所能及的各个地方。研究机构Trendfocus的数据显示,在2020年SSD的总出货量达到3.33亿块超越2.59亿块的HDD;在总容量方面SSD为207EB,HDD则为1ZB,约为SSD的5倍。
换言之,对应场景需求选用合适的方案才是最经济的选择。计算如是,存储亦是。
数据存储之道 西部数据知道
人工智能的发展离不开大数据“食料”的供给,至于“加工方式”则来自于相应的算法。算法总是在不断进化的,但待加工的“食料”却因为储存成本的原因在不断流失。
IPF 2021浪潮数据中心合作伙伴大会上展出的部分西部数据企业级存储解决方案
在IPF2021大会上,西部数据公司副总裁兼中国区业务总经理刘钢分享了这样一组数字:“研究显示预计到2024年,以HDD为代表的大数据将增长到1.62ZB,以SSD为代表的快数据333EB,两者相加约为2ZB,而当年产生的数据总量将达到142ZB,这意味着仅有不到1.5%的数据会被存储下来。”
西部数据公司副总裁兼中国区业务总经理刘钢
数字经济时代,数据是新的生产资料和关键资产,为什么这些关键的资产和生产资料没有被存储下来?刘钢认为其中一个重要的原因是存储架构和存储技术没有及时地跟上数据的发展。
长期以来用户对于存储的最主要的需求无外乎两点:足够大,足够快。但同时,用户还需兼顾采购成本及后期的使用成本。“事实上,并没有单一的存储设备或是存储介质能够同时满足以上条件。”刘钢对此说道。
因此,西部数据提出“去中心化分布式存储、分层存储和分区存储”的创新存储架构来帮助客户解决当务之急。
利用去中心化分布式存储架构降低存储成本,以便让更多的数据存储下来,留待后期加工。
进一步细化分层存储,根据数据对存储时延和容量的需求细化到极热、热、温、冷、极冷五个层次,并采用对应的产品来满足需求。
分区存储,利用ZNS SSD进一步提升性能,同时提高可用容量减少机柜空间占用,从而进一步降低功耗开销。
西部数据公司副总裁兼中国区业务总经理刘钢
刘钢用数字来说明了西部数据能为客户提供的价值:“为达到同样的存储容量,将14TB硬盘更换为18TB硬盘,则能有效的降低22%服务器数量,减少21%的能源消耗。因此,大型的互联网服务商非常热衷于采用最新最大的硬盘。对于极冷数据来说,SMR硬盘是一个很好的选择。”
而对于以SSD为代表的快数据,西部数据同样可以提供极具竞争力的产品组合。这源于西部数据在企业级SSD领域三大核心竞争力:其一,西部数据与铠侠目前占有3分之1的市场份额,其强大的产能是持续性供应基础;其二,最新发布的第六代162层3D闪存技术,其横向单元阵列密度比上一代提高了约10%,晶圆尺寸减少了40%,IO性能提升了66%,在降低成本的同时满足了不断增长的数据处理性能需求;其三,企业级SSD的纵向集成优势,拥有从晶圆生产到控制器、固件开发的一整套产品集成能力,从而保证可以满足各种客户的需求。
携手浪潮 构建场景共同体
对于此次和浪潮的合作,刘钢表示:“高速发展的人工智能在对数字经济产生巨大赋能和推动的同时,也推动整个计算产业往'智慧计算'方向演进,巨量模型和海量数据,对算力和存储的需求呈指数级增长。我们很高兴能持续深化与浪潮的合作,结合双方前沿科技与产品的独特优势,协力打造出高性能、低成本、且兼具稳定性与扩展性等特点的卓越解决方案,优化资源配置,赋能智慧计算。未来,西部数据将与浪潮加强纵深合作,不断以创新的数据存储架构和解决方案,应对市场多样化的需求,并携手生态系统中的各方伙伴共同推动智能产业的转型与发展,为行业用户创造更多价值。”
西部数据公司副总裁兼中国区业务总经理刘钢
面对当前的市场需求发展,浪潮在IPF 2021大会上提出了“元脑新存储生态”:“以用户为中心、以应用为导向”的场景共同体,意味着存储厂商需要针对不同行业推出不同的产品,场景解决方案会愈发走向细分化,存储生态所涉及的伙伴也将越来越多。
显然,这也对所有合作伙伴提出了更高的要求。而西部数据与浪潮的产品与解决方案所形成的合力足以在多方面满足客户的需求:对于大数据需求,更高的存储密度与容量,进一步节省了机柜占用与能耗成本;而对于快数据,兼具性能与成本优势的多类产品来满足不同需求层级的场景。文/刘禹
申请创业报道,分享创业好点子。点击此处,共同探讨创业新机遇!
随着数字中国战略的步步落实,大数据已经成为锚定战略定位、抢得市场先机的重要基础元素。为彰显行业发展现状,遴选、推荐优秀企业,长城战略咨询近日在2023中国国际大数据产业博览会期间,重磅发布《中国大数据独角兽企业榜单》,根据独角兽企业国家推荐性标准,筛选出259家2022年中国大数据(潜在)独角兽企业
2023年6月15日至18日,2023北京健康医疗大数据论坛、医促会华夏健康数据与数字医学高峰论坛、第三届中华预防医学会肾脏病预防与控制专业委员会学术会议将同期于北京举行。论坛以“学术引领数智健康”为主题,着眼国家战略需求,聚焦前沿科技在健康医疗领域的发展与实践,荟萃全球顶尖学术观点,促进多方跨界融
近日,北京市科学技术委员会、中关村科技园区管理委员会公示了北京市2023年第2批科技型中小企业名单,谷器数据借助优秀的科技自主创新能力成功入选。此次评价指标围绕科研人员、研发投入、科技成果等三个维度,成功入选科技型中小企业是对谷器数据专业化发展、自主创新能力、产品技术实力的激励与肯定。科技型中小企业
评审寄语面向车间现场生产制造过程的数字化管理,谷器数据SupplyX·MES通过推动更有效的工厂运行和现场效率,提供从接收生产计划到制成最终产品全过程的生产活动实现优化的信息,成为新型工业化的标杆力量!近日,由中国科学院《互联网周刊》、中国社会科学院信息化研究中心等机构联合主办的“2023(第八届)
在如今这个数字化转型时代,大数据在企业发展的过程中发挥了至关重要的作用,大数据技术以更高效和有效的方式提供最好的服务,同时还可以提高生产力、提高客户满意度和更高效的智慧化运营。其中,成都四方伟业软件股份有限公司(以下简称“四方伟业”)以优秀的大数据产品和服务获得了多项行业荣誉。去年,2022数博会数
把脉中国数据智能化
2023年,几乎可以被定义为中国互联网公司的“大模型元年”。ChatGPT的全球爆红,彻底点燃国内的大模型赛道,曾经的“创业英雄”、如今的商业领袖们亲自下场,接连发布生成式人工智能产品与大模型布局。大模型火了,沉寂许久的互联网行业又有了新的“战事”。同时,大模型的快速发展也改变了云市场的现状,企业对
近日,数字化市场研究咨询机构爱分析发布了《2022爱分析·数据智能厂商全景报告》,爱分析从技术研发能力、服务客户数量、收入规模等维度对厂商进行了全面专业的评估
2022年11月18日,首个国家级大数据产业创新赛事——2022第一届中国大数据大赛圆满落幕。工业和信息化部信息技术发展司数字经济推进处处长张建伦,中国电子技术标准化研究院副院长孙文龙出席颁奖典礼并致辞
2022年11月17日,在厦门市工业和信息化局的指导下,以“数据确权”为主题的2022数据资产(厦门)论坛在厦门成功举办。本次论坛以“数据确权”为主题,由厦门市互联网域名应用服务产业协会和构信网(公信.中国)联合主办
近日,国内知名数字化市场研究咨询机构爱分析正式发布《2022爱分析·信创厂商全景报告》(以下简称“报告”)。报告综合考虑企业关注度、行业落地进展等因素,遴选出在信创市场中具备成熟解决方案和落地能力的厂商。
10月31日下午,由数博会执委会主办、数据观(北京)传媒科技有限公司承办、贵阳大数据交易所协办的第四期数博思享会“实践先行观公共数据价值与应用”活动成功举办。
近日,由中国国际数字经济博览会组委会主办,中国电子技术标准化研究院、河北省工业和信息化厅承办的“第一届中国大数据大赛”(简称大数据大赛)正式启动。
广州光点信息科技有限公司自主研发的数据中台产品GI大数据中台V2.0产品是国内率先推出符合新创标准的中台产品,基于“大数据+AI”等技术全新打造,集数据采集、融合、治理、服务、管理为一体的旗舰平台。
广州光点信息科技有限公司自主研发的数据中台产品GI大数据中台V2.0产品是国内率先推出符合新创标准的中台产品,基于“大数据+AI”等技术全新打造,集数据采集、融合、治理、服务、管理为一体的旗舰平台