加入收藏 | 设为首页 | 会员中心 | 我要投稿 厦门网 (https://www.xiamenwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

鼠年展望:AI推动数据存储理念进化

发布时间:2020-02-02 13:18:22 所属栏目:大数据 来源:站长网
导读:副标题#e# 2020年以意想不到的方式在展开,让人们愈发渴望AI的到来。 大家知道早在60年前,人工智能概念就正式提出。其发展曾经历了两次低谷,这两次低谷的原因一方面受质于人工智能三个因素,算力、算法和数据的制约。一方面受制于ICT的发展,没有实现数据

三年来,新的Hitachi Vantara已经集合了Hitachi Vantara在IT领域的深厚积淀和Hitachi Consulting以咨询为主导的领先数字化解决方案以及垂直行业经验。Hitachi Vantara将把优质、定制化、可持续的和新业务模型相关的咨询方法论与数据驱动的解决方案(例如Lumada Manufacturing Insights)集成,以提供全面的实践方案。Lumada Manufacturing Insights这一解决方案可打破数据孤岛,并采用AI和机器学习技术来评估和提高设备整体有效性(OEE)。

我们也看到,AI时代,需要数据需要里计算更近

今天随着数据的爆炸式增长,如人工智能、物联网等新技术的成熟,人们对于数据处理的极高需求与底层存储技术之间的不匹配感越来越强烈。数据增长的越多,在内存和存储上的数据堵塞越严重,人们愈发希望扩大内存,在DRAM上存储更多数据,同时需要保持低时延,不能和CPU的运算速度相差太远。

海量数据时代,企业不仅面临更复杂的数据处理需求,对于数据实时分析的需求也明显增加。人们按照数据的访问频度把数据分为冷、温、热数据,其中经常访问的数据占全体数据总量的约10%,但人们通常需要花费90%的时间来访问这10%的数据。这样看来,一个理想的计算平台,存储之间需要通过分层,达到与CPU和内存之间的容量和性能的平衡。因此,需要把频繁访问的数据向上移动靠近内存、不经常访问的数据向下移动靠近SSD甚至于HDD。如果每个层级的容量能够达到上一层级的10倍,同时性能只有十分之一,这样每一层级都(自下而上)可以保留“更热”的数据,使处理器实现快速访问。

英特尔经过几年的布局,基于存储级内存傲腾技术来让数据离计算越来越近,傲腾技术具备大容量和低延时特性,同时成本比内存更低,这样10%的热数据放在傲腾持久内存里来更好的提升整个数据中心系统。

浪潮作为全球领先的综合云解决方案和服务提供商,提供全面的解决方案和服务。对于新技术采取了积极的态度,在中国市场推出了首款采用傲腾双端口NVMe SSD的中端全闪存储—AS5000G5-F系列,实现了高达800万IOPS、0.1ms延时,是当前业界最高性能的中端存储。对于浪潮的“智能计算”战略来讲,存储的性能提升是实现数据离计算越来越近,让AI更好赋能的有效手段。

中科曙光作为高性能计算领军企业,认识到高性能计算对于AI应用的作用,创新推出面向高性能计算、人工智能等多种应用场景,兼顾性能、能效、应用生态。采用浸没式液体相变冷却技术,实现全球领先的计算密度和节能性。整合曙光最新的高速网络和存储技术,实现超大规模线性扩展的新一代硅立方高性能计算,同时中科曙光XData大数据智能平台、自主研发的存储产品在智慧气象、智慧水务、智慧****等行业也积极推动。

AI时代,数据管理比以往更重要

AI时代,终端、边缘、混合云、私有云和公有云之间的数据流,数据安全和保护比以往任何时候都更为重要。同时数据的复杂性让数据管理软件越来越受到市场的重视。2020年1月9日,数据管理市场就发生了一起巨额收购,美国著名的软件投资方Insight Partners宣布50亿美元收购云数据管理备份解决方案的领导者Veeam Software。此次收购除了全球布局之外,另一个原因是Veeam是由俄罗斯人创立的,收购之后可以更好的服务美国数据恢复和保护市场,因为美国市场占到全球50%以上,Veeam成为美国公司可以更好的扩展美国业务。

同时中国数据管理管理厂商也在积极走出海外,爱数打造的全栈超可用灾备云AnyBackup在2019年已经为22个国家提供灾备服务。在中国企业积极走出海外的同时,国际公司也在积极为中国市场提供服务,戴尔科技旗舰级数据保护软件Dell EMC Avamar Virtual Edition (AVE)2020年已经支持AWS中国北京区域和宁夏区域,以及Azure中国在内的多云环境。保护云中重要应用,用户将获得经济高效的云端备份解决方案,数据在云上和本地数据中心之间复制实现容灾。

当然我们也看到,新技术不是一蹴而就的进行变化。而是新技术和现有技术不断迭代的变化。每一年公有云是否替代私有云、闪存什么时候替代硬盘等讨论从没有停止。早在2010年代的时候,很多人预测10年后,公有云肯定替代私有云,也有很多人都说5年后,闪存会替代磁盘。但是现实发展很理性,公有云与私有云并存,闪存和磁盘并存。因为历史的数据很多都存储在历史的设备里。当然我们也看到存储的趋势,闪存存储在消费级领域已经全面超过磁盘存储。企业数据存储,在未来很长一段时间将是闪存和磁盘共存。

IDC预测2025年全球生成的数据为175ZB,而2019年全球生成的数据为41ZB。这些数据的存储需要不同介质设备将继续满足日益增长的数据存储需求。硬盘和闪存都在满足这一需求。提供实际数据的HDD是承载数据海洋必不可少的。而闪存用于在数据库中定位数据或建立索引。应用和相关服务的持续增长意味着这两种存储类型的数量都将增长。

在西部数据,希捷,东芝这三家大型硬盘供应商里,TrendForce报告,希捷的硬盘出货量达到了3150万,同比下降14%,西部数据出货量约为2935万,年同比下降3%,东芝硬盘出货量约1635万,年同比下降20%。但是近线存储硬盘产量达到1500万,年同比增长41%;近线存储指的是数据访问量频次不高,但是不知道何时会突然用到的数据。目前主要是大容量的机械硬盘。

虽然2019年硬盘出货量大幅度下降,但是按照硬盘容量的销售来看,还是处于历史高水平。希捷2020年最新财报就显示,随着大容量存储方案需求的提升,第一财季EB出货量接近创记录水平。希捷正在增加业界16TB硬盘的出货量,以满足强劲的客户需求。

于此同时,闪存的市场并没有想象的那么顺利。据Gartner发布的报告,占有全球4成的存储器市场份额,存储器占到其半导体业务的8成以上的三星电子业绩下滑达29%,跌至行业第二。主要要原因是在2017-2018年由于数据中心的建设需求扩大等因素,闪存市场经历了一个黄金期,各个闪存公司的增产等导致2019年闪存市场供大于求。特别是2019年以后随着中国公司加入存储芯片市场,长期来闪存市场依然是供过于求。

(编辑:厦门网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读