加入收藏 | 设为首页 | 会员中心 | 我要投稿 拼字网 - 核心网 (https://www.hexinwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

观点 | 全闪存头部玩家的战略打法,大数据存储的“终极”答案

发布时间:2023-01-05 08:00:40 所属栏目:大数据 来源:网络
导读: 市场对企业级和消费级存储技术的要求是不一样的,企业级存储要求超大容量,更高的安全系数,更长的寿命,更快的读写速度,随着大数据的发展,数据仓库、数据安全、数据分析和数据挖掘等各种

市场对企业级和消费级存储技术的要求是不一样的,企业级存储要求超大容量,更高的安全系数,更长的寿命,更快的读写速度,随着大数据的发展,数据仓库、数据安全、数据分析和数据挖掘等各种需求迫在眉睫,全闪存技术应运而生,英特尔、戴尔、惠普、华为、镁光、NetApp和西部数据等企业均在研发相关产品占领市场。

大数据存储_大数据存储架构_大数据存储

众所周知,固态硬盘和机械硬盘各有各的优势,而且应用场景也是不一样的,有没有一种可以发挥两种产品优势而弥补其不足的技术,还真有,那就是全闪存技术。据介绍,全闪存阵列是由NAND闪存等固态存储介质构成的独立存储阵列或设备,闪存阵列组成的系统是用于增强可能磁盘阵列等环境的性能或用于取代传统硬盘存储阵列。

由于目前企业存储空间达到了100万GB的空间,全闪存阵列具有运行速度更快,存储量级大,性能可预测性强,操作简洁等特点,全闪存阵列技术在企业级领域的优势是明显的,应用得到了拓展。全闪存存储阵列的缺点是不能实现传统阵列那样的高扩展性,价格方面也是更贵的大数据存储,通用性不足,SSD使得全闪存阵列只适用于高IOPS应用环境。

计算机存储的发展离不开速度、持久性和容量三个指标,在服务器市场上,存储容量和成本之间的较量似乎从未停止。通常情况下,企业从全闪存阵列IOPS的每秒输入与输出数、IO延迟和吞吐率去衡量产品优劣。

大数据带来了很多数据安全问题,伴随着AI、物联网的发展,要想保证企业级服务器大吞吐量同时,还能让企业放心,创新的存储方式得从成本、性能中找到最佳平衡。英特尔发现了一个可以从存储密度、存储容量和架构中改进的技术,它就是傲腾。英特尔?傲腾?技术是一种使用新层来填补成本和容量缺口的全新非NAND、非易失性存储介质,可提供匹配众多工作负载的灵活性。

目前的存储形势有很多,DRAM在性能方面表现出色,但它昂贵、易失,它的可扩展性有限,闪存存储是非易失性的且比DRAM便宜,但它缺乏 DRAM 的性能,机械硬盘以最低的价格提供大量存储,但是物理磁盘在可靠性、物理空间要求、冷却和电源方面带来存储总成本的上升。相比于其它存储形态,傲腾固态盘将内存和存储的属性与高吞吐量、低延迟、高服务质量和高耐久性完美结合,可提供市场上最高的外围组件互连高速数据量密度。

大数据存储架构_大数据存储_大数据存储

“傲腾内存有别于传统内存,并非用于替代传统内存使用,主要作用是用于对传统机械硬盘进行提速。”英特尔技术人员表示。英特尔提供的Optane DC PMMs拥有比传统DRAM更高的容量,提供的容量格式有128G、256G和512G,传统内存条容量范围基本在4GB到32GB这个区间,这些模块有效扩展服务器DRAM内存空间。

据闪德资讯了解到,傲腾的驱动器成本居高不下,750GB的DC P4800X价格约2500 美元,而960GB 企业级闪存驱动器价格仅为240美元,傲腾内存的性价比更高。2020年6月推出的Persistent Memory 200系列傲腾内存条相比前代Apache Pass带宽提高了25%,性能更强,内存速度最大为DDR4-2666,具体的售价英特尔尚未官方公布。

Dell EMC公司是在全闪存存储领域的领导者,其全闪存存储器可选项包括删除、压缩、自动精简配置、快照、加密、复制等,以及一些高级安全特性。戴尔推出的企业级全闪存阵列是非常丰富的,包括XtremIO、PowerScale和PowerMax。

如今的数据中心需要满足高性能需求的存储,更长的负载生命周期,Dell EMC XtremIO 是专门构建的全闪存阵列,可实现对于简单、敏捷、可扩展且完全虚拟化数据中心的承诺,同时大幅减少了基础架构占用空间和 TCO。

戴尔将PowerScale瞄准企业存储应用程序,从人工智能流数据、数据分析、物联网和医疗保健工作负载等领域。公司的PowerScale系列产品基于新的基于PowerEdge全闪存和NVMe节点运行PowerScale OneFS 9.0操作系统,全闪存PowerScale系列每个集群每秒可完成1,580万次输入输出操作。

大数据存储_大数据存储架构_大数据存储

Dell EMC公司之前推出的一款NVMe全闪存阵列产品PowerMax,其性能优于市场上其他全闪存阵列,是目前全球速度最快的全闪存阵列。据Dell EMC公司的相关技术人员表示,PowerMax全闪存阵列是VMAX产品家族的继任者,该产品家族的起源可追溯到1990年,EMC公司在2016年推出了首个全闪存VMAX,PowerMax 8000的单一部署可以提供高达1000万IOPS和每秒高达150GB的带宽。

读写速度快是戴尔全闪存技术的一大亮点之一,Dell EMC的PowerMax可将固态硬盘直接插入PCIe插槽,这样的产品读写是比SATA或SAS更快的速度。戴尔还提供了存储软件套件,支持线内重复数据删除和压缩、免备案主机等,帮助客户将更多数据存储在阵列中。Dell EMC公司表示:“PowerMax的存储架构面向未来,并将支持像存储级存储器和NVMe over Fabrics等新兴存储技术。”

据了解,戴尔可提供戴尔存储SC4020全闪存解决方案,每GB定价低至1.66美元,每GB典型混合闪存配置的成本低至0.58美元,性价比将是戴尔存储系列的特点。Mainstream RI驱动器是业内每GB成本最低、密度最高的企业闪存驱动器,让戴尔的SSD价格大约相当于高端15K硬盘的每GB价格,而性能上比后者提升了24倍,密度上提高了6倍。戴尔全闪存系列产品丰富,性价比很高,覆盖的应用全面,总体的市场占有率很高。

当前大数据在高速增长的同时,带来的挑战也是快速增加,数据的分散性、多样性和动态性是以前没有的。NetApp致力于帮助企业充分释放数据的全部价值,拥有行业领先的闪存解决方案与产品组合,加速实现基础架构更新与业务加速转型。作为一家面向数据密集型企业提供统一存储解决方案的居世界最前列的公司,NetApp的Data ONTAP是全球首屈一指的存储操作系统,NetApp提供功能强大的固态闪存存储阵列。

大数据存储_大数据存储架构_大数据存储

据了解,NetApp的全闪存产品组合包括AFF A 系列、SolidFire系列、EF系列、FAS C190系列等。AFF A系列是简化并打造现代化的存储,该系列全闪存阵列将行业领先的性能、效率和数据管理功能与无缝的云连接结合到一起,SolidFire是全闪存阵列利用 Element API 为私有云提供大规模原动力,EF系列是全闪存阵列凭借快速稳定的响应时间,助力提升数据库、高性能计算以及分析工作负载的运行速度,FAS C190是一款企业级闪存系统,它简单、智能、安全,而且价格实惠。

除了对全闪存技术的研究,Active IQ是NetApp的一大技术亮点。据悉,NetApp的Active IQ每月处理多达10万亿个数据点,Active IQ使用各种AI和机器学习技术来分析数据,并将预测性维护消息发送到阵列,该服务可利用的硬件能力很多,包括ONTAP AI系统,双Nvidia GPU服务器,快速的Mellanox交换机和ONTAP全闪存阵列。

据相关人员介绍,NetApp最先推出的是EF系列闪存,该系列产品主要关注性能,强调性能的极致,从FAS系列衍生出来AFF全闪存更强调闪存的功能性和经济性,AFF可以实现去重,客户可以为不同的场景选择不同的闪存。

2020年5月,华为发布全新一代海量数据存储OceanStor存储Pacific系列,这是一种采用全新的全闪存技术的产品。华为相关人员表示,OceanStor是全闪存存储和融合企业存储及面向新兴大数据分析、移动应用和原生云应用的云存储产品,将性能与效率、成本等达到一种平衡。

据华为介绍,华为海量存储基于领先的数据冗余保护和缩减技术,通过打造系列化专用硬件,结合多协议融合互通、高效缩减算法、多级可靠机制等软件创新,满足客户不同场景的多样化需求,帮助用户降低海量存储的采购和使用门槛。

大数据存储架构_大数据存储_大数据存储

OceanStor存储技术的创新在于打破存储架构、服务和性能边界,以多协议无损互通,采用了创新的下一代弹性EC算法和系列化硬件,灵活应对AI、视频等海量数据场景,帮助企业服务器提升效率、成本和可靠性,释放海量数据价值。

“海量数据在企业数字化转型中扮演着越来越重要的角色,然而当前只有2%的数据被保存,保存下来的数据只有10%得到分析利用,企业面临海量数据存不下、流不动、管不好的问题。”华为云与计算BG副总裁、数据存储与机器视觉产品线总裁周跃峰对媒体记者们这样说道。华为提供OceanStor DJ,通过统一的管理界面、开放的API、云上联动的AI使能、多维度智能风险预测与智能调优,实现存储全生命周期自动化管理与智能运维,提升数据中心运营效率。

华为此前推出的OceanStor Dorado V3是面向企业关键业务打造的全闪存存储系统,采用智能芯片、NVMe架构和FlashLink智能算法实现端到端加速。一套系统同时支持SAN和NAS,企业级特性齐备,为数据库和文件共享等应用提供更高品质的服务,满足数据库、虚拟桌面、虚拟服务器、文件共享场景所需。

全闪存产品是华为保持高速增长率的关键,据悉,2019年其中国区全闪存收入增长率高达128.3%,市场份额由32.7%提升到47.3%。

虽然相对于整个存储市场,全闪存阵列目前的市场占比也就不到两成,2019年全球全闪存市场的销售额约为70亿美金,但是全闪存市场的成长速度很快,从2014年的14.3亿美元增加到2019年的70亿美元,年复合增长率为38%。2020年将是企业级存储方案快速发展的一年,一方面是企业级用户的增长带来更高的数据处理需求,另一方面,闪存工艺的提升给行业带来革新,三是闪存芯片的价格下跌带来全闪存市场的扩大,这些利好的消息无疑增加了全闪存阵列玩家的信心。

在未来的数年里,全闪存技术仍会是企业级数据存储方案的主力军,整个市场的上升空间与机遇是很大的。在高速发展的态势下,预计闪存容量和闪存密度会急剧增加,由于全闪存阵列几乎都是仅限于块的SAN阵列,未来统一存储将是一种行业新需求。对从事全闪存研发的企业而言,如何扩大自己的市场影响力,用戴尔存储大中华高级存储经理张委的一句话就是“全闪存解决方案就是不断通过技术创新实现最适合的性价比产品。”

(编辑:拼字网 - 核心网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!