【浪潮智能存储G2平台采用四层加速数据】
传统的分层有点“简单粗暴”
数据分层在业界已经出现很多年了。 传统分层技术一般将热点小IO数据放入高速SSD,将非热点数据放入低成本HDD。 目的是实现冷热数据之间的大容量、高速数据传输。 成本效益和高性能需求之间的最佳平衡。 虽然这种方式并没有什么问题,但是并不能体现出数据分层技术的含金量快盘,甚至有点“简单粗暴”。 这就好比说,安检将违禁品和合规品区分开来,但这种简单的分类背后,却是各种扫描仪器、识别系统、应急预警措施等一系列智能化机制的协同。
“数据分层的实施考验了厂商的技术实力。”浪潮存储产品部产品经理杨涛表示。 “一般存储系统都是在卷层面对I/O操作进行监控,而卷是在存储层内部的。因此,数据分层需要对I/O操作进行统计,这就需要智能分层算法。在不使用智能算法的情况下,手动移动它们到适当的存储层并能够对工作负载变化做出反应是一个困难的过程。”
浪潮今年新推出的智能存储G2平台创新分层技术,实现了基于智能感知的四层分层技术,并增加了独特的“快盘层”配合和具有自愈能力的“大盘层”。 不仅让业务热点数据读取速度更快,还满足冷数据大容量、高性价比的存储空间需求,实现热数据读取速度三倍提升,体现了浪潮的智能化规划和管理用户数据存储能力。
用“智能感知”分配一切
商业智能感知是数据分层需要考虑的核心因素。 业务感知包括场景设置、访问频率、存储成本等诸多因素。
“数据分层功能就是将不同热点的数据块智能分布在不同的存储层中。浪潮智能存储G2平台的存储池和卷可以实现智能分层功能。以数据块为单位,实现不同存储中的数据存储层之间浮动,不会破坏数据的完整性。”杨涛说。
【浪潮智能存储G2平台四层分层技术】
首先,数字世界对体验提出了更高的要求,对热点数据有大量需求。 在线事务业务、数据库业务、OLTP&OLAP等实时查询业务等使用场景对数据响应IO和延迟有极高的要求。 直接从SSD调用数据是一个理想的选择。 这是典型的IO密集型情况。 热点数据场景。 还有目前流行的流媒体业务,包括热门影视剧、体育赛事的转播等,都需要较高的带宽保证。 想想前段时间热议的《人民的名义》,有多少人同时舔屏观看,这就是典型的高带宽热数据场景,需要SSD盘或者高速HDD盘以提供更高的数据响应速度。 值得一提的是,热数据可以细分为读密集型热数据和读写密集型热数据。 这里先简单介绍一下,后面再详细分析。
其次,有些业务数据虽然不是实时的,但很重要,比如各基金公司的买入/卖出股票数据。 这类数据的处理是“T+1”或“T+2”,并不是因为这些数据不重要。 这是因为在相关数据可用之前获取实时过程数据意义不大。 这可以归因于热数据场景,可以使用普通HDD硬盘。
第三,有一些数据服务对时效性不太敏感,可能只能在几个月甚至一两年内访问。 例如,一些过去的财务账单数据可能仅在月度、季度或年度财务摘要期间使用。 。 另一个例子是,用户不会经常想到翻看自己18届毕业季的照片,可能几个月甚至一两年才访问一次。 这是典型的冷数据场景,低成本、大容量的HDD硬盘是性价比最高的。 选择。
可见,对于数据存储来说,用户需要的响应体验是“(适当的时间)”,而不是一味的“(实时)”。 浪潮智能存储G2平台通过业务感知实现数据的智能分层,让数据在“(适当的时间)”存储在“(适当的位置)”。
尤为重要的是,除了基于智能感知的分层技术外,浪潮智能存储G2平台还采用了快盘层和大盘层两种创新的介质设计。
快盘层使得混合存储的热数据读取性能接近全闪存存储
根据实际业务分析,很多速度要求高的业务都是小IO业务,读操作比写操作更频繁。 实际应用中,读写比可以达到3:1甚至更高。 许多制造商将所有这些数据都放在热数据层中。 这个分类是正确的,但有点不明确。
这甚至比浪潮智能存储G2平台还要好。 浪潮智能存储G2平台将热数据分为读密集型热数据和读写密集型热数据。
为大量读取密集型热数据提供“快速磁盘层”。 顾名思义,快盘层采用四块15TB的单盘,专门用于热点数据的读取加速。 试想一下,四块15TB盘加起来就是一块60TB SSD快盘,基本相当于市面上普通全固态存储的单机容量。 可以将大量的读IO密集型业务放在上面,性能优于业界同水平。 存储量大约增加了3倍。 对于读写密集型的热点数据,也可以放置在15k高速HDD硬盘上,以获得更好的性能保证。
【快盘层SSD支持高IO、高带宽热点数据业务场景】
大磁盘层、具有“自愈”能力的PB级冷数据层
前面提到热门剧,事实上,大量的热门剧和新照片随着时间的推移迁移,会逐渐积累成海量的冷数据,需要存储在NL-SAS等大容量HDD硬盘中,更具成本优势。
目前,硬盘厂商不断通过SMR/HMR等技术来优化硬盘容量。 10TB已经商用。 浪潮智能存储G2平台已率先在冷数据层使用硬盘。 同时在大量HDD硬盘带来的可用性和恢复机制上进行了技术创新。 。
硬盘数量较少时比较容易管理,但当存储系统中同时运行数百或数千个HDD磁盘时,可能会出现故障率增加、读写和重构性能下降等问题,影响系统性能和可用性。 威胁。
在智能存储G2平台上,浪潮开发了一系列可以充分利用10TB氦气硬盘的智能技术。
首先,浪潮与合作伙伴建立了协作机制,为硬盘定制了一系列特殊参数,并对硬盘的原材料和部件进行了一系列特殊约束,以增强大容量硬盘的稳定性和可管理性。硬盘容量。 做这项工作的厂家并不多。
其次,通过收集硬盘定制和标准参数、IO响应延迟等信息,G2可以通过上下电对疑似故障盘进行自我修复,避免因单盘假故障而导致频繁重建。 它可以根据这些参数对硬盘进行深入的监控。 提供预警,缩短维护时间,有效提供系统可用性。
同时,基于iRAID、RAID6 skew 等技术,提高了读、写、重构率,保证系统即使在使用大磁盘的情况下,仍然具有更好的性能。
【G2平台开发了一系列智能技术,保障10TB氦气硬盘稳定运行】
浪潮智能存储G2平台走在技术创新前沿
浪潮智能存储G2平台于今年2月发布。 它打破了过去以产品为中心的设计思路,从应用需求的角度为用户提供超前的规划和布局,重新定义了智能时代存储的未来发展方向。
智能四层分层技术只是其中比较引人注目的技术创新之一。 其他还有实时数据压缩、SAN异构虚拟化、在线透明迁移等多项创新,均处于行业领先水平。
【浪潮智能存储G2平台】
“智能变革,满足一切变化”是浪潮智能存储G2平台的主要理念。 其认为,智能化变革的核心是智能化,即从存储软件、硬件、系统层面融合大量智能技术,实现智能感知、智能操作。 技术架构、智能适配与调度。 基于此,G2平台推动企业数字化转型进程。
标题:快盘 浪潮智能存储平台用四层分层为数据提速
链接:https://yqqlyw.com/news/xydt/4944.html
版权:文章转载自网络,如有侵权,请联系删除!